看板 Soft_Job 關於我們 聯絡資訊
小弟是data engineer,工作內容包含伺服器維運。 目前手上有一台server,上面運行JupyterHub,要供8名data scientists使用。(沒有GPU) storage僅有100 GB,所以常常會需要跟科學家說: 「您好,您的資料太大囉,可否刪掉XXX資料夾?」 一來一往都快被煩死了,所以大約今年過年後就嘗試爭取加購server storage, 可是一直都沒有成功。 直到最近,server storage一直在90%徘徊,我很認真的請老闆考慮能否購買? 他要我提出目前server storage不夠用的證明。 請問我可以貼給他這張圖嗎? https://i.imgur.com/yCbpFir.jpg
============================================================================== 話說,越想越氣越睡不著。 我維運的是一台ESXi,先不談細節SPEC,只談Storage 2TB。 1. RedHat 500GB: 上面跑一個沒有人在用,價值台幣millon等級的系統。 (我問老闆,買這系統的目的。他回:「斷詞」) 2. centOS 100GB: JupyterHub 3. WinServ 100GB 4. centOS 250GB 5. centOS 366GB 以上幾台僅列出available storage,各有任務。除了1.沒人用,其他四台都快爆了。 如題,我要個storage要了半年。今天senior data engineer不小心說溜嘴, 「我們要幫明星科學家買一台專屬的GPU server。」 我問,「是哪張顯卡?」 他回,「嗯…我忘記了,那台server能裝的最好的。」 (拜託可以不要再買到垃圾嗎?你們已經買過巨型垃圾軟體了) 我問,「disk有多大?」 他回,「這個不重要。」 (幹你老師,假如你又只買2TB就不要叫我維運。) ============================================================================== 另外想請教,各位前輩遇到 講一嘴上月球計畫,只給腳踏車執行。有功自己拿,出錯你來扛 的這種編制上 "只規劃、不用執行的senior engineer",會如何應對呢? -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 59.115.48.4 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Soft_Job/M.1570204112.A.16A.html
yamakazi: 這不是系統設計的基本面試題? 10/04 23:53
yamakazi: https://www.jiuzhang.com/qa/1265/ 10/04 23:55
goldflower: 連100g不夠用都要解釋的公司不如先考慮跳槽 10/05 00:00
等年終中QQ
adern9: 我相信你老板連這張圖的笑點都看不懂 10/05 00:13
我覺得他連自己的標配筆電是2TB都不知道
kleinfour: 裝monitoring & alert tool,然後收件者只填老闆 10/05 00:20
哈,這招不錯,可惜Notes信箱居然可以設黑名單QQ
invidia: 這張圖的笑點是什麼 10/05 00:21
感謝版友,建議我應該貼這張 https://i.imgur.com/XZVGSpx.png
leoloveivy: 帶usb去插阿 10/05 00:22
pyCassandra: 同三樓xD 10/05 00:31
※ 編輯: PhEuTaEnRg (59.115.48.4 臺灣), 10/05/2019 00:37:50
iamshiao: 圖讓我笑了 10/05 00:38
x000032001: 跟那八個人說disk用完囉 叫老闆買新的吧 relay attack 10/05 00:50
olen0622: 100gb做資料科學我笑了 10/05 01:03
I'm working in Division of Big Data.
bill0205: 100G能放多少==? 就算雲端 也沒多少錢 10/05 01:08
bill0205: ssd 128G好像也不到1k 10/05 01:10
※ 編輯: PhEuTaEnRg (59.115.48.4 臺灣), 10/05/2019 01:19:34
stkoso: 問那8個人每個月花多少時間在刪資料 算成薪水給老闆 10/05 01:15
※ 編輯: PhEuTaEnRg (59.115.48.4 臺灣), 10/05/2019 01:56:04
nctukmdick: 我實習都能用超過5tb了... 10/05 01:39
※ 編輯: PhEuTaEnRg (59.115.48.4 臺灣), 10/05/2019 02:12:33
john0312: BigData.xls 10/05 02:35
a1982213: 叫那八個把他們每天產的資料算一算給你老闆,不過我也 10/05 04:22
a1982213: 建議你換家了……作維運很怕這種需要時百般刁難的 10/05 04:22
Hevak: 樓上+1,所謂的證明不是提出死的數字,而是提出為什麼會炸 10/05 05:20
Hevak: 例如因為資料科學家要正常算東西的話每天一定要產多少, 10/05 05:20
Hevak: 只能存 100GB 根本沒辦法產出實際能用的資料 10/05 05:20
mathrew: 同三樓 連100GB都要靠北靠木 快跳比較實在 10/05 06:48
axuiolji: 塊陶啊~~~很屎 10/05 07:11
xephon: 看到標題就猜到推文了 笑死 10/05 07:28
ChungLi5566: 圖看不太懂 如果是接FC的storage那每GB成本上萬 10/05 08:35
ChungLi5566: 因為DR也要擴一樣的容量 10/05 08:36
qwe753951: 我還以為是100G RAM不夠用… 10/05 08:43
PoloHuang: ...這老闆真的天才 出錢不懂還廢話一堆 10/05 08:51
ladyboy99: 等等 100G 根本是 small data 吧 10/05 08:54
x3795566: 做影像很容易一個資料集就超過100G了... 10/05 09:28
vi000246: 寫支程式 滿了就寄信通知老闆跟RD 然後就沒你的事囉 10/05 09:34
vi000246: 已經盡到通知義務了 容量不會自己長大 你也無能為力 10/05 09:35
gust0985: 可以請使用者提出加大空間申請,讓他去跟你老闆溝通, 10/05 10:18
gust0985: 畢竟使用空間的是他不是你…… 10/05 10:18
gust0985: 而且你們沒監控系統嗎? 空間不足就發告警給相關人員, 10/05 10:26
gust0985: 有責任感、權限的使用者應該就會自己去處理了…… 10/05 10:26
maxqq: 放輕鬆做好自己工作,到哪都會遇到只考慮自己的豬頭 10/05 10:43
maxqq: 不過要是我可能會趁有空寫一個自動發信的 scripit 10/05 10:44
maxqq: 反正要爆掉,就寄信給所有人請刪除最大的容量 10/05 10:44
maxqq: 可能分為 urgent/ critical/ warn 在寄送信件吧 10/05 10:46
maxqq: 反正不要干擾到自己每天心臟復發就好 10/05 10:46
maxqq: 我上一家公司,我們光是提供給pm/designer 的設計參考設備 10/05 10:47
maxqq: 足足應該就花了百萬 10/05 10:48
maxqq: 我看那堆機器堆在後面,都覺得都是錢,真浪費 10/05 10:48
a52655: 100G...看來我還沒睡飽 10/05 11:37
jej: 爆給他看 他就懂了 10/05 12:42
myjackchen: 你很有梗 10/05 13:02
dragon0518: 上雲端吧= = 10/05 13:46
Wush978: 請Data Scientist幫你說明吧。他們才是User 10/05 14:07
Wush978: 把老闆請你舉證的事情轉告你的Data Scientists同事們 10/05 14:08
Wush978: 把你的問題變成他們的問題(因為實際上硬碟不夠是他們痛) 10/05 14:08
Wush978: 如果他們不懂電腦,你可以輔助他們。但是不該由你去要 10/05 14:08
Wush978: 畢竟這個問題影響最大的是你的同事們,不是你 10/05 14:09
w426: 老闆就是給豬腳要你搞出滿漢全席 他們覺得理所當然 不行就 10/05 18:50
w426: 換人 10/05 18:50
clamperni: -_- 10/05 22:10
qpowjohn: 丟個prtg免費license掃硬碟剩餘容量就好了 10/05 23:20
qpowjohn: 其實老闆要的只是一個證據,你每天都找人毀屍滅跡當然 10/05 23:21
qpowjohn: 沒證據 10/05 23:21
penolove: 哪間公司可以先說嗎 10/06 00:16
louner: 同Wush 10/06 09:30
newversion: 很簡單,加購1TB ram, 再做ram disk 10/06 10:18
HYL: 立兩個IT政策,一是一個user只能用X GB的空間,二是檔案超過3 10/07 02:30
HYL: 0天自動刪除,cc老闆,當他沒回信就是同意了,然後一個月後等 10/07 02:30
HYL: 收抱怨信,收集十封之後給老闆報告狀況 10/07 02:31
friendever: 我們都1PB起跳... 10/07 14:35
maju6209: 100GB? 我還以為你在說相機記憶卡 10/07 20:31
lusaka: 公布公司名,普渡眾生 10/08 02:42
as885212: 要證明蠻妙的 10/08 10:49
as885212: 提不出證明也是蠻妙的 10/08 10:49
y3k: 100G真的是給豬腳要滿漢全席XDD 浪費時間的薪水都夠買幾T了吧 10/10 23:25