[問題] 深度學習SSD壽命

[PttCraft (WOT NA 怒伯)]

最近下載了faceswap玩玩

看了一下說明

在訓練機器創建模型的時候

session iteration動輒上百萬次

目前電腦上有SSD也有傳統硬碟

想請教一下有經驗的前輩

這類程式的使用，對SSD壽命會不會有影響?

可以放心地把工作區域放在SSD上嗎?

謝謝

--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 174.103.163.88 (美國)
※ 文章網址: https://www.ptt.cc/bbs/Storage_Zone/M.1642190897.A.923.html
→ school4303  : 你的ram不做事嗎
https://i.imgur.com/ikPF9kB.jpg

我現在工作區放在傳統硬碟上

看他的atcitive time上上下下常常跳到高檔

所以有此一問

RAM穩定維持在使用20GB/32GB (有一邊開視窗跑其他遊戲程式)

CPU(AMD 5 3600)使用率大約維持在60%上下

GUP(1070 8G)使用率約在70-80%，8G vram持續維持在滿檔

→ ddity       : 寫入比較損耗壽命
→ maniaque    : 建議原PO跑一次建模前後各開啟看一下smart 數值
→ maniaque    : 這樣就知道累積的寫入讀取量
推 giorno78    : 買更多ram 用 ramDisk
推 fujisawa    : 你找個監控軟體例如HWInfo看一下大約的寫入量 再去
→ fujisawa    : 對照一下SSD的TBW 就知道大略的壽命影響了
OK我試試看

推 skywgu      : 980 pro寫掉40t，CDI只掉1%給你計算參考
推 skywgu      : 當然如果不在意機械硬碟那精美的延遲及噪音那就繼
→ skywgu      : 續無腦用…畢竟企業碟都有250萬mtbf …
推 nissptt     : 花大把時間計算，儲存量也不大，該擔心的不是SSD使
→ nissptt     : 用壽命，而是SSD的猝死可能性吧！！
→ maniaque    : raid0 ssd can solve problem
→ maniaque    : raid1 ssd can solve problem
→ tomsawyer   : raid can NOT solve problem, only ramdisk can
→ maniaque    : no , only Money can solve problem ....:D
推 greg7575    : this is a book
→ maniaque    : that is a cat
推 s860355     : meow
推 ilanese     : 買夠多的RAM，裝終保的RAM disk軟體
推 FreedomTrail: Weeeeeeee~~~
推 teddyissad  : 記得回報喔 我也想看看吃多少
上次training沒有成功結束就crash了

大約是275000 iteration

HWinfo64的紀錄寫入了大約400GB

磁碟空間沒有顯著的減少，所以大概是同一個檔重複寫入更新吧

這樣算起來如果跑個一百萬次 寫入的量大概會接近2TB

我的SSD 壽命大約是600TBW

2TB說多不多說少不少

所以我就想說再回去用HDD把整套流程玩熟了再回來用SSD產出

但是很怪的是用HDD每隔一陣子就會卡住

task manager會看到HDD Active time 100%滿檔 可是傳輸速度很低

卡住的時候session iteration的數字就不跳了，好像暫停程序的感覺

卡一陣子之後才會又開始跑

但是跑了48小時都還沒crash

不知道是什麼問題

推 linlongchau : 棺材裝死人不是裝老人, SSD猝死非常可能
※ 編輯: PttCraft (174.103.163.88 美國), 01/20/2022 07:05:00
※ PttCraft:轉錄至看板 DataScience                                 01/20 07:06
→ kaltu       : 五年前用冠元SMI主控的SSD資料碟死過單檔案
→ kaltu       : 某些檔案經過training反覆讀取之後會變成0byte，問
→ kaltu       : 板上說懷疑是韌體mitigate read disturb的演算法沒
→ kaltu       : 有預期要處理這麼高強度的讀取