看板 Storage_Zone
作者
標題 [請益] SSD部份檔案經過強讀取之後變成0KB
時間 Thu Dec 27 19:51:18 2018
作者
標題 [請益] SSD部份檔案經過強讀取之後變成0KB
時間 Thu Dec 27 19:51:18 2018
我買的硬碟是冠元的TP6500 512GB
http://i.imgur.com/DqJgmcq.jpg
![[圖]](https://i.imgur.com/DqJgmcqh.png)
一切使用完全正常
但是只要我拿來做神經網路的訓練
A, B dataset 加起來總共約一百萬張小於100KB的圖片
在數百個epoch(輪)的讀取之後
第一次是五百出頭 第二次是七百出頭
程式就會因為資料IO error停下來
查了之後發現有兩三張圖片變成0KB 導致讀取失敗
由於當下就排除問題了，所以沒有截到圖
請問大家認為這會是什麼問題呢？
-----
Sent from JPTT on my Asus ASUS_Z01KDA.
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 42.73.192.12
※ 文章代碼(AID): #1S9BovFx (Storage_Zone)
※ 文章網址: https://www.ptt.cc/bbs/Storage_Zone/M.1545911481.A.3FB.html
→ : "爆了" 就這麼簡單......
你有加散熱片或散熱風扇幫助散熱嗎???
建議你試裝這些散熱元件(尤其主動的風扇),再跑看看1F 12/27 19:57
都沒有，沒有給他任何被動或主動散熱你有加散熱片或散熱風扇幫助散熱嗎???
建議你試裝這些散熱元件(尤其主動的風扇),再跑看看1F 12/27 19:57
如果確定是過熱就去找個的風扇給他好了
推 : 你這種用法必死的，因為nand區塊有讀寫次數限制
你這樣操沒有給他搬移做wear leveling的機會
建議改用RAM disk4F 12/27 21:41
我是一次寫入然後數百次讀取你這樣操沒有給他搬移做wear leveling的機會
建議改用RAM disk4F 12/27 21:41
而且一個檔案一個小時內不會被讀到第二次
不確定這樣的wear有沒有太大
推 : NAND有讀的次數限制嗎 都讀取的讀到死去不太合理= =7F 12/27 22:15
我查到的是read disturb在約莫數百到數千次讀寫之後
NAND block內的資料會跑掉，但是cell不會死
很像是我的狀況
硬碟沒死，被讀取的資料壞了
→ : RAM disk，終保的ram……8F 12/27 22:23
是推薦用RamDisk取代嗎※ 編輯: kaltu (42.73.29.6), 12/27/2018 22:54:31
推 : DDR3現在好便宜的，弄個二手Xeon插滿128G也不用多少9F 12/27 23:35
我的CPU是9700K QQ→ : 錢效能還遠大於SATA
啊歹勢原來你買的是PCIe的
啊不然買PCIe的RAM轉卡也可以，但是不知道現在還有沒有10F 12/27 23:35
這種卡很難買吧啊歹勢原來你買的是PCIe的
啊不然買PCIe的RAM轉卡也可以，但是不知道現在還有沒有10F 12/27 23:35
→ : 阿就它沒寫read disturb 的演算法 當然讀多次就爆了14F 12/28 02:54
這顆的主控晶片沒有解這個issue嗎？我看wiki是很罕見的狀況才會沒寫read disturb
※ 編輯: kaltu (42.76.28.143), 12/28/2018 07:57:34
推 : 數千次讀取都沒差,512G SSD沒有那麼爛,有留意溫度S.M.A.R.T圖...你這片還是新的,冠元的品質有那麼爛?讀的次數那麼多,Cache開大一些會有用15F 12/28 09:12
推 : 換900(5)P 試試18F 12/28 10:52
→ : 我個人是認為先改善散熱(直接土砲電風扇吹SSD)
若有改善,那表示問題在此,你再實質強化散熱
買散熱片,甚至鎖上小風扇19F 12/28 11:45
若有改善,那表示問題在此,你再實質強化散熱
買散熱片,甚至鎖上小風扇19F 12/28 11:45
我目前也懷疑是過熱
因為訓練神經網路的時候GPU會滿載
搭配的GPU並非公版渦輪扇型號
所以造成機箱高熱，可能會影響到SSD
想請教一下這種機箱內高溫的狀況散熱方案配置的訣竅
推 : 8G算1000塊，你大量買128GB，16000元就行了，終保RAM disk。
軟體推薦primo ramisk。
這種大概是4支32GB比較好，
更正：primo ramdisk22F 12/28 13:03
軟體推薦primo ramisk。
這種大概是4支32GB比較好，
更正：primo ramdisk22F 12/28 13:03
推 : 8g 1000??????27F 12/28 13:33
→ : 再過一陣真的有可能，目前看到新品8G最低到120028F 12/28 13:45
推 : 正常大牌至少2400 少說160029F 12/28 13:51
→ : 又是農曆年前宰羊期，短時間內也降不下來了。
虛擬貨幣暴跌，要便宜的話，去二手市場撿看看礦機拔下來的殺肉貨。
原PO的MB應該也沒有那麼多的記憶體模組插槽可用，大概只能選32GB四支這種組合了，這樣子就貴了。
RAM的市場沒那麼好了，虛擬貨幣暴跌，挖礦的話，連電費可能都不夠，新礦機沒人組，舊礦機又丟到市場賣，供給遠大於需求的話，勢必就是跌價了，只是亞洲市場就是農曆年前不跌，農曆年後才跌。30F 12/28 13:51
虛擬貨幣暴跌，要便宜的話，去二手市場撿看看礦機拔下來的殺肉貨。
原PO的MB應該也沒有那麼多的記憶體模組插槽可用，大概只能選32GB四支這種組合了，這樣子就貴了。
RAM的市場沒那麼好了，虛擬貨幣暴跌，挖礦的話，連電費可能都不夠，新礦機沒人組，舊礦機又丟到市場賣，供給遠大於需求的話，勢必就是跌價了，只是亞洲市場就是農曆年前不跌，農曆年後才跌。30F 12/28 13:51
推 : 試試看別家的SSD，說不定是別的問題40F 12/28 17:00
※ 編輯: kaltu (42.76.28.143), 12/28/2018 18:01:42--
作者 kaltu 的最新發文:
- 38F 10推
![]()
他的FB文揭露了很多問題 首先文章使用的語言就不通順導致極難閱讀 代表這個人平時對文字的掌握度和使用習慣並不是以大眾溝通和使人理解為導向的 第二他是停止翻譯工作十數年，臨時被邀請來兼職電影翻譯的，這 …237F 127推![]()
旁邊滑手機的家人 「你剛才在聽的那個rapper是誰？ 我 『蛤？ 「她剛剛rap唱什麼 私にはここにいる限り 什麼 ずっとこれから永遠に 的那個啊 『…… 「聽起來還不錯 滿有意境的 『……我在看熊 …111F 57推 2噓![]()
到了刷卡頁面才發現價格不對 差一點被騙 Sent from JPTT on my Google Pixel 3a XL.24F 16推![]()
這是我回國完成14天檢疫後最後一封簡訊 規定一直都是這樣 前面有人貼條文了我就不再拍我自己的通知書 反正總共就是21天的管理 前14天非常硬， 有跟家人同住的話是連自己的房間門都不能出 每天紀錄兩次體 …17F 13推 2噓
點此顯示更多發文記錄