[問題] 顯存不足內存來湊

看板DataScience作者 (最佳化)時間5年前 (2018/11/29 21:31), 5年前編輯推噓12(12013)
留言25則, 10人參與, 5年前最新討論串1/1
作業系統:windows10 使用工具:keras with tensorflow backend 問題內容: 因為gpu是940MX 顯存只有2G 最近train model 瘋狂遇上resourceExhaustederror 之前有聽說TF有顯存不足內存來補 但不知道Keras是否也能如此,爬了一些網上資料後卻好像沒有類似的說法 不知道版上大大們對於keras 使用TF backend調用內存是否有些頭緒 還是這類的補法終究只是都市傳說 小弟不勝感激 ----- Sent from JPTT on my Samsung SM-J710GN. -- 標題 [問卦] 有沒有被告白的八卦?

我被告白過 她說"請緊握扶手站穩踏階" 讓我好害羞
yspen: 上次有個女聲很親切的告訴我 先按解除鎖定 再按熱水 mausstin: 以為會被報警抓走

有時候本肥宅會魯到開Google翻譯我喜歡你 叫他唸出來
-- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 140.115.142.88 ※ 文章網址: https://www.ptt.cc/bbs/DataScience/M.1543498316.A.C7C.html ※ 編輯: Fordevoted (140.115.142.88), 11/29/2018 21:34:39

11/29 21:46, 5年前 , 1F
2G也只能跑入門範例吧,確定要做的話顯卡錢是最不能省的
11/29 21:46, 1F

11/29 21:55, 5年前 , 2F
不能 雖然有share memory可用 但是tensorflow不支援
11/29 21:55, 2F

11/29 21:55, 5年前 , 3F
11/29 21:55, 3F

11/29 22:07, 5年前 , 4F
因為activation和normalization也都會吃vram
11/29 22:07, 4F

11/29 22:08, 5年前 , 5F
如果真的vram不足的話 調整batch size或是
11/29 22:08, 5F

11/29 22:09, 5年前 , 6F
檢視一下model的效率
11/29 22:09, 6F

11/29 22:11, 5年前 , 7F
backend是用來檢視由keras建立的model下
11/29 22:11, 7F

11/29 22:12, 5年前 , 8F
用到的記憶體量
11/29 22:12, 8F

11/29 22:43, 5年前 , 9F
存錢買顯卡ㄅ
11/29 22:43, 9F

11/30 02:02, 5年前 , 10F
2G有點慘...
11/30 02:02, 10F

11/30 02:02, 5年前 , 11F
11/30 02:02, 11F

11/30 02:02, 5年前 , 12F

11/30 02:03, 5年前 , 13F
trade-off一下
11/30 02:03, 13F

11/30 13:02, 5年前 , 14F
還真的是都市傳說
11/30 13:02, 14F

11/30 20:40, 5年前 , 15F
TF>1.9.0 per_process_gpu_memory_fraction設大於1就行了
11/30 20:40, 15F

11/30 20:42, 5年前 , 16F
代價是速度降1/10(1080ti) 940mx不知道會降多少
11/30 20:42, 16F

11/30 21:18, 5年前 , 17F
11/30 21:18, 17F

11/30 21:18, 5年前 , 18F
cuda-c-programming-guide/index.html#um-requirements
11/30 21:18, 18F

12/01 13:12, 5年前 , 19F
還要compute capability>6 940mx無法使用
12/01 13:12, 19F

12/02 01:39, 5年前 , 20F
現在顯卡不貴八,1070也才1萬
12/02 01:39, 20F

12/03 09:59, 5年前 , 21F
認真覺得如果連顯示卡都不想買還是別做了...工具是必要的
12/03 09:59, 21F

12/10 02:08, 5年前 , 22F
真的要跑大架構就買泰坦卡吧
12/10 02:08, 22F

12/12 22:53, 5年前 , 23F
調batch size或使用data generation
12/12 22:53, 23F

12/13 12:58, 5年前 , 24F
能不能調精度啊 用float16之類
12/13 12:58, 24F

12/29 13:38, 5年前 , 25F
其實外接顯卡可以試試 真的不錯用
12/29 13:38, 25F
文章代碼(AID): #1R_-fCny (DataScience)