AI大師請進已回收

看板Marginalman作者 (溫水佳樹的兄長大人)時間1年前 (2025/01/22 17:47), 編輯推噓2(202)
留言4則, 3人參與, 1年前最新討論串2/5 (看更多)
我今天在研究模型大小跟訓練速度的關係 我看到的預估方式是macs*2/FLOPS 大概就是訓練時間 可是我的訓練結果感覺怪怪的 我訓練集用Fashion MNIST 卡是1張A100 跑10個epoch Resnet18的訓練速度是145秒 Resnet34是176秒 mnasnet系列都接近200秒 從參數量來看 resnet34是20M resnet18是10M mnasnet系列大概2-6M 看macs 差距比差不多 我不太理解問題在哪 訓練集太小 導致時間都花在io? -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 223.136.96.32 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Marginalman/M.1737539252.A.2B4.html

01/22 17:48, 1年前 , 1F
你是大師
01/22 17:48, 1F

01/22 17:49, 1年前 , 2F
我垃圾
01/22 17:49, 2F

01/22 18:23, 1年前 , 3F
I/O 平行運算
01/22 18:23, 3F

01/22 18:23, 1年前 , 4F
這種秒數級別的差距 搞不好你CPU溫度差一點就有影響了
01/22 18:23, 4F
文章代碼(AID): #1daBwqAq (Marginalman)
文章代碼(AID): #1daBwqAq (Marginalman)