Re: [請益]未來的學習方向
※ 引述《flightheory (飛行原理)》之銘言：
: 真正熟悉是C#, 摸了兩年已經很有心得, PM很放心我寫的C#程式, 尤其是WPF和XAML部分.
: 但無論如何, 既然你提到了Python和C#, 這兩個我都接觸過, 就來試著與你討論討論.
: 先講結論, 個人看法不建議同時學Python和C#, 兩者必須二擇一. 因為兩者差異太大了.
: Python的好處是你很容易用Keras和Tensorflow做出深度學習的東西, 學習門檻很低. 但
: Python程式的速度不快, 以前我用CPU跑CNN, 要在週五下班前開始讓程式跑, 等週一上班
: 才來看結果. 現在用1060 6GB的GPU來跑, 所花時間雖然是1/30, 但跟我希望的還是太慢.
: 所以我打算把手頭上的醫材做到差不多時, 改用C#&CNTK來跑深度學習. 以我對C#的理解
: 速度一定比Python快許多.
Neural Network吃的是floating point的運算速度。簡單看一個連結
https://bit.ly/2XmAWpR
1060的fp32是4.4tflops。intel第一個1tflops的cpu是i9-7980XE。雖然各總差異，但大致上nn一定要用GPU是毋庸置疑的。
Pytorch, Keras, Tensorflow, CNTK的gpu運算都是架在Cuda上，應該說是cuDNN上（n的proprietary library)。所有dl/ml的training時間，99%都在gpu裡，你Python換c#一點都不會有任何影響。
N公司非常狡詐，我們知道fp16在大部分NN運算就夠了，N就把10xx的fp16運算crippled，這一代的fp16是f32的1/64。讓你乖乖買昂貴的AI專用卡。還好Rtx這一代，因為TensorCore原因（4x4Matrix)，稍微解放fp16，所以你用Rtx2060的fp16 MixedMode，運算速度可跟1080ti一拼。
AMD gpu不好用，因為他沒有cuDNN。OpenCL沒有人開發clDNN，AMD又另外搞ROCM/HIP，Intel搞MKL-DNN，沒有整合努力。你現在要運算快又便宜就是選RTX2060，除非你的dataset太大。
: 當初有人問我為何辭去公職? 難道不怕公司怎麼了? 我說我相信AI會紅個十年, 等AI退燒
: 而公司又怎麼了, 我也60歲可以退休, 所以就給它拼個十年看看, 或許真的能高雄發大財
我們現在有點像在dk效應的谷底。看一些美國論壇，一堆Engineers講30年，Level5的自駕車還要30年，雖然某某大教授（NN的權威）說他樂觀的估計2032年有機會。
我非常看好現在的AI，但是還是需要很多錢，很多人力，很多的研究，希望大家不要被將要來的AI Winter洗出去。
Software is eating the World，這還是未來的趨勢。
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 36.231.155.15
※ 文章網址: https://www.ptt.cc/bbs/Soft_Job/M.1551076193.A.3FC.html
※ 編輯: oopFoo (36.231.155.15), 02/25/2019 14:58:46
推
02/25 19:31,
5年前
, 1F
02/25 19:31, 1F
→
02/25 19:31,
5年前
, 2F
02/25 19:31, 2F
→
02/25 19:31,
5年前
, 3F
02/25 19:31, 3F
→
02/25 20:24,
5年前
, 4F
02/25 20:24, 4F
→
02/25 20:24,
5年前
, 5F
02/25 20:24, 5F
→
02/25 20:25,
5年前
, 6F
02/25 20:25, 6F
→
02/25 20:53,
5年前
, 7F
02/25 20:53, 7F
→
02/25 20:54,
5年前
, 8F
02/25 20:54, 8F
→
02/25 21:04,
5年前
, 9F
02/25 21:04, 9F
上一代最高cp值
推
02/25 21:27,
5年前
, 10F
02/25 21:27, 10F
對。
如果可以的話，賣1066，買2060，開始使用fp16。不行，就多一塊1066。
→
02/25 22:04,
5年前
, 11F
02/25 22:04, 11F
→
02/25 22:05,
5年前
, 12F
02/25 22:05, 12F
沒錯。
→
02/26 01:22,
5年前
, 13F
02/26 01:22, 13F
可插到4 gpu。只要主機板還有pcieX4的插槽都可。
推
02/26 04:28,
5年前
, 14F
02/26 04:28, 14F
租gpu也不是不行，但對原po不適合。
※ 編輯: oopFoo (36.231.235.247), 02/26/2019 11:41:20
討論串 (同標題文章)