[問題] 初學者 python資料處理

看板Python作者 (mathlover)時間7年前發表 (2018/02/01 14:15), 7年前編輯推噓16(17144)
留言62則, 24人參與, 7年前最新討論串1/1
各位前輩大家好,小弟在工作上有很 多時間都在處理數據,平常都用excel ,頂多寫一些VB幫助重覆的大量數據 處理。 最近開始在摸python,但到目前為止 ,感覺不出python處理資料的強項, 也許是我還太嫩,但google都說 python處理資料不錯! 我工作上都是算一些變異數、標差、p 值......,或是畫關係圖。 請問前輩們,python能做什麼excel做 不到的? -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 125.230.39.96 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1517494541.A.37F.html

02/01 22:17, 7年前 , 1F
不用錢這件事情 Excel 就做不到了
02/01 22:17, 1F
請問您的意思是?excel也免費阿 ※ 編輯: mathlover (125.230.39.96), 02/01/2018 22:19:49

02/01 22:45, 7年前 , 2F
Excel 免費?
02/01 22:45, 2F

02/01 23:21, 7年前 , 3F
用 excel 沒付錢不代表免費吧 @@
02/01 23:21, 3F

02/01 23:40, 7年前 , 4F
M$法務:你說什麼免費?再說一次?
02/01 23:40, 4F

02/01 23:40, 7年前 , 5F
Excel用免費的小心被檢舉 XD
02/01 23:40, 5F
公司有付錢=我免費啊......

02/02 00:08, 7年前 , 6F
excel有什麼是python做不到的
02/02 00:08, 6F
畫box chart、各式直條圖、曲線圖?

02/02 00:27, 7年前 , 7F
是反串吧
02/02 00:27, 7F
不是!我很認真學python,只是在想要怎麼應用在工作上!

02/02 00:50, 7年前 , 8F
XDDDDDDDD
02/02 00:50, 8F

02/02 01:12, 7年前 , 9F
你碰到的數據不夠大 百萬筆資料就有差了 excel會很當
02/02 01:12, 9F
這到是真的!excel最多140幾萬筆資料

02/02 01:13, 7年前 , 10F
還有有些特殊的需求 excel是比較難做。寫程式處理更快
02/02 01:13, 10F

02/02 01:13, 7年前 , 11F
一些
02/02 01:13, 11F
感謝m大的回覆!能否請您舉個例子? 這樣我學python比較有方向

02/02 06:55, 7年前 , 12F
沒有花錢買就是免費 XD
02/02 06:55, 12F
※ 編輯: mathlover (125.230.39.96), 02/02/2018 07:54:20 ※ 編輯: mathlover (125.230.39.96), 02/02/2018 07:55:35

02/02 08:20, 7年前 , 13F
畫圖用matplotlib就做得到了 自由度還比Excel大太多了
02/02 08:20, 13F
感謝回覆!

02/02 08:22, 7年前 , 14F
可以批量產圖再匯出成指定格式 唯一的缺點就是功能跟參數太
02/02 08:22, 14F

02/02 08:22, 7年前 , 15F
多要找很麻煩XD
02/02 08:22, 15F
感謝回覆!

02/02 08:26, 7年前 , 16F
excel的數據都假設只有x y 如果 dimension 更多就沒辦法用
02/02 08:26, 16F

02/02 08:29, 7年前 , 17F
excel 處理文字類 跟很多層if的資料整理也很煩
02/02 08:29, 17F
感謝回覆!通常有if的情況我會寫VB去跑

02/02 10:55, 7年前 , 18F
畫圖還有seaborn plotly可以用
02/02 10:55, 18F

02/02 10:55, 7年前 , 19F
公司付錢給你用是已經算在薪水裡面了
02/02 10:55, 19F

02/02 10:57, 7年前 , 20F
多去看看有哪些lib可以用吧…
02/02 10:57, 20F

02/02 10:57, 7年前 , 21F
如果只要基本統計繪圖bokeh你可以看看
02/02 10:57, 21F

02/02 10:58, 7年前 , 22F
按錯案到噓
02/02 10:58, 22F

02/02 11:06, 7年前 , 23F
補推
02/02 11:06, 23F
感謝回覆!

02/02 11:26, 7年前 , 24F
想要直線圖長條圖 可以搭配d3.js
02/02 11:26, 24F

02/02 11:27, 7年前 , 25F
由python餵資料 在瀏覽器顯示圖表
02/02 11:27, 25F
感謝回覆!

02/02 11:42, 7年前 , 26F
python可以做的應用比Excel多太多了吧
02/02 11:42, 26F

02/02 15:56, 7年前 , 27F
Excel光是十萬筆資料就開始龜速了
02/02 15:56, 27F

02/02 19:01, 7年前 , 28F
那就用excel就好了
02/02 19:01, 28F

02/02 19:19, 7年前 , 29F
看來你是沒遇過excel打不開的資料
02/02 19:19, 29F
我最多遇到一個excel檔有100M,打開就要30~40秒XD

02/02 20:17, 7年前 , 30F
上次看到有人論證 excel vba 是圖靈完備
02/02 20:17, 30F

, , 31F
如果真是如此,Python 可以做到的,excel 都可以做到
02/02 20:18

02/02 20:18, 7年前 , 32F
但問題是好不好做,要花多少時間寫,多少時間跑
02/02 20:18, 32F
感謝回覆!請問圖靈完備是什麼意思?

02/02 20:19, 7年前 , 33F
另一方面,這個問題要問你自己啊
02/02 20:19, 33F

02/02 20:19, 7年前 , 34F
如果你要做的東西,excel +vba 都很容易做到
02/02 20:19, 34F

02/02 20:22, 7年前 , 35F
那你的確不需要 python
02/02 20:22, 35F
※ 編輯: mathlover (223.141.100.250), 02/02/2018 20:26:36

02/02 21:05, 7年前 , 36F
ex可以自己抓資料嗎?我不熟,python寫的好,可以自己抓
02/02 21:05, 36F

02/02 21:07, 7年前 , 37F
譬如你可以排程,以後工作他會自己定時輸入資料,自己算
02/02 21:07, 37F

02/02 21:09, 7年前 , 38F
我不知道你數據來的形式,假設是有人e-mail給你,可以讓他
02/02 21:09, 38F

02/02 21:09, 7年前 , 39F
自己收信,然後自己算,你只要有時看看他有沒有故障
02/02 21:09, 39F

02/02 21:13, 7年前 , 40F
圖靈完備啊…理論上是不是可以用excel上ptt...
02/02 21:13, 40F
這到是不行!但寫VB可以控制某時間跑某個程式!也可以抓網頁的資料,不過似乎只限ie

02/02 21:22, 7年前 , 41F
其實我也沒仔細看那論證
02/02 21:22, 41F

02/02 21:23, 7年前 , 42F
畢竟就算是圖靈完備,很多東西還是不適合用 excel 做
02/02 21:23, 42F

02/02 21:24, 7年前 , 43F
圖靈完備的意思,一些講計算理論的是有
02/02 21:24, 43F

02/02 21:24, 7年前 , 44F
不然去看英文 wiki
02/02 21:24, 44F

02/02 21:25, 7年前 , 45F
你可以考慮的是,一方面學 python,,一方面思考如何把
02/02 21:25, 45F

02/02 21:25, 7年前 , 46F
python 用在你工作
02/02 21:25, 46F

02/02 21:26, 7年前 , 47F
看看是不是有用 excel 很難做的東西,可以用 python
02/02 21:26, 47F

02/02 21:26, 7年前 , 48F
02/02 21:26, 48F

02/02 21:27, 7年前 , 49F
我之前用 excel 做一些統計回歸分析,但 excel有些限
02/02 21:27, 49F

02/02 21:27, 7年前 , 50F
02/02 21:27, 50F

02/02 21:27, 7年前 , 51F
譬如變數個數有上限
02/02 21:27, 51F

02/02 21:28, 7年前 , 52F
後來結合 excel 和 R 做
02/02 21:28, 52F

02/02 21:28, 7年前 , 53F
Python 在爬網站資料強多了
02/02 21:28, 53F

02/02 21:28, 7年前 , 54F
所以需要什麼工具,要問你自己
02/02 21:28, 54F
太感謝a大的講解!

02/02 21:30, 7年前 , 55F
Excel要處理資料是方便很多 但邏輯複雜起來
02/02 21:30, 55F

02/02 21:31, 7年前 , 56F
還是用python會比較好維護
02/02 21:31, 56F

02/02 21:38, 7年前 , 57F
我之前用excel vba抓網頁資料 效能很差要分很多次執行
02/02 21:38, 57F

02/02 21:42, 7年前 , 58F
後來學了R再學了python 爬蟲方便多了
02/02 21:42, 58F
※ 編輯: mathlover (223.141.100.250), 02/02/2018 22:16:18

02/03 00:04, 7年前 , 59F
excel 都能跑 alexnet了
02/03 00:04, 59F

02/03 00:04, 7年前 , 60F

02/03 00:05, 7年前 , 61F
而且權重一目瞭然
02/03 00:05, 61F

02/03 06:38, 7年前 , 62F
有人推bokeh那就推plotly好了!還可以蓋UI
02/03 06:38, 62F
文章代碼(AID): #1QSo4DD_ (Python)