[問題] 讀入較大的JSON檔

看板Python作者cal0712 (冷靜沉著堅持)時間9年前 (2015/05/27 09:31)推噓2(2推 0噓 3→)

留言5則, 4人參與討論串1/2 (看更多)

板上各為前輩好小弟這邊有個JSON檔大概500MB左右但一直無法順利讀入 import ijson f = open('news_780796.json',mode='rb') for url in ijson.items(f,'url'): #"url", "timestamp" print(url) 會出現MemoryError 環境 Windows XP Python 3.3 6GB RAM 想請問板上高手 1.如果完全不知道內部格式想要只讀入前10筆資料怎麼個寫法呢? 2.如果想要全部讀入來處理的話應該怎麼寫呢? 3.如果要處理這樣的檔案系統的配置建議應該是怎麼樣呢? 感謝協助 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 211.21.108.1 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1432690311.A.B4A.html

推

LiloHuang

05/27 11:02, , 1^F

05/27 11:02, 1^F

→

sean50301

05/27 11:24, , 2^F

05/27 11:24, 2^F

→

sean50301

05/27 11:24, , 3^F

05/27 11:24, 3^F