作者查詢 / allen511081

總覽項目: 發文 | 留言 | 暱稱
作者 allen511081 在 PTT [ Python ] 看板的留言(推文), 共70則
限定看板:Python
看板排序:
首頁
上一頁
1
2
下一頁
尾頁
[問題]scrapy pipelines 無法寫入CSV檔
[ Python ]10 留言, 推噓總分: +1
作者: allen511081 - 發表於 2015/01/07 17:00(11年前)
3Fallen511081: process_item 是在處理蜘蛛爬來的資料01/07 20:56
4Fallen511081: return是返回list,總共有三個list01/07 20:57
5Fallen511081: item[titleA,titleB,nameA,nameB,countA,countB]01/07 21:00
6Fallen511081: 把item處理成三個list後,就是titles,names,counts01/07 21:03
9Fallen511081: 已經處理掉3個return了,CMD畫面有抓到東西,但是01/08 09:57
10Fallen511081: 最後就是存不進去CSV檔裡面,檔案裡就只有headerline01/08 09:59
[問題]scrapy寫好pipelines執行,卻出現KeyError
[ Python ]5 留言, 推噓總分: +1
作者: allen511081 - 發表於 2015/01/04 00:03(11年前)
2Fallen511081: 回樓上大大,encode刪除後,還是會出現KeyError01/04 08:31
3Fallen511081: 而且title、birdName、count,都會出現keyError01/04 08:33
5Fallen511081: 給樓上大大,小弟本人還是新手,還望大大指導一下01/06 10:10
[問題]scrapy如何將item的資料成對的儲存起來?
[ Python ]5 留言, 推噓總分: +3
作者: allen511081 - 發表於 2014/12/19 17:48(11年前)
5Fallen511081: 有寫了pipeline,但是格式還不是我要的,我該如何做?12/25 11:56
Re: [問題] Scrapy 蜘蛛程式無法爬超過3個網頁
[ Python ]6 留言, 推噓總分: +3
作者: ug945 - 發表於 2014/12/13 02:50(11年前)
1Fallen511081: 小弟不才,請問這位大大,小弟該如何實做出來?12/16 11:21
3Fallen511081: 小弟已解決第二個問題了,還請大大協助解決第一個12/17 18:12
6Fallen511081: 感謝大大,小弟的問題今天已全部解決了12/18 16:52
[問題] Scrapy 蜘蛛程式無法爬超過3個網頁
[ Python ]5 留言, 推噓總分: +1
作者: allen511081 - 發表於 2014/12/04 13:04(11年前)
2Fallen511081: 例如:第一頁有25筆資料,第二頁有30筆資料,第三頁12/05 19:24
3Fallen511081: 有35筆資料,第4頁有40筆資料,程式會先抓page1的1012/05 19:25
4Fallen511081: 筆資料後,繼續去page2抓幾筆資料,依此類推,但是12/05 19:27
5Fallen511081: 最後檢查資料,資料卻是一筆都不少的抓下來12/05 19:28
首頁
上一頁
1
2
下一頁
尾頁