[問題] 爬蟲登入取得query string

看板Python作者 (暱稱)時間7年前 (2017/04/12 00:32), 7年前編輯推噓1(104)
留言5則, 4人參與, 最新討論串1/1
我是爬重新手目前正在嘗試做爬取需要登入才能取得的資料 我用chrome檢查元素下去看,要取得的就是圖中的query string (access_token) http://i.imgur.com/K4utu61.jpg
現在是採用requests.get的方法去試,但有點沒頭緒 要怎樣才能撈出那串access_token呢? 觀察後發現那串token每隔一段時間都會變,需要那串token才可以繼續爬後面的資料 先謝謝大家解答 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 61.227.97.48 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1491928328.A.527.html

04/12 01:13, , 1F
先get一次 取得token 再get第二次 加上這個token
04/12 01:13, 1F

04/12 10:13, , 2F
requests.session()
04/12 10:13, 2F
感謝回答,但目前仍然無法 我目前用chrome 檢查元素,按下登入後,network的XHR地方會跑出 如上圖的其中一個element,那裏面就有我需要的token 不知道該如何找到 ※ 編輯: qqqa (1.175.113.64), 04/12/2017 23:40:37

04/12 23:54, , 3F
跨謀 你上圖在哪阿...
04/12 23:54, 3F

04/13 10:01, , 4F
rs=requests.session() 保留session,接下來都用這個
04/13 10:01, 4F

04/13 10:02, , 5F
session去access
04/13 10:02, 5F
文章代碼(AID): #1OxGK8Kd (Python)