[問題] 爬蟲突然不能跑,求解

看板Python作者 (oyeh)時間2年前 (2021/11/29 09:53), 編輯推噓3(301)
留言4則, 4人參與, 2年前最新討論串1/1
本來有寫好爬 https://www.coingecko.com/en 每種加密貨幣的數據 之前都是把curl貼到自動轉換python程式碼的網頁來使用,再把headers 刪除一些不必要 的參數, 測試後留下Headers 的User-agent 就能爬 今天突然不能跑,看了一下網頁好像也沒更動,把參數都留下也不能爬 以上想問問題可能出在哪 謝謝各位 解法或原理比較複雜的話,能私訊我,酬勞可談 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 114.33.45.220 (臺灣) ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1638150822.A.1BE.html

11/29 11:47, 2年前 , 1F
它們有用CAPTCHA,你改用selenium或是它免費額度的API吧
11/29 11:47, 1F

11/29 14:10, 2年前 , 2F
可以試試 cloudscraper
11/29 14:10, 2F

11/29 16:33, 2年前 , 3F
樓上正解
11/29 16:33, 3F

11/29 19:35, 2年前 , 4F
感謝,我來試試
11/29 19:35, 4F
文章代碼(AID): #1Xf3Ac6- (Python)