Re: [問題] 用selenium爬蟲instagram

看板Python作者rexyeah (ccccccc)時間5年前 (2019/02/08 20:56)推噓2(2推 0噓 2→)

留言4則, 4人參與討論串2/2 (看更多)

from selenium.webdriver.common.by import By from selenium.webdriver.support.ui import WebDriverWait from selenium.webdriver.support import expected_conditions as EC (...) def get_element(self, selector): ele = WebDriverWait(self.driver, timeout).until( EC.presence_of_element_located((By.CSS_SELECTOR, selector))) return ele === 以前爬的時候看stackoverflow寫的一個等待element被畫好然後回傳element的method timeout值可以自己設定，不過我沒有處理exception，請原po與大家鞭一下 :) ※ 引述《ms0615122 (Miao~)》之銘言： : 想請問爬instagram留言的時候 : 需要點選載入更多留言 : 我是使用find_element_by_xpath後.click() : 因載入留言的時間長不一定 : 雖然有加入time.sleep()但有時還是會來不及載入，想請問有更智能的方法判斷是否已經 : 載入好網頁，我再用.click()嗎？ : （曾經嘗試過driver.implicitly_wait()過，但測試不出效果，可能這個函數只有在更換 : url才有效果？） : 第一次在板上發問，請有經驗的大大解答一下><，手機排版傷眼抱歉了 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 1.161.245.119 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1549630579.A.B9D.html

推

Sunal

02/08 22:01, 5年前 , 1^F

02/08 22:01, 1^F

推

utap2001

02/08 22:36, 5年前 , 2^F

02/08 22:36, 2^F

→

TitanEric

02/08 23:40, 5年前 , 3^F

02/08 23:40, 3^F