1 回答

TA貢獻(xiàn)1790條經(jīng)驗(yàn) 獲得超9個(gè)贊
我一次只瀏覽了 1 頁(yè)并打印出來(lái)(您可以使用 f.write)。您需要添加 time.sleep() 以便 Selenium 不會(huì)崩潰。這可以永遠(yuǎn)持續(xù)下去,直到頁(yè)面用完為止。或者如果指定 if page==n: 則中斷。它甚至可以經(jīng)歷硒的生命周期。
while True:
try:
courses=WebDriverWait(driver, 30).until(EC.visibility_of_all_elements_located((By.XPATH, "//div[@class='course-list--container--3zXPS']//a[contains(@class, 'browse-course-card--link--3KIkQ')]")))
for course in courses:
print(course.get_attribute('href')+"\n")
driver.find_elements_by_xpath("//a[@class='udlite-btn udlite-btn-small udlite-btn-secondary udlite-heading-sm udlite-btn-icon udlite-btn-icon-small udlite-btn-icon-round pagination--next--5NrLo']")[0].click()
page=page+1
time.sleep(5)
except:
url=driver.current_url
driver.close()
driver = webdriver.Chrome(ChromeDriverManager().install(),options=options)
driver.get(url)
添加回答
舉報(bào)