自己改進(jìn)了一下,但是發(fā)現(xiàn)爬蟲(chóng)讀取某些網(wǎng)頁(yè)的時(shí)候會(huì)卡住,也沒(méi)超時(shí)
如題,爬蟲(chóng)讀取某些網(wǎng)頁(yè)的時(shí)候會(huì)卡住,也沒(méi)超時(shí),沒(méi)有進(jìn)入錯(cuò)誤界面...有沒(méi)有大佬幫一下,這種問(wèn)題怎么去分析和解決?
卡住的時(shí)候不是每次都是同一個(gè)url,不同url也會(huì)卡住....?