代碼照著老師的敲但只爬取一個(gè)url就報(bào)跳出循環(huán),craw failed
qq_巫婆的面包_0
2016-07-31 15:46:09
TA貢獻(xiàn)4條經(jīng)驗(yàn) 獲得超5個(gè)贊
?添加解析出來(lái)的多個(gè)新的urls時(shí)函數(shù)調(diào)用時(shí)名字寫錯(cuò)了,應(yīng)該是:
self.urls.add_new_urls(new_urls)
而你寫成了:
self.urls.add_new_url(new_urls)
少了一個(gè)s,所以新的urls添加不進(jìn)去,后續(xù)就沒有url可以爬了。你試試看,是不是這個(gè)問題,我沒有運(yùn)行過。
舉報(bào)