為什么只爬去兩個(gè)詞條的網(wǎng)頁(yè),就不動(dòng)了????
運(yùn)行代碼時(shí),為什么只爬去兩個(gè)詞條的網(wǎng)頁(yè),就不動(dòng)了。。 代碼如下:
?craw 1 : http://baike.baidu.com/view/21087.htm?
craw 2 : http://baike.baidu.com/view/10812319.htm
運(yùn)行代碼時(shí),為什么只爬去兩個(gè)詞條的網(wǎng)頁(yè),就不動(dòng)了。。 代碼如下:
?craw 1 : http://baike.baidu.com/view/21087.htm?
craw 2 : http://baike.baidu.com/view/10812319.htm
2016-10-17
舉報(bào)
2017-01-23
url-manager中
def has_new_url(self): ? ?
????return len(self.new_urls) != 0 ? ?
def get_new_url(self): ? ?
????new_url = self.new_urls.pop() ? ?
????self.old_urls.add(new_url) ? ?
????return new_url ? ?
2016-11-02
問(wèn)題已經(jīng)解決啦 。。。。 是匹配的不正確 。 ?修改以后,運(yùn)行成功
2016-11-01
我也出現(xiàn)這種情況了 。打開(kāi)第二個(gè)鏈接 貌似是鎖定詞條? 樓主問(wèn)題解決了嗎
2016-10-31
啥也沒(méi)出來(lái)嗎?按理說(shuō)應(yīng)該有異常拋出