已采納回答 / 慕UI6075258
不應(yīng)該,這些應(yīng)該只是簡單的功能 很有可能還有其他的功能,只是沒在這里顯示出來而已 。感興趣的話,可以網(wǎng)上搜一下。
2017-05-31
已采納回答 / 請叫我百度
第一:baike_spider是你創(chuàng)建的包,你所說的url_manager肯定是放在包中的代碼,是可以import進去了。第二:只爬取一個網(wǎng)址就結(jié)束應(yīng)該是html_parser中的代碼有問題,比如課程中的匹配策略與現(xiàn)在的百度Python詞條不匹配,需要改成href = re.compile(r"/item/.*") ? 再或者find_all ?不要丟了下劃線,我就沒注意到下劃線,所以只輸出了1條記錄就craw faild了。
2017-05-15
已采納回答 / SiCheng_Sheen
我之前也遇到過這種情況,糾結(jié)了很久,最后才發(fā)現(xiàn)一個非常重要的問題,百度的詞條信息發(fā)生了變化,你可以仔細看看,現(xiàn)在不再是以 .htm結(jié)尾了,之前在html_parser模塊中的正則表達式已經(jīng)失效了,原來是href=re.compile(r"/view/\d+\.htm"),現(xiàn)在應(yīng)該改為href=re.compile(r'/item/\w+')。這也再次證明了在采集數(shù)據(jù)前,一定要對目標進行仔細認真的分析!
2017-05-05
最贊回答 / qq_我年輕_0
我也遇到了這個問題,很好解決。你們可以看一下任何一個網(wǎng)站的源碼 例如本網(wǎng)站<...code...>他會有這一句句話? <meta charset="utf-8">這就是 html 編碼的約束 。所以在 html_outputer.py? 的這句話<...code...>前面 添加<...code...>output_html() 方法應(yīng)為:<...code...>
2017-04-12
已采納回答 / ciphermagic
是因為你的data是None,所以返回了吧。檢查下html_parser的_get_new_data方法,看看查找的節(jié)點數(shù)據(jù)是否有誤
2017-04-05
已采納回答 / 逍遙游_xj
TypeError: __init__() got an unexpected keyword argument 'from_encoding'構(gòu)造函數(shù)參數(shù)錯誤我猜你用的BeautifulSoup是BeautifulSoup3版本,3版本這個位置參數(shù)是:fromEncoding,你換這個參數(shù)名試一試
2017-04-04