中文字幕乱码高清完整版,亚洲精品第一国产综合野草社区

首頁(yè) 免費(fèi)課 Python開發(fā)簡(jiǎn)單爬蟲問答

Python開發(fā)簡(jiǎn)單爬蟲

            
                螞蟻帥帥
            
            全棧工程師
                    
                難度初級(jí)
            
                時(shí)長(zhǎng) 1小時(shí)14分
            
                學(xué)習(xí)人數(shù)
            
綜合評(píng)分9.67
                            646人評(píng)價(jià)
                        查看評(píng)價(jià)
                                9.9
                                內(nèi)容實(shí)用
                            
                                9.6
                                簡(jiǎn)潔易懂
                            
                                9.5
                                邏輯清晰

全部評(píng)論問答未解決精華

在add_new_urls方法內(nèi)，是不是應(yīng)該也判斷下添加的新的urls是否在self.old_urls里面？

最贊回答 / 我是塞爾維斯

沒有必要，因?yàn)閍dd_new_urls方法里邊又調(diào)用到了add方法，判重已經(jīng)在add中實(shí)現(xiàn)了

3 回答 739 瀏覽 7-3 URL管理器

2016-01-15

1000個(gè)頁(yè)面指的是什么意思？

講師回答 / 螞蟻帥帥

講課的時(shí)候，不可能抓取太多的頁(yè)面，因?yàn)榈鹊臅r(shí)間太長(zhǎng)，所以只抓取了1000個(gè)頁(yè)面用于演示效果，大家當(dāng)然不用這么設(shè)定

2 回答 808 瀏覽 8-1 課程總結(jié)

2016-01-12

各位大神，小弟求教一個(gè)問題

+ 我來(lái)回答回答最高可+2積分

0 回答 695 瀏覽

2016-01-11

urllib與urllib2區(qū)別

最贊回答 / 隱匿的月亮城

Python:urllib 和urllib2之間的區(qū)別 - 牛皮糖NewPtone - 博客園http://www.cnblogs.com/yuxc/archive/2011/08/01/2124073.html

4 回答 2090 瀏覽 5-1 Python爬蟲網(wǎng)頁(yè)下載器簡(jiǎn)介

2016-01-11

在Pycharm下，怎么新建模塊？

最贊回答 / 達(dá)達(dá)里昂

.py為后綴名的文件都會(huì)被認(rèn)為是python模塊。package相當(dāng)于文件夾，只不過其每層目錄下一定有一個(gè) _init_.py 的文件。Pycharm中，在package上右鍵"New-Python File"可以新建模塊<...圖片...>

7 回答 18783 瀏覽 7-2 調(diào)度程序

2016-01-11

輸出第一條結(jié)果之后就全部failed了

+ 我來(lái)回答回答最高可+2積分

4 回答 856 瀏覽 7-7 開始運(yùn)行爬蟲和爬取結(jié)果展示

2016-01-09

getCode

最贊回答 / 搭上最后一班車

response.getcode() != 200 #全部小寫

1 回答 1392 瀏覽 7-2 調(diào)度程序

2016-01-08

Python驗(yàn)證bs4模塊報(bào)錯(cuò)，求大咖指教！

最新回答 / stubborn_girl

你的python應(yīng)該是2.X版本吧，輸入漢字的話，開頭要轉(zhuǎn)碼，加上# coding:utf-8

1 回答 1488 瀏覽 6-2 BeautifulSoup模塊介紹和安裝

2016-01-07

打印不出結(jié)果

+ 我來(lái)回答回答最高可+2積分

3 回答 835 瀏覽 5-3 Python爬蟲urlib2實(shí)例代碼演示

2016-01-07

control+1 怎么做到的，我這是mac ，我commod 和control 都試過了，不行啊

已采納回答 / aleenlee

command +1可以

4 回答 1313 瀏覽 7-2 調(diào)度程序

2016-01-07

輸出結(jié)果和老師的不一樣啊

最新回答 / 喬幫主

我得到的結(jié)果跟老師的也不一樣，跟你的也不一樣，估計(jì)是頁(yè)面鏈接是動(dòng)態(tài)生成的吧，是變化的！

1 回答 891 瀏覽 5-3 Python爬蟲urlib2實(shí)例代碼演示

2016-01-05

no mould named baike_spider

最新回答 / 幕布斯2155728

我也是，3.5不行

3 回答 934 瀏覽 7-7 開始運(yùn)行爬蟲和爬取結(jié)果展示

2016-01-05

只能爬一次就不爬了

最新回答 / WallonLst

這個(gè)我也遇到了，你那邊最后是哪里錯(cuò)誤了

3 回答 1267 瀏覽 7-7 開始運(yùn)行爬蟲和爬取結(jié)果展示

2016-01-04

關(guān)于正則表達(dá)式無(wú)法匹配到內(nèi)容

最新回答 / hack2012

百度百科的文檔結(jié)尾是htm，你寫個(gè)html當(dāng)然是抓不到任何東西了。

1 回答 895 瀏覽 7-5 HTML解析器html_parser

2016-01-03

沒報(bào)錯(cuò)，但只輸出了一條記錄，第二條就failed，然后就沒了

已采納回答 / 戴暉

仔細(xì)看看你的代碼哪里寫的有問題，估計(jì)是不仔細(xì)。或者是你爬的網(wǎng)頁(yè)有問題，換個(gè)東西爬爬看

4 回答 1138 瀏覽 7-7 開始運(yùn)行爬蟲和爬取結(jié)果展示

2016-01-02

首頁(yè)上一頁(yè)87 88 89 90 91 92 93 下一頁(yè)尾頁(yè)

該課程已下架

課程須知: 本課程是Python語(yǔ)言開發(fā)的高級(jí)課程 1、Python編程語(yǔ)法； 2、HTML語(yǔ)言基礎(chǔ)知識(shí)； 3、正則表達(dá)式基礎(chǔ)知識(shí)；

老師告訴你能學(xué)到什么？: 1、爬蟲技術(shù)的含義和存在價(jià)值 2、爬蟲技術(shù)架構(gòu) 3、組成爬蟲的關(guān)鍵模塊：URL管理器、HTML下載器和HTML解析器 4、實(shí)戰(zhàn)抓取百度百科1000個(gè)詞條頁(yè)面數(shù)據(jù)的抓取策略設(shè)定、實(shí)戰(zhàn)代碼編寫、爬蟲實(shí)例運(yùn)行 5、一套極簡(jiǎn)的可擴(kuò)展爬蟲代碼，修改本代碼，你就能抓取任何互聯(lián)網(wǎng)網(wǎng)頁(yè)！

微信掃碼，參與3人拼團(tuán)

熱搜

最近搜索清空

Python開發(fā)簡(jiǎn)單爬蟲