久久精品二区,亚洲熟女久久国产

首頁免費(fèi)課 Python開發(fā)簡單爬蟲問答

Python開發(fā)簡單爬蟲

            
                螞蟻帥帥
            
            全棧工程師
                    
                難度初級
            
                時(shí)長 1小時(shí)14分
            
                學(xué)習(xí)人數(shù)
            
綜合評分9.67
                            646人評價(jià)
                        查看評價(jià)
                                9.9
                                內(nèi)容實(shí)用
                            
                                9.6
                                簡潔易懂
                            
                                9.5
                                邏輯清晰

全部評論問答未解決精華

玩砸了，出錯(cuò)了~

最贊回答 / 倉頡小米

找到了解決辦法，鏈接：http://bookshadow.com/weblog/2015/04/22/sae-python-weibo-sdk-certificate-verify-failed/Python 升級到 2.7.9 之后引入了一個(gè)新特性，當(dāng)使用urllib.urlopen打開一個(gè) https 鏈接時(shí)，會驗(yàn)證一次 SSL 證書。而當(dāng)目標(biāo)網(wǎng)站使用的是自簽名的證書時(shí)就會拋出本人遇到的錯(cuò)誤。已驗(yàn)證鏈接中第一種方案有效：<...code...>

1 回答 2403 瀏覽 7-1 Python爬蟲實(shí)例-分析目標(biāo)

2017-11-29

參數(shù)page_url怎么傳給soup

最新回答 / kunkakola

soup的參數(shù)html.cont就是下載器下載到的當(dāng)前page_url的內(nèi)容，所以查找當(dāng)前頁的內(nèi)容時(shí)就不再需要page_url了，只用來組成新的url

1 回答 460 瀏覽 7-5 HTML解析器html_parser

2017-11-29

爬取天天基金網(wǎng)上500只基金的歷史凈值的難度多大？

+ 我來回答回答最高可+2積分

0 回答 2583 瀏覽

2017-11-29

爬取到第一條，第二條failed，注釋try、和except，提示參數(shù)錯(cuò)誤，求大神們幫忙

最新回答 / 倉頡小米

親，你把spider_main中，def __init__(self)這部分語句傳一下看看唄？

1 回答 852 瀏覽

2017-11-23

該網(wǎng)站變成了https需要如何爬蟲呢

最贊回答 / 阿扎哲健甫

正則表達(dá)式那塊改成re.compile(r"/item/(.*)")可以先學(xué)一下正則表達(dá)式?上面表示的意思說是含/item并以任何形式為后綴的數(shù)據(jù)如果百度百科繼續(xù)改動url的話需要再做改進(jìn)！

2 回答 7089 瀏覽 7-7 開始運(yùn)行爬蟲和爬取結(jié)果展示

2017-11-22

打印網(wǎng)頁內(nèi)容中文亂碼

最新回答 / 慕哥1363483

沒有轉(zhuǎn)utf-8吧

1 回答 1252 瀏覽 5-3 Python爬蟲urlib2實(shí)例代碼演示

2017-11-20

輸出的結(jié)果是百度百科Python詞條下的鏈接嗎？

最新回答 / qq_安分守己_0

是的啊

1 回答 861 瀏覽 7-7 開始運(yùn)行爬蟲和爬取結(jié)果展示

2017-11-20

運(yùn)行的問題

最新回答 / 花露水和暖壺

這個(gè)目錄位置是什么意思？能詳細(xì)一點(diǎn)嘛？

2 回答 871 瀏覽 7-7 開始運(yùn)行爬蟲和爬取結(jié)果展示

2017-11-17

關(guān)于urllib.request.urlopen的編碼問題

最新回答 / 倉頡小米

<...code...>這樣試試？

2 回答 4695 瀏覽 7-7 開始運(yùn)行爬蟲和爬取結(jié)果展示

2017-11-17

創(chuàng)建python包

+ 我來回答回答最高可+2積分

0 回答 836 瀏覽

2017-11-14

你們在import url_manager這里沒有出現(xiàn)過問題嗎

最新回答 / qq_一口一個(gè)小朋友_0

可能是你url_manager文件名有問題。沒看清楚圖

2 回答 1098 瀏覽 7-2 調(diào)度程序

2017-11-08

HtmlOutputer' object has no attribute 'datas'

最新回答 / qq_一口一個(gè)小朋友_0

你把HtmlOutput部分代碼貼一下?？聪履睦镥e(cuò)了

2 回答 806 瀏覽 7-7 開始運(yùn)行爬蟲和爬取結(jié)果展示

2017-11-07

我在這里按ctrl 1引入對象為什么提示出錯(cuò)

+ 我來回答回答最高可+2積分

3 回答 1033 瀏覽 7-2 調(diào)度程序

2017-11-07

沒有生成html文件

最新回答 / qq_一口一個(gè)小朋友_0

極有可能是你output里面內(nèi)容寫錯(cuò)了，沒報(bào)錯(cuò)成功爬取出地址的話仔細(xì)檢查下代碼

2 回答 1078 瀏覽 7-7 開始運(yùn)行爬蟲和爬取結(jié)果展示

2017-11-06

用BeautifulSoup(re.text, lxml)，關(guān)于beautifulsoup 與 lxml 的問題

最新回答 / 慕九州1555680

看起來像是lxml沒裝好，重裝一下試試：pip3 install lxml

1 回答 6678 瀏覽 6-4 BeautifulSoup實(shí)例測試

2017-11-04

首頁上一頁 29 30 31 32 33 34 35 下一頁尾頁

該課程已下架

課程須知: 本課程是Python語言開發(fā)的高級課程 1、Python編程語法； 2、HTML語言基礎(chǔ)知識； 3、正則表達(dá)式基礎(chǔ)知識；

老師告訴你能學(xué)到什么？: 1、爬蟲技術(shù)的含義和存在價(jià)值 2、爬蟲技術(shù)架構(gòu) 3、組成爬蟲的關(guān)鍵模塊：URL管理器、HTML下載器和HTML解析器 4、實(shí)戰(zhàn)抓取百度百科1000個(gè)詞條頁面數(shù)據(jù)的抓取策略設(shè)定、實(shí)戰(zhàn)代碼編寫、爬蟲實(shí)例運(yùn)行 5、一套極簡的可擴(kuò)展爬蟲代碼，修改本代碼，你就能抓取任何互聯(lián)網(wǎng)網(wǎng)頁！

微信掃碼，參與3人拼團(tuán)

熱搜

最近搜索清空

Python開發(fā)簡單爬蟲