                        課程
                    
                        /后端開(kāi)發(fā)
                        
                            /Python
                        
                        /Python開(kāi)發(fā)簡(jiǎn)單爬蟲(chóng)

玩砸了，出錯(cuò)了~

有沒(méi)有和我遇到一樣問(wèn)題的？求助！python 3.7?

我就是按照老師的步驟，個(gè)別語(yǔ)句按Python3修改了一下。只輸出了一條，就報(bào)錯(cuò)了（報(bào)錯(cuò)內(nèi)容太長(zhǎng)了，沒(méi)全粘過(guò)來(lái)）：

urllib.error.URLError: <urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed: unable to get local issuer certificate (_ssl.c:864)>

目測(cè)問(wèn)題出在這里：response = urllib.request.urlopen(url)?

因?yàn)樵诖酥蠹尤肓苏Z(yǔ)句：print(response.getcode()) ? 哎嘿，沒(méi)有返回?cái)?shù)值 ~

使用以下入口地址，然，并沒(méi)有用：?

https://baike.baidu.com/item/Python/407313?fr=aladdin?

https://baike.baidu.com/item/Python/407313?

在之前的課程里，使用urllib模塊，打開(kāi)百度主頁(yè)是沒(méi)有問(wèn)題的~

倉(cāng)頡小米

2017-11-29

源自：Python開(kāi)發(fā)簡(jiǎn)單爬蟲(chóng) 7-1

關(guān)注問(wèn)題我要回答

2404

操作

收起

1 回答

倉(cāng)頡小米提問(wèn)者
2017-12-01

找到了解決辦法，鏈接：http://bookshadow.com/weblog/2015/04/22/sae-python-weibo-sdk-certificate-verify-failed/

Python 升級(jí)到 2.7.9 之后引入了一個(gè)新特性，當(dāng)使用urllib.urlopen打開(kāi)一個(gè) https 鏈接時(shí)，會(huì)驗(yàn)證一次 SSL 證書(shū)。而當(dāng)目標(biāo)網(wǎng)站使用的是自簽名的證書(shū)時(shí)就會(huì)拋出本人遇到的錯(cuò)誤。

已驗(yàn)證鏈接中第一種方案有效：

import?urllib.request
import?string
import?ssl

class?HtmlDownloader(object):

????def?download(self,?url):
????????if?url?is?None:
????????????return
????????????
????????context?=?ssl._create_unverified_context()
????????response?=?urllib.request.urlopen(url,?context=context)

????????if?response.getcode()?!=?200:
????????????return

????????return?str(response.read(),?encoding='utf-8')