                        課程
                    
                        /后端開發(fā)
                        
                            /Python
                        
                        /Python開發(fā)簡(jiǎn)單爬蟲

我只爬到了一行

為什么我寫的只爬到了一行？？

慕桂英5307131

2018-09-26

源自：Python開發(fā)簡(jiǎn)單爬蟲 8-1

關(guān)注問(wèn)題我要回答

995

操作

收起

5 回答

L杉
2019-03-27

看一下網(wǎng)頁(yè)下載器中判斷獲取成功的語(yǔ)句有沒(méi)有錯(cuò)，用response.staus_code。正則表達(dá)式用

'/item/'試試

0 回復(fù) 有任何疑惑可以回復(fù)我~

收起回答

qq_風(fēng)_32
2018-12-09

肯定是html_parser模塊出問(wèn)題了? ?要么是正則表達(dá)式出現(xiàn)問(wèn)題? 要么是拼接完整URL出了問(wèn)題? 看看是不是少導(dǎo)入了一個(gè)模塊? import urlparser? ??

0 回復(fù) 有任何疑惑可以回復(fù)我~

收起回答

#1

慕尼黑2527285

請(qǐng)問(wèn)這里網(wǎng)站升級(jí)后的正則表達(dá)式應(yīng)該怎么寫？

2018-12-12 回復(fù) 有任何疑惑可以回復(fù)我~

酷大大
2018-12-09

?我也是

0 回復(fù) 有任何疑惑可以回復(fù)我~

收起回答

HiSiChengZ
2018-09-26

soup.find_all('a',href=re.compile(r"\”"))?為什么會(huì)匹配不到雙引號(hào)

0 回復(fù) 有任何疑惑可以回復(fù)我~

收起回答

#1

慕粉1417129261

然而，不用匹配雙引號(hào)

2018-11-13 回復(fù) 有任何疑惑可以回復(fù)我~

墩子_HelloWorld
2018-09-26

links?=?soup.find_all('a',href=re.compile(r"/item/Python/\d+"))

匹配URL的正則表達(dá)式改過(guò)了嗎？

0 回復(fù) 有任何疑惑可以回復(fù)我~

收起回答

#1

慕尼黑2527285

你這里的正則表達(dá)式是正確的？能爬出來(lái)嗎？

2018-12-12 回復(fù) 有任何疑惑可以回復(fù)我~

#2

墩子_HelloWorld 回復(fù) 慕尼黑2527285

可以的

2018-12-12 回復(fù) 有任何疑惑可以回復(fù)我~

#3

慕尼黑2527285 回復(fù) 墩子_HelloWorld

可以爬出多少數(shù)據(jù)啊？我的報(bào)錯(cuò)了：UnicodeEncodeError: 'ascii' codec can't encode characters in position 10-14: ordinal not inrange(128) 可是我每個(gè)文件上面都有加#coding: utf8啊……

2018-12-12 回復(fù) 有任何疑惑可以回復(fù)我~