課程
/后端開(kāi)發(fā)
/Python
/Python最火爬蟲(chóng)框架Scrapy入門(mén)與實(shí)踐
莫不是被封了IP。。。
2018-07-05
源自：Python最火爬蟲(chóng)框架Scrapy入門(mén)與實(shí)踐 2-6
正在回答
可以注釋的，但需要在中間件里設(shè)置其他ua
啊，看了幾個(gè)其他爬蟲(chóng)的代碼知道了......原來(lái)是setting的user-agent不能注釋掉....好吧自己太蠢了
大壯老師
慕少416124 回復(fù) 大壯老師
舉報(bào)
做為爬蟲(chóng)工程師Python Scrapy主流爬蟲(chóng)框架你必須要會(huì)！
2 回答為什么把下劃線改成了橫線 User-Agent還是settings里面設(shè)置的默認(rèn)的 并沒(méi)有隨機(jī)改變?。?/p>
3 回答請(qǐng)問(wèn)這個(gè)找到user agent的這個(gè)白色窗口是
2 回答debug:403，是不是就不允許爬了，怎么辦？
1 回答運(yùn)行main.py后出現(xiàn)如下錯(cuò)誤是怎么回事呢
1 回答請(qǐng)問(wèn)這是什么錯(cuò)誤？
Copyright ? 2025 imooc.com All Rights Reserved | 京ICP備12003892號(hào)-11 京公網(wǎng)安備11010802030151號(hào)
購(gòu)課補(bǔ)貼聯(lián)系客服咨詢(xún)優(yōu)惠詳情
慕課網(wǎng)APP您的移動(dòng)學(xué)習(xí)伙伴
掃描二維碼關(guān)注慕課網(wǎng)微信公眾號(hào)
2018-07-06
可以注釋的，但需要在中間件里設(shè)置其他ua
2018-07-06
啊，看了幾個(gè)其他爬蟲(chóng)的代碼知道了......原來(lái)是setting的user-agent不能注釋掉....好吧自己太蠢了