第七色在线视频,2021少妇久久久久久久久久,亚洲欧洲精品成人久久av18,亚洲国产精品特色大片观看完整版,孙宇晨将参加特朗普的晚宴

為了賬號(hào)安全,請(qǐng)及時(shí)綁定郵箱和手機(jī)立即綁定
已解決430363個(gè)問(wèn)題,去搜搜看,總會(huì)有你想問(wèn)的

談?wù)勏柴R拉雅的反爬機(jī)制?

談?wù)勏柴R拉雅的反爬機(jī)制?

慕工程0101907 2019-02-17 15:37:36
最近想做大數(shù)據(jù)分析; 所以想爬取了喜馬拉雅的所有用戶信息;那么重點(diǎn)來(lái)了,我發(fā)現(xiàn),喜馬拉雅有單模塊防御機(jī)制; 比如個(gè)人用戶主頁(yè),我爬取了大概2000+左右,反爬機(jī)制就生效了, 不管訪問(wèn)哪一個(gè)用戶的主頁(yè),都是返回 503,連我自己的個(gè)人中心都無(wú)法登錄了;我試過(guò) cookie 變換,但是得出結(jié)論絕對(duì)是 IP 被禁了。 請(qǐng)問(wèn)各位,有沒有相關(guān)經(jīng)驗(yàn)。 到底是不是禁了 IP。。。。。
查看完整描述

3 回答

?
幕布斯6054654

TA貢獻(xiàn)1876條經(jīng)驗(yàn) 獲得超7個(gè)贊

喜馬拉雅是雙封,先在你的 cookies 寫入封禁的字段,然后封禁 IP ;
如果你換了 IP,不清理 cookies,一樣死;所以解封的辦法是,先清理 cookie,然后換 IP。然后訪問(wèn)就 OK 了。

查看完整回答
反對(duì) 回復(fù) 2019-03-01
?
有只小跳蛙

TA貢獻(xiàn)1824條經(jīng)驗(yàn) 獲得超8個(gè)贊

我是做代理 IP 的,有的客戶,成立了一個(gè)攻堅(jiān)反爬部門,專門研究怎么繞過(guò)風(fēng)控抓取數(shù)據(jù),建議大家采用這個(gè)方法嘗試一下

查看完整回答
反對(duì) 回復(fù) 2019-03-01
  • 3 回答
  • 0 關(guān)注
  • 782 瀏覽
慕課專欄
更多

添加回答

舉報(bào)

0/150
提交
取消
微信客服

購(gòu)課補(bǔ)貼
聯(lián)系客服咨詢優(yōu)惠詳情

幫助反饋 APP下載

慕課網(wǎng)APP
您的移動(dòng)學(xué)習(xí)伙伴

公眾號(hào)

掃描二維碼
關(guān)注慕課網(wǎng)微信公眾號(hào)