爬取 j東 數(shù)據(jù)多了會(huì)不會(huì)被封ip? 有何技術(shù)可以防止被封？ 謝謝！
1 回答
慕仙森
TA貢獻(xiàn)1827條經(jīng)驗(yàn) 獲得超8個(gè)贊
1. 爬取數(shù)據(jù)的時(shí)候,采用間隔的跳著遍歷鏈接,打破爬蟲順序遍歷的規(guī)律即可;
2. 或者不定時(shí)間間隔,同時(shí)打破順序遍歷規(guī)律.這樣會(huì)慢一些.
添加回答
舉報(bào)
0/150
提交
取消