課程
/后端開發(fā)
/Python
/Python開發(fā)簡單爬蟲
1000個頁面指的是什么意思?
2016-01-12
源自:Python開發(fā)簡單爬蟲 8-1
正在回答
講課的時候,不可能抓取太多的頁面,因為等的時間太長,所以只抓取了1000個頁面用于演示效果,大家當然不用這么設定
韓翊
1000頁面就是說 從第一個頁面開始,從第一個頁面中,找出有超鏈接的url,繼續(xù)進入這個url這時為第二個,如果下個網(wǎng)站里面沒有超鏈接,就退出來,進入剛才網(wǎng)頁中的其他超鏈接中,繼續(xù)查找,再+1,以此類推,一直到訪問了1000個頁面才停下來
舉報
本教程帶您解開python爬蟲這門神奇技術(shù)的面紗
Copyright ? 2025 imooc.com All Rights Reserved | 京ICP備12003892號-11 京公網(wǎng)安備11010802030151號
購課補貼聯(lián)系客服咨詢優(yōu)惠詳情
慕課網(wǎng)APP您的移動學習伙伴
掃描二維碼關(guān)注慕課網(wǎng)微信公眾號
2016-01-13
講課的時候,不可能抓取太多的頁面,因為等的時間太長,所以只抓取了1000個頁面用于演示效果,大家當然不用這么設定
2016-04-24
1000頁面就是說 從第一個頁面開始,從第一個頁面中,找出有超鏈接的url,繼續(xù)進入這個url這時為第二個,如果下個網(wǎng)站里面沒有超鏈接,就退出來,進入剛才網(wǎng)頁中的其他超鏈接中,繼續(xù)查找,再+1,以此類推,一直到訪問了1000個頁面才停下來