在爬一個淘寶店鋪的信息時發(fā)現(xiàn)會通過jsonp去網(wǎng)站取回數(shù)據(jù),url如下:
https://tianziyujushangcheng.taobao.com/i/asynSearch.htm?callback=jsonp152&mid=w-12133771151-0&wid=12133771151&pageNo=2
其他無效參數(shù)都被我除去了。
有2個必要參數(shù):一個callback=jsonp152;另一個wid=12133771151.但是這2個參數(shù)是怎么得來的呢?
因為我是要爬取大量網(wǎng)站,所以手動從瀏覽器中提取這2個參數(shù)幾乎不可能。
在chrome開發(fā)者工具中搜索,在其他位置并沒有出現(xiàn)這幾個參數(shù)。也看了發(fā)出這個xhr請求的index.js文件,并沒有看到相關聯(lián)的東西。有大神做過嗎?分享一下...
添加回答
舉報
0/150
提交
取消