首頁猿問怎樣抓取網(wǎng)頁內(nèi)存里的內(nèi)容

怎樣抓取網(wǎng)頁內(nèi)存里的內(nèi)容

.NET

揚(yáng)帆大魚 2018-11-06 06:03:10

最近在研究網(wǎng)絡(luò)爬蟲但抓回來的都是查看原文件一樣的值，如果而通過js 已改變的值沒辦法抓回來，但內(nèi)存里應(yīng)該變了，請(qǐng)高手指點(diǎn)怎樣抓回來的數(shù)據(jù)跟顯示的一樣??？

查看完整描述

2 回答

滄海一幻覺

TA貢獻(xiàn)1824條經(jīng)驗(yàn) 獲得超5個(gè)贊

js抓取不了

一般好的抓取的流程是這樣的

確定目標(biāo)

確定頁面

抓取內(nèi)容（頁面上的可見數(shù)據(jù)，一般是沒辦法用的）

處理內(nèi)容（將頁面上的可見數(shù)據(jù)轉(zhuǎn)換為自己需要的數(shù)據(jù)）

將處理過后的內(nèi)容存入自己的數(shù)據(jù)庫

雖然你無法抓取他的js

但是可以吧他的js的參數(shù)抓取過來

然后在在你的程序里吧那些參數(shù)像js處理一遍

然后就獲得了你自己想要的的東西了：）

反對(duì) 回復(fù) 2018-11-07

躍然一笑

TA貢獻(xiàn)1826條經(jīng)驗(yàn) 獲得超6個(gè)贊

剛在CSDN上看到你這同樣的問題。

沒有那么簡(jiǎn)單的就能抓取的，需要分析JS代碼，配合自己的判斷，總之ELT的過程肯定要自己一行一行去寫的。

反對(duì) 回復(fù) 2018-11-07

關(guān)注

舉報(bào)

0/150

提交

取消

購課補(bǔ)貼
聯(lián)系客服咨詢優(yōu)惠詳情

慕課網(wǎng)APP
您的移動(dòng)學(xué)習(xí)伙伴

掃描二維碼
關(guān)注慕課網(wǎng)微信公眾號(hào)