做爬蟲得時候遇到一個比較難搞定的網(wǎng)站,同事介紹說可以用webkit試下,我的具體需求是模擬真實瀏覽器,取出登錄之后的頁面內(nèi)容。不知道webkit能否實現(xiàn),有沒有大神對webkit熟悉的。。。
2 回答

湖上湖
TA貢獻2003條經(jīng)驗 獲得超2個贊
webkit和ie是兩種瀏覽器的內(nèi)核。
要模擬訪問網(wǎng)站,我們一般不直接用瀏覽器內(nèi)核(你又不是開發(fā)瀏覽器)
我們可以用webbrowser(C#、VB)、selenium(python)、JxBrowser(java)等。
因為上面說的就是在你的程序里調(diào)用真實的瀏覽器,除了驗證碼比較麻煩一點,別的和人操作都沒有區(qū)別,人能做的,程序肯定能做。
添加回答
舉報
0/150
提交
取消