關于拉勾改版無法爬取數據問題如何解決?
老師我大概在20年左右,根據老師的課程把整個框架搭起來了,相關的數據也爬取到了
但是在最近我需要重新分析一些崗位的時候發(fā)現,拉勾改變了頁面的規(guī)則,目前發(fā)現的問題有:
使用爬蟲請求頁面時,返回的html為【加載中。。?!康囊粋€等待頁面,不包含任何有價值的數據
使用selenium框架,也仍然獲取不到數據接口的源碼
調試頁面發(fā)現,拉勾目前所有的數據接口,返回的json數據都是進行過加密的
由于需要用這個項目的網頁做一些展示,不知老師上述問題是否有解決方案?
如果有,麻煩老師告知一下,如果此問題暫時未能解決,老師可否給一份往期的歷史數據?希望能夠順利訪問頁面的數據就行