首頁猿問從Google結(jié)果中刮取數(shù)據(jù)可以嗎？

從Google結(jié)果中刮取數(shù)據(jù)可以嗎？

源碼算法與數(shù)據(jù)結(jié)構(gòu)

慕蓋茨4494581 2019-06-29 09:55:26

從Google結(jié)果中刮取數(shù)據(jù)可以嗎？我想從Google獲取結(jié)果，使用curl來檢測潛在的重復(fù)內(nèi)容。谷歌被禁止的風(fēng)險(xiǎn)很高嗎？

查看完整描述

3 回答

心有法竹

TA貢獻(xiàn)1866條經(jīng)驗(yàn) 獲得超5個(gè)贊

當(dāng)你超過一定數(shù)量的請求時(shí)，谷歌最終會(huì)阻止你的IP。

反對回復(fù) 2019-06-29

慕哥9229398

TA貢獻(xiàn)1877條經(jīng)驗(yàn) 獲得超6個(gè)贊

谷歌在世界各地的網(wǎng)站上蓬勃發(fā)展.所以如果它是“如此非法”，那么就連谷歌也無法生存。當(dāng)然，其他答案提到了谷歌減少IP塊的方法。另一種避免卡普查的方法可能是在隨機(jī)的時(shí)間刮擦(試試看)。而且，我有一種感覺，如果我們提供新奇的或一些重要的數(shù)據(jù)處理，那么至少對我來說聽起來很好…如果我們只是在復(fù)制一個(gè)網(wǎng)站?；蛘咴谀撤N程度上阻礙它的業(yè)務(wù)/品牌.那么它是不好的，應(yīng)該避免.最重要的是.如果你是一家初創(chuàng)公司，那么沒有人會(huì)因?yàn)闆]有好處而與你斗爭。但是，如果你的整個(gè)前提是在你獲得資金的情況下，那么你應(yīng)該想出更復(fù)雜的方法.替代API.最終.谷歌還會(huì)繼續(xù)為它的API發(fā)布(或降低)字段，所以你現(xiàn)在想要廢除的東西可能會(huì)出現(xiàn)在新的Google API發(fā)布的路線圖中。

反對回復(fù) 2019-06-29