网站的流量当心有虚假的Googlebot谷歌机器人爬虫

Incapsula在最新的黑帽会议上提到:

平均24个谷歌机器人爬虫就有 1 个虚假的爬虫。

fake-googlebot-1-in-24

平均一个网站就会有187 个爬虫机器人爬寻 。
googlebot-187-visits-per-day

在各种搜索引擎爬虫当中,谷歌占了60.5% 的比例,其他搜索引擎都只是少数。

search-engine-bots-share-of-total-page-crawls

那么是什么东西伪装成谷歌爬虫呢?

有DDOS攻击一般指分布式拒绝服务攻击 ,搜刮你网站资料的工具, 有Spamming , 有黑客等其他不明原因,其中占比最大的是DDOS攻击,占了23%。

DDoS攻击通过大量合法的请求占用大量网络资源,以达到瘫痪网络的目的。 这种攻击方式可分为以下几种:
通过使网络过载来干扰甚至阻断正常的网络通讯;
通过向服务器提交大量请求,使服务器超负荷;
阻断某一用户访问服务器;
阻断某服务与特定系统或个人的通讯。

————————————————————————————————–

那么谷歌爬虫的来源地方时哪里呢?

googlebots-country-of-origin

在蓝鲸的博客里面也教了大家如何用ga判断虚假流量: http://bluewhale.cc/2010-04-24/google-analytics-identify-false-traffic.html#ixzz1Jvx2wEQb

现在GA 新增了过了爬虫的功能》》http://www.dianshangtalk.com/3105.html