辨别Google蜘蛛的真伪

2019-03-21    来源:一灰的BLOG

容器云强势上线!快速搭建集群,上万Linux镜像随意使用

今天来说说怎样辨别Google蜘蛛。

点击Windows系统里的“开始” – “运行”,输入tracert 203.208.60.179,点击确定。

运行结果显示:crawl-203-208-60-179.googlebot.com

这种方法叫做反向DNS查找,和辨别百度蜘蛛真伪的操作是一样的。但我发现现在的采集越来越高明,也会伪造反向DNS来指向***.googlebot.com。这时候,我们需要验证运行结果的反向DNS得出的IP地址。

点击Windows系统里的“开始” – “运行”,输入tracert crawl-203-208-60-179.googlebot.com,点击确定。

运行结果得出的IP地址与原本检测IP对应即可。

希望这个分享对大家发现老奸巨猾的采集者有帮助。本文地址:http://yihuiblog.com/a/341.html,转载请注明原文链接。

标签: Google蜘蛛 百度蜘蛛 搜索引擎蜘蛛 

版权申明:本站文章部分自网络,如有侵权,请联系:west999com@outlook.com
特别注意:本站所有转载文章言论不代表本站观点!
本站所提供的图片等素材,版权归原作者所有,如需使用,请与原作者联系。

上一篇:如何利用门户博客快速打造一流的百度排名

下一篇:从SOSO预览功能看站内优化