初学者SEO学堂:如何识别百度蜘蛛

初学者SEO学堂(cxzseo.com)7月31日讯,百度蜘蛛对于站长来说可谓上宾,可是我们曾经遇到站长这样提问:我们如何判断疯狂抓我们网站内容的蜘蛛是不是百度的?其实站长可以通过DNS反查IP的方式判断某只spider是否来自百度搜索引擎。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:

1、在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

初学者SEO学堂:如何识别百度蜘蛛

2、在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来判断是否来自Baiduspider的抓取。打开命令处理器输入nslookup xxx.xxx.xxx.xxx(IP地址)就能解析ip,来判断是否来自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com*.baidu.jp的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

3、 在mac os平台下,您可以使用dig 命令反解ip来判断是否来自Baiduspider的抓取。打开命令处理器输入dig xxx.xxx.xxx.xxx(IP地址)就能解析ip,来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com*.baidu.jp的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

文章来源:http://cxzseo.com/SEObaike/2192.html,初学者SEO学堂,转载请注明出处

展开阅读全文

页面更新:2024-03-22

标签:学堂   初学者   蜘蛛   上宾   处理器   命令   出处   来源   疯狂   格式   地址   方式   站长   方法   平台

1 2 3 4 5

上滑加载更多 ↓
推荐阅读:
友情链接:
更多:

本站资料均由网友自行发布提供,仅用于学习交流。如有版权问题,请与我联系,QQ:4156828  

© CopyRight 2020-2024 All Rights Reserved. Powered By 71396.com 闽ICP备11008920号-4
闽公网安备35020302034903号

Top