2013-09-21 分类: 网站建设
我们在查看网站日志的时候,看到百度蜘蛛来抓取我们网站了,我们可以怎么去识别这个蜘蛛是真实来自百度的呢?今天创新互联SEO给大家分享两个方式来查询。
通常情况下,模拟百度蜘蛛是比较少见的,但是当我们分享百度蜘蛛必须要在一个前提下,那就是必须是真的百度蜘蛛。所以在日志中获得一个IP后首先就是排除假蜘蛛这种情况。下面说一下通过nslookup反解IP来实现辨别真假蜘蛛。
nslookup查询:
运行——CMD——输入nslookup IP(例如nslookup 111.206.221.22)然后按一下enter键
这个时候,就能查询到IP的hostname,如果是以 *.baidu.com的格式命名,则为百度蜘蛛,如果不是。表示为伪装的假蜘蛛。
其他操作系统查询:
MAC
在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
linux
在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
通过上面的方式,我们就能够完成识别百度蜘蛛是真还是假装的了。
网页题目:如何鉴别百度蜘蛛真假?
文章链接:https://www.cdcxhl.com/news/3457.html
成都网站建设公司_创新互联,为您提供网站维护、虚拟主机、App设计、搜索引擎优化、手机网站建设、动态网站
声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联
猜你还喜欢下面的内容