2023-05-15 分类: 网站建设
因为近成都网站建设的网站收录异常,为了弄清楚网站的情况,查看网站日志是工作之一。通过日志我们可以清楚的知道,一天百度蜘蛛会来多少次。
现在介绍一下百度蜘蛛,它主要的功能就是抓取网页,我们称它为百度蜘蛛,英文名叫Baiduspider。我们通过网站日志就可以看出网站蜘蛛一天中的哪一个时间到网站中来了,通过分析蜘蛛抓取情况去分析网站。蜘蛛抓取网站内内容的频率可以判断蜘蛛的活跃程度,主要以状态码显示。
如何查看网站日志?这个很多站长都不太了解,下面就简单的来介绍一下。首先要通过FTP找到你网站的日志文件,要从根目录里去找寻,其中会包含一个叫log的文件名,之后解压下载到记事本中,记事本中的内容就是网站日志了。
因为不同的服务器和不同的主机,所以日志所记录下来的内容也就会有差别。下面就来从日志的内容中看一下。
比如我们的论坛帖:61.191.54.51 - - [11/Jan/2012:04:02:45 +0800] "GET /bbs/thread-903-1-1.html HTTP/1.1" 200 3450 "-" "Baiduspider+(+http://www.baidu.com/search/spider.htm)"
其中bbs/thread-903-1-1.html 这个页面被抓取了。后面的200就代表着蜘蛛抓取成功,后面的3450表示成功抓取的字节数。如果你的日志格式和这里的不同,只能说明网站格式在设置上有所不同。另外还有些情况就是200 0 0 或者200 0 64 这都是没有问题的。
分享文章:网编教你分析网站日志
分享链接:https://www.cdcxhl.com/news16/259266.html
成都网站建设公司_创新互联,为您提供品牌网站建设、网站改版、网站建设、做网站、用户体验、软件开发
声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联
猜你还喜欢下面的内容