SEO怎么禁止百度蜘蛛爬某个文件夹

创新互联建站导读：禁止搜索引擎抓取网站页面，最常用的就是使用robots文件，禁止百度蜘蛛爬行和抓取某个文件夹，可以用下面这段代码： User-agent: Baiduspider Disallow: wenjianjia/

吉林网站建设公司创新互联公司,吉林网站设计制作，有大型网站制作公司丰富经验。已为吉林上1000+提供企业网站建设服务。企业网站搭建\成都外贸网站建设要多少钱，请找那个售后服务好的吉林做网站的公司定做！

问题：SEO怎么禁止百度蜘蛛爬某个文件夹？

回答：禁止搜索引擎抓取网站页面，最常用的就是使用robots文件，禁止百度蜘蛛爬行和抓取某个文件夹，可以用下面这段代码：

User-agent: Baiduspider

Disallow: wenjianjia/

这里简单解释下几个字段概念：

Baiduspider：这个是百度搜索引擎蜘蛛；

Disallow：这表示禁止，不需要蜘蛛抓取；

wenjianjia/：这里替换你要禁止百度蜘蛛爬行的文件夹名，这里要注意下，如果在文件夹名称的后面加了 / ，就表示禁止抓取文件夹下面的页面，比如说www.test.com/wenjianjia/abc.html，但是www.test.com/wenjianjia/这个栏目页面还是会被抓取的。所以，想要www.test.com/wenjianjia/也不被抓取的话，就要去掉后面的 / ，也就是下面这样的代码：

User-agent: Baiduspider

Disallow: wenjianjia

关于SEO怎么禁止百度蜘蛛爬某个文件夹的问题，本文就简单的介绍到这里，总之使用robots文件是比较方便的，大家可以使用上面的代码，修改成自己的文件夹名称即可。如果要禁止两个文件夹，那就多复制一行，比如：

User-agent: Baiduspider

Disallow: wenjianjia_one/

Disallow: wenjianjia_two/

分享标题：SEO怎么禁止百度蜘蛛爬某个文件夹
浏览路径：https://www.cdcxhl.com/article40/epedeo.html

成都网站建设公司_创新互联，为您提供手机网站建设、软件开发、App设计、网页设计公司、做网站、电子商务

广告

声明：本网站发布的内容（图片、视频和文字）以用户投稿、用户转载内容为主，如果涉及侵权请尽快告知，我们将会在第一时间删除。文章观点不代表本网站立场，如需处理请联系客服。电话：028-86922220；邮箱：631063699@qq.com。内容未经允许不得转载，或转载时需注明来源： 创新互联