您现在的位置是:首页 > SEO教学 > SEO教学

织梦网站robots文件应该禁止哪些(常见织梦网站robots文件写法)

来源:村仔SEO博客 2021-12-30 人已围观

简介:网上robots的写法,说法一大堆,也不知谁对谁错,那么织梦robots文件具体应该禁止哪些文件呢?今天村仔SEO大概总结一下: 首先说明一点:每天百度派出的蜘蛛是有限的,robots写出来是

  网上robots的写法,说法一大堆,也不知谁对谁错,那么织梦robots文件具体应该禁止哪些文件呢?今天村仔SEO大概总结一下:

  首先说明一点:每天百度派出的蜘蛛是有限的,robots写出来是为了节省蜘蛛资源让蜘蛛能更快的进行有效爬取和收录!

  针对企业站来说,本身蜘蛛资源不会很多,所以我们更要珍惜蜘蛛的每次爬取,让其都有意义,不要去爬取一些无价值的页面,浪费了蜘蛛资源,从而导致网站迟迟未收录,没排名等情况!

  下面是织梦网站robots文件举例:

  1、模板文件(/template/)可以屏蔽;

  2、这个文件/uploads/一般放的是图片,可以屏蔽;

  3、/data/系统数据文件,可以屏蔽;

  4、/img/或/images/,如果你不是做的图片站,也可以屏蔽;

  5、/bin/系统文件可以屏蔽;

  6、/install/安装文件可以屏蔽;

  7、/member/有会员的可以屏蔽;

  8、/logreport/有统计报告的可以屏蔽;

  9、/bjk/有加密的文件,可以屏蔽;

  10、/js/,/css/可以屏蔽,留着是为了让蜘蛛更好地了解网站结构,资源少的情况下,可以屏蔽。

  11、网站地图,sitemap要记得放进去,不要屏蔽,让蜘蛛第一时间去看你的网站地图,更快了解网站链接结构!

  以上就是织梦robots文件具体应该禁止哪些文件的全部内容,希望对大家有些帮助!

Tags: 织梦 robots

随机博文

文章评论

    说点什么吧
    • 全部评论(0
      还没有评论,快来抢沙发吧!