当前您在:首页 > SEO教学 > 织梦robots文件具体应该禁止哪些文件?

织梦robots文件具体应该禁止哪些文件?

来源:村仔SEO博客 热度:

  网上robots的写法,说法一大堆,也不知谁对谁错,那么织梦robots文件具体应该禁止哪些文件呢?今天村仔SEO大概总结一下:

  首先说明一点:每天百度派出的蜘蛛是有限的,robots写出来是为了节省蜘蛛资源让蜘蛛能更快的进行有效爬取和收录!

  针对企业站来说,本身蜘蛛资源不会很多,所以我们更要珍惜蜘蛛的每次爬取,让其都有意义,不要去爬取一些无价值的页面,浪费了蜘蛛资源,从而导致网站迟迟未收录,没排名等情况!

  下面是织梦网站robots文件举例:

  1、模板文件(/template/)可以屏蔽;

  2、这个文件/uploads/一般放的是图片,可以屏蔽;

  3、/data/系统数据文件,可以屏蔽;

  4、/img/或/images/,如果你不是做的图片站,也可以屏蔽;

  5、/bin/系统文件可以屏蔽;

  6、/install/安装文件可以屏蔽;

  7、/member/有会员的可以屏蔽;

  8、/logreport/有统计报告的可以屏蔽;

  9、/bjk/有加密的文件,可以屏蔽;

  10、/js/,/css/可以屏蔽,留着是为了让蜘蛛更好地了解网站结构,资源少的情况下,可以屏蔽。

  11、网站地图,sitemap要记得放进去,不要屏蔽,让蜘蛛第一时间去看你的网站地图,更快了解网站链接结构!

  以上就是织梦robots文件具体应该禁止哪些文件的全部内容,希望对大家有些帮助!

1.本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;
2.网友投稿可能会经我们编辑修改或补充。
转载请注明出处:http://www.cunzaiseo.com/seojiaoxue/140.html

上一篇:杭州SEO优化做301重定向教程 下一篇:百度快照不更新是什么原因?该如何解决?
说点什么吧
  • 全部评论(0
    还没有评论,快来抢沙发吧!
相关文章
热门文章
  • script标签是什么意思?
    script标签是什么意思? script标签用于定义客户端脚本,比如JavaScript,script元素既可以包含脚本语句,也可以通过src属性指向外部脚本文件。必需的type属性规
  • 【杭州西湖区SEO】如何提高用户的体验度?
    由于现在搜索引擎漏洞百出,现在的seo几乎是一团乱水,一个毫无体验的网站,一个几乎,没有任何内容的网站,都能上搜索引擎的首页,但搜索引擎一旦
  • head标签中包含的标签有哪些?都有哪些用法?
    head标签中包含的标签有哪些?都有哪些用法? 1.base标签 所有浏览器均支持base标签 定义和用法 base标签为页面上的所有链接规定默认地址或默认目标。 通
  • description是什么意思?description标签正确用法
    description是什么意思? 对于seo来说都知道description就是页面的描述,description对网站关键词排名有着至关重要的作用,我们常说的TDK三大标签中的D就是descri
  • inurl是什么意思?
    inurl是什么意思?inurl:指令用于搜索查询词出现在URL中的页面。百度和Google都支持inurl:旨令。inurl:指令支持中文和英文。比如搜索“inurl:搜索引擎优化”,
  • body标签是什么意思?
    body标签是什么意思? body 元素是定义文档的主体。body 元素包含文档的所有内容(比如文本、超链接、图像、表格和列表等等。)body是用在网页中的一种