您现在的位置是:首页 > SEO教学 > SEO教学
织梦网站robots文件应该禁止哪些(常见织梦网站robots文件写法)
来源:村仔SEO博客 2021-12-30 人已围观
简介:网上robots的写法,说法一大堆,也不知谁对谁错,那么织梦robots文件具体应该禁止哪些文件呢?今天村仔SEO大概总结一下: 首先说明一点:每天百度派出的蜘蛛是有限的,robots写出来是
网上robots的写法,说法一大堆,也不知谁对谁错,那么织梦robots文件具体应该禁止哪些文件呢?今天村仔SEO大概总结一下:
首先说明一点:每天百度派出的蜘蛛是有限的,robots写出来是为了节省蜘蛛资源让蜘蛛能更快的进行有效爬取和收录!
针对企业站来说,本身蜘蛛资源不会很多,所以我们更要珍惜蜘蛛的每次爬取,让其都有意义,不要去爬取一些无价值的页面,浪费了蜘蛛资源,从而导致网站迟迟未收录,没排名等情况!
下面是织梦网站robots文件举例:
1、模板文件(/template/)可以屏蔽;
2、这个文件/uploads/一般放的是图片,可以屏蔽;
3、/data/系统数据文件,可以屏蔽;
4、/img/或/images/,如果你不是做的图片站,也可以屏蔽;
5、/bin/系统文件可以屏蔽;
6、/install/安装文件可以屏蔽;
7、/member/有会员的可以屏蔽;
8、/logreport/有统计报告的可以屏蔽;
9、/bjk/有加密的文件,可以屏蔽;
10、/js/,/css/可以屏蔽,留着是为了让蜘蛛更好地了解网站结构,资源少的情况下,可以屏蔽。
11、网站地图,sitemap要记得放进去,不要屏蔽,让蜘蛛第一时间去看你的网站地图,更快了解网站链接结构!
以上就是织梦robots文件具体应该禁止哪些文件的全部内容,希望对大家有些帮助!
相关文章
随机博文
【杭州上城区SEO】网站robots文件制作技巧方法
对于一个新的网站的时候,我们前期需要做好robot协议设定,因为这对于我们的新站是必不可少的,这样可以快速让我...如何通过IP来判断是不是百度蜘蛛?
站长该如何通过IP来判断此spider是不是来自百度搜索引擎的呢?可以通过DNS反查方式来解决这个问题。根据平台不同验...什么是沙盒效应?如何判断网站是否处于沙盒期?
什么是沙盒效应? 所谓的沙盒效应就是指搜索引擎对新网站进行短暂的观察期,经过一段时间的考验,期间网站会被...核心关键词如何选择和定位(核心关键词选取的原则)
说到核心关键词的选择和定位可能很多SEOer都会有一定见解,那么核心关键词如何选择和定位?今天聊聊小编的方法吧...H标签的常见用法有哪些?怎么使用?
H标签的常见用法有哪些?H标签怎么使用?H标签的优化方法?可能很多人会有这些疑虑。在本文中村仔SEO将把H标签在...织梦网站robots文件应该禁止哪些(常见织梦网站robots文件写法)
网上robots的写法,说法一大堆,也不知谁对谁错,那么织梦robots文件具体应该禁止哪些文件呢?今天村仔SEO大概总结...如何提高百度权重(快速提高百度权重方法)
为什么要提高百度权重? 目前百度作为最大的中文搜索引擎,很多中文站点都需要搜索引擎检索和收录,每个站点都...一个入行十年的SEOer的35个SEO经验
当我第一次开始搜索引擎优化就好像是在昨天,但实际上我已经做了整整十年。十年是一个相当长的时期,即使世事...
文章评论
- 全部评论(0)
