当前您在:首页 > 博主随笔 > seoer怎么通过代码识别百度蜘蛛

seoer怎么通过代码识别百度蜘蛛

来源:村仔SEO博客 热度:

  多个蜘蛛爬网一个站点会增加服务器负担。为了提高可访问性,中国的网站可以识别并允许仅来自中国最大搜索引擎百度的蜘蛛,并阻止来自较小搜索引擎的蜘蛛。这是识别百度蜘蛛的2个简单步骤。

  站长代码识别百度蜘蛛的方法

  步骤1:检查用户代理

  如果蜘蛛的用户代理不在下面的列表中,则它不是来自百度的蜘蛛。百度蜘蛛的UA分为三类:移动,桌面和应用程序。

  百度移动UA

  Mozilla / 5.0(Linux; u; Android 4.2.2; zh-cn;)AppleWebKit / 534.46(KHTML,如Gecko)版本/5.1 Mobile Safari / 10600.6.3(兼容; Baiduspider / 2.0; + http:// www。 baidu.com/search/spider.html)

  Mozilla / 5.0(iPhone; CPU iPhone OS 9_1,如Mac OS X)AppleWebKit / 601.1.46(KHTML,如Gecko)版本/9.0 Mobile / 13B143 Safari / 601.1(兼容; Baiduspider-render / 2.0; + http:// www .baidu.com / search / spider.html)

  百度桌面UA

  Mozilla / 5.0(兼容; Baiduspider / 2.0; + http://www.baidu.com/search/spider.html)

  Mozilla / 5.0(兼容; Baiduspider-render / 2.0; + http://www.baidu.com/search/spider.html)

  百度应用UA

  Mozilla / 5.0(iPhone; CPU iPhone OS 9_1如Mac OS X)AppleWebKit / 601.1.46(KHTML如Gecko)版本/9.0 Mobile / 13B143 Safari / 601.1(兼容; Baiduspider-render / 2.0; Smartapp; + http:/ /www.baidu.com/search/spider.html)

  步骤2:反向查询IP

  网站管理员可以通过反向查找其IP来确定蜘蛛是否来自百度。如何反向查找IP取决于您的操作系统。

1.本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;
2.网友投稿可能会经我们编辑修改或补充。
转载请注明出处:http://www.cunzaiseo.com/bozhusuibi/89.html

上一篇:杭州拱墅区seo网站优化外包公司哪家好? 下一篇:在百度资源平台中怎么验证HTTPS网站?
说点什么吧
  • 全部评论(0
    还没有评论,快来抢沙发吧!
相关文章
热门文章