RELATEED CONSULTING
相关咨询
选择下列产品马上在线沟通
服务时间:9:30-18:00
你可能遇到了下面的问题
深圳建网站公司

技术支持

怎么来分析网站的百度蜘蛛?
  • 作者:
  • 发表时间:2018-08-29 14:22
  • 来源:
所在位置:羽灵鸟深圳建站公司首页 > 技术支持 > 推广优化 > 怎么来分析网站的百度蜘蛛?

  有人这样的问,为什么我的网站没有收录,为什么我的网站没有权重,是不是百度蜘蛛没有来啊!我要怎么才能看见我网站的蜘蛛有多少个,什么时候来?这个都是一脸的蒙蔽状态。有一定的解释。

  通常站长们查询都是用的网站日志来查询蜘蛛动向或者是用站长工具平台来查询网站的变化情况。然而下面给大家分析一个用ua标识来分析一下百度蜘蛛的动向,(对360也有作用)

  什么是ua标识?

  简单的说就是爬虫与网站之间的协议,爬虫根据这个UA标识来判断网站的来路统计.

  怎么来分析网站的百度蜘蛛?

  1、查看UA,如果UA都不对,可以直接判断非百度搜索的蜘蛛,目前对外公布过的UA是:

  移动UA:Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,likeGecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)

  PC UA:Mozilla/5.0 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)

  新增渲染UA:

  移动UA:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 likeMac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

  PC UA:Mozilla/5.0 (compatible;Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

  2、反查IP

  站长可以通过DNS反查IP的方式判断某只spider是否来自百度搜索引擎。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:

  1)、在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

  

  2)、在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

  3)、 在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

  其实百度蜘蛛查询对于网站也是比较重要的一点,通过了解蜘蛛的动向和数量来给网站做不一样的做法,当蜘蛛少的时候我们可以增加一些外链来给网站增加蜘蛛,然而当蜘蛛多的时候我们就可以多发一些有质量的文章或者引入一下有质量的信息,给网站增加收录从而增加网站的排名以及权重。


上一篇:站长怎么对商城网站推广
下一篇:巧妙运用火车头采集器

文章推荐: