RELATEED CONSULTING
相关咨询
选择下列产品马上在线沟通
服务时间:9:30-18:00
你可能遇到了下面的问题
深圳建网站公司

技术支持

怎么来分析网站的百度蜘蛛?
  • 作者:
  • 发表时间:2018-08-29 14:22
  • 来源:
所在位置:羽灵鸟深圳建站公司羽灵鸟首页 > 技术支持 > 推广优化 > 怎么来分析网站的百度蜘蛛?

  有人这样的问,为什么我的网站没有收录,为什么我的网站没有权重,是不是百度蜘蛛没有来啊!我要怎么才能看见我网站的蜘蛛有多少个,什么时候来?这个都是一脸的蒙蔽状态。有一定的解释。

  通常站长们查询都是用的网站日志来查询蜘蛛动向或者是用站长工具平台来查询网站的变化情况。然而下面给大家分析一个用ua标识来分析一下百度蜘蛛的动向,(对360也有作用)

  什么是ua标识?

  简单的说就是爬虫与网站之间的协议,爬虫根据这个UA标识来判断网站的来路统计.

  怎么来分析网站的百度蜘蛛?

  1、查看UA,如果UA都不对,可以直接判断非百度搜索的蜘蛛,目前对外公布过的UA是:

  移动UA:Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,likeGecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)

  PC UA:Mozilla/5.0 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)

  新增渲染UA:

  移动UA:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 likeMac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

  PC UA:Mozilla/5.0 (compatible;Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)

  2、反查IP

  站长可以通过DNS反查IP的方式判断某只spider是否来自百度搜索引擎。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:

  1)、在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

  

  2)、在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

  3)、 在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

  其实百度蜘蛛查询对于网站也是比较重要的一点,通过了解蜘蛛的动向和数量来给网站做不一样的做法,当蜘蛛少的时候我们可以增加一些外链来给网站增加蜘蛛,然而当蜘蛛多的时候我们就可以多发一些有质量的文章或者引入一下有质量的信息,给网站增加收录从而增加网站的排名以及权重。


上一篇:站长怎么对商城网站推广
下一篇:巧妙运用火车头采集器

文章推荐:

通常404和301对于站长来说,都是非常的简单,但是往往因为这些简单造成了很多的纰漏,造成的结果却不是站长所想的,他们的作用虽然不像网站结构这么重要,但是我们也不能够轻视他。 404页面就是客户端在浏览网页时,服务器...

如何正确选择高性价比的深圳建站公司?虽然说企业网站建设都不会有一个固定的模式,但是遵循指导性的流程步骤,可以提高企业建设网站的效率,同时还能减少建设网站过程中错误的出现。 如何正确选择高性价比的深圳建站公...

当项目做多做久了,你会意识到很多时候选对比做对更重要!选对营销渠道才能更好完成企业拓客目的,从主流的关键词排名到核心社交媒体传播是每一家企业必须去做的。但是,如果你对营销产品的定位认知不足或多过错误认知...

互联网的迅速发展,导致很多的推广平台被别人发现的一清二楚,就连百度知道也是一样,通过实践来告知大家百度知道的秘密,让你的知道活的长久。 让我想到做百度知道的灵感源于和媳妇逛街,刚过完年,打算为家里买一台电...

互联网在不断发展壮大,已成为企业和个人寻求生意机会,对商品、服务和信息进行了解的首选方式。从站在增强一个企业竞争优势的角度看,建设一个多语言网站是不断增加客户数量的前提和提高销售的高效手段。 随着国际化进...

一、IP环境 地区相关性限制,非本地区的IP点击不计分(PS:部分行业有此限制,比如地区旅游行业网站,如上海旅行社必须需要上海本地的IP点击,否则不加分,多次使用外地IP点击不仅不会加分还会使网站进入黑名单,所以很多朋...