- 作者:
- 发表时间:2018-08-29 14:22
- 来源:
有人这样的问,为什么我的网站没有收录,为什么我的网站没有权重,是不是百度蜘蛛没有来啊!我要怎么才能看见我网站的蜘蛛有多少个,什么时候来?这个都是一脸的蒙蔽状态。有一定的解释。
通常站长们查询都是用的网站日志来查询蜘蛛动向或者是用站长工具平台来查询网站的变化情况。然而下面给大家分析一个用ua标识来分析一下百度蜘蛛的动向,(对360也有作用)
什么是ua标识?
简单的说就是爬虫与网站之间的协议,爬虫根据这个UA标识来判断网站的来路统计.
怎么来分析网站的百度蜘蛛?
1、查看UA,如果UA都不对,可以直接判断非百度搜索的蜘蛛,目前对外公布过的UA是:
移动UA:Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,likeGecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)
PC UA:Mozilla/5.0 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)
新增渲染UA:
移动UA:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 likeMac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
PC UA:Mozilla/5.0 (compatible;Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
2、反查IP
站长可以通过DNS反查IP的方式判断某只spider是否来自百度搜索引擎。根据平台不同验证方法不同,如linux/windows/os三种平台下的验证方法分别如下:
1)、在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
2)、在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
3)、 在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。
其实百度蜘蛛查询对于网站也是比较重要的一点,通过了解蜘蛛的动向和数量来给网站做不一样的做法,当蜘蛛少的时候我们可以增加一些外链来给网站增加蜘蛛,然而当蜘蛛多的时候我们就可以多发一些有质量的文章或者引入一下有质量的信息,给网站增加收录从而增加网站的排名以及权重。
本站声明:此篇文章由深圳市羽灵鸟网络技术有限公司网站优化技术人员从网络搜集、整理、发布,如有问题,请联系本公司予以删除,特此声明,谢谢合作!
羽灵鸟品牌简介
深圳市羽灵鸟网络技术有限公司是一家专注于高端网站建设、网站品牌策划、网络营销推广一体的互联网公司。团队骨干有着丰富的网站建设经验、10多年的网站优化经验,致力于为客户提供更符合搜索引擎收录的网站开发服务,并提供域名、空间、企业邮箱等互联网基础产品业务。我们将客户所在的行业与网络技术完美结合,让客户可以在瞬息万变的互联网领域获得更强的竞争力。
我们以诚信务实的创作态度,使其成为网站建设行业最具成长性、独具国际视野的知名品牌。
我们深信口碑传播的力量,在为客户打造的每一个网站时都希望尽善尽美,成为羽灵鸟网络的一个又一个金字招牌,也为客户最大发挥传播的力量!
我们的品牌文化:为企业省成本,为品牌创价值!
如有需求,请踊跃与我们联系,我们将为您提供高性价比的完善、优质的服务!
上一篇:站长怎么对商城网站推广
下一篇:巧妙运用火车头采集器
文章推荐: