返回列表

技术:佳达教你识别真假Baiduspider

发表日期: 2014-05-08 文章来源:佳达科技

技术:佳达教你识别真假Baiduspider

真假“李逵”大家都很熟悉,但作为一家专业网络推广/网站优化公司,今天要教你的是如何识别真假Baiduspider。

首先,什么是真假Baiduspider?

根据百度百科的解释:百度蜘蛛,是百度搜索引擎的一个自动程序。它的作用是访问收集整理互联网上的网页、图片、视频等内容,然后分门别类建立索引数据库, 使用户能在百度搜索引擎中搜索到您网站的网页、图片、视频等内容。
通俗地说,你的网站是什么样的,在百度眼里,就是通过Baiduspider来识别的,所以说Baiduspider是一个我们与百度沟通的很重要的桥梁!

接着进入正题,如何识别真假Baiduspider?

可以通过DNS反查方式来解决这个问题。根据平台不同验证方法不同,如windows/linux/os三种平台下的验证方法分别如下:

1、在windows平台或者IBM OS/2平台下,您可以使用nslookup ip命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入nslookup xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以*.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

2、在linux平台下,您可以使用host ip命令反解ip来判断是否来自Baiduspider的抓取。

Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

3、在mac os平台下,您可以使用dig 命令反解ip来 判断是否来自Baiduspider的抓取。打开命令处理器 输入dig xxx.xxx.xxx.xxx(IP地 址)就能解析ip, 来判断是否来自Baiduspider的抓取,Baiduspider的hostname以 *.baidu.com 或*.baidu.jp 的格式命名,非 *.baidu.com 或 *.baidu.jp 即为冒充。

了解这些信息之后,一些初学的站长就不用担心误封禁了Baiduspider的IP。
另外,如果站长发现Baiduspider光顾过于频繁,已超越服务器承受能力;而百度站长平台追查发现,Baiduspider对该站点的抓取并无异常,那只spider极有可能是个李鬼,通过上述方法可以快速验明正身!

 

转载请注明出处 合肥网络公司佳达科技专注于网站推广 www.jdwlkj.net

  1,986 次
 佳达科技
返回列表

暂无回复 trackback

评论关闭!