合肥网络公司知识之ROBOT和蜘蛛

1、先说ROBOT和蜘蛛的关系：

Robot的英文意识是机器人，在网站推广或搜索引擎优化SEO中，也常常翻译成探测器；它是搜索引擎用来抓取网页的工具，它是一个软件或者说一系列自动程序，不同的搜索引擎给他们自己的探测器(Robot)起不同的名字；比如百度叫baiduspider 、MSN叫MSNbot、谷歌叫googlebot、Yahoo叫Slurp? (Slurp，中文理解是机器人吃东西时发出的啧啧的声音)。

所以ROBOT和蜘蛛一个大类与子类，包含与被包含的关系。

2、再详细介绍百度的蜘蛛：

百度用以抓取并收录互联网上数以亿计的网页的程序，就叫做Baiduspider – 百度蜘蛛。它会不知疲倦地、没日没夜地在互联网上找寻新的URL，接着抓取URL上的内容，并返回到百度的网页暂存数据库里。业界素有百度蜘蛛一般下午和晚上喜欢来网站抓取内容的流传，无从考证。但如果你能真正做到每天某个时间点很规律地更新文章的话，这个你看不见的“小蜘蛛”就会在这个时间点光临你的网站。
转载请注明出处 网络公司佳达科技专注于网站推广 www.baidu0551.cn