百度蜘蛛,英文名是“Baiduspider”是百度搜索引擎的一个自动程序。它的作用是访问互联网上的网页、图片、视频等内容,建立索引数据库,使用户能在百度搜索引擎中搜索到您网站的网页、图片、视频等内容。
简单点来说,百度的搜索功能就是依靠蜘蛛来实现的。。蜘蛛从互联网上搜集大量的各种网页信息并建立索引数据库,这样用户在搜索的时候就能依据搜索的关键字去匹配索引,进而显示要查找的那类网页或者图片等。。
这里有详细的介绍,可以看一下。。
http://baike.baidu.com/view/1847001.htm