百度蜘蛛，英文名是“baiduspider”是百度搜索引擎的一个自动程序。它的作用是通过网页超文本访问并抓取互联网上的网页，建立索引数据库，使用户能够在百度搜索引擎中搜索到合适或者接近的搜索结果。通常百度蜘蛛都会有规律地访问您的网站，例如新站百度蜘蛛是十分勤快地访问网站的，例如我的网站www.qiyouseo.com刚上线，注意看会发现百度蜘蛛是天天来过的，而且可以看到发布新内容后的第二天百度蜘蛛到访的次数明显增多，从中不难看出百度是“喜新厌旧”的。百度对内容更新是特别感敏的，哪怕是几个月不到访一次的老站，只要更新内容立即能引起百度蜘蛛的注意。以致被我的同事们笑称百度为乾隆，大家都知道乾隆是多么风流快的，纵使宫中佳丽三千，我不瞧，定要寻个一枝半柳。呵呵，这纯粹是个笑话。

网站日志一般放在logfiles或log目录中，打开日志文件，按CTRL+F查找“baidu.com”搜查一下一共出现多少次及出现的时间对网站优化有很大的作用。文本格式一般为：

2010-04-26 04:03:20 W3SVC168 220.112.38.24 GET /seo/index.html - 80 - 123.125.68.74 Baiduspider+(+http://www.baidu.com/search/spider.htm) 200 0 0 15867 208 
2010-04-26 04:03:20代表时间
W3SVC168 代表你的主机名称
220.112.38.24 代表主机的IP
GET /seo/index.html 表示抓取该页面
Baiduspider+(+http://www.baidu.com/search/spider.htm) 百度蜘蛛程序
200  表示成功抓取

通过了解百度蜘蛛到访情况能有效知道搜索引擎更新网站的频率，及时有效地更改网站优化策略。