上一节我们介绍了如何使用管理员工具添加网站及提交网站地图，本节主要介绍怎样使用此工具制作搜索引擎抓取文件权根的robots.txt文件和抓取错误分析。

一、测试和制作robots.txt

进入抓取工具的权限页，如果你的网站原来就有这个文件，可以看到解析结果下方有http://www.aaab2b.com/robots.txt 的内容，此内容就是你的网站robots.txt的内容。还可以看到你的文件是否运行正常及谷歌机器人上次抓取日期和状态，如返回代码200为成功状态，如图：

这里我们以3A塑料网为示例分析

利用此工具制作robots.txt也是十分容易的以及可以避免人手写作出现的单词拼写错误。

二、分析抓取错误
点击故障诊断/抓取错误进入，在此工具上可以很直观地看到相关网页抓取的错误原因及具体网址，通过这个工具可以找出平时无法知道的错误链接有利于提高用户体验及网站优化的作用，如下图：

www.aaab2b.com为示例分析