1. robots.txt可能告诉百度您网站的哪些页面可能被抓取

1. robots.txt能够告诉百度您网站的哪些页面能够被抓取，哪些页面不行够被抓取。

2. 您能够通过Robots器材来创筑、校验、更新您的robots.txt文献，或查看您网站robots.txt文献正在百度生效的境况。

3. Robots器材目前撑持48k的文献实质检测，请担保您的robots.txt文献不要过大，带商标公司转让目次最长不超出250个字符。