robots是搜索引擎爬虫协议，是告诉搜索引擎可以爬取收录我的什么页面，不可以爬取和收录我的那些页面，如果robots文件错误导致网站不收录被封禁，就会给网站带去不必要的流量损失，那么要如何解决呢？
robots文件是一个纯文本文件，也就是常见的.txt文件。在这个文件中网站管理者可以声明该网站中不想被robots访问的部分，或者指定搜索引擎只收录指定的内容。因此，robots的优化会直接影响到搜索引擎对网站的收录情况。如果robots文件错误，需要做以下处理方式：
1、修改网站Robots文件，然后到百度站长平台更新robots；
2、使用百度站长平台抓取诊断工具检测，可能刚刚开始检测会显示抓取失败，没关系，多试几次就可以抓取成功了；
3、使用百度站长平台抓取频次工具，修改网站抓取频率；
4、在百度站长平台的反馈中心向百度搜索进行反馈，说明这次操作是误操作才导致的发生了这种情况；
5、在百度站长平台的资源提交页面，设置网站数据实时推送；
6、更新网站sitemap地图文件，并且提交给百度，设置24小时更新一次；
以上步骤都处理完成以后，接下来就只有等待了，正常情况几天后网站数据就会慢慢恢复了，1个星期左右网站数据就可以恢复正常。
下面给大家总结下，避免大家以后也出现此类的问题。
1、要经常查看百度后台数据，关注网站流量及数据变化，及时发现问题，及时进行处理。
2、不要为了图方便省事，选择在线开发网站；
2、不要为了图方便省事，选择在线开发网站；
3、网站开发或升级要有流程记录，例如在开发网站做了哪些处理，哪些不需要给搜索引擎抓取，哪些需要给搜索引擎抓取，这些一定要非常清楚；
