标签：robots.txt禁止目录是否有效？

网站被黑生成大量xx网址被收录，全部 404，无法整理所有网址且网址结构不规则，遇到这个情况都怎么处理 ？ 已经收录的话，site 后，将所有收录的可以提交 404 ，然后 robots 禁止百度爬取目录，然后正常更新。这种情况会造成非常严重问题，百度后续不会收录，需要慢慢养，以前秒收，现在周收。 一定要能整理尽量整理，然后做一个 404 页面，告诉蜘蛛已删除，只能等蜘蛛慢慢爬取 在处理之前也要仔细检查为什么会被黑？网站要好好...