产生原因:
1. 网站服务器异常、百度抓取失败导致线上结果短暂取消收录,线上恢复后可以在一定周期内容恢复。文章源自玩技e族-https://www.playezu.com/656269.html
2. 网站错误设置robots被封禁、网站对百度封禁导致抓取异常。文章源自玩技e族-https://www.playezu.com/656269.html
问题处理:
1.根据以上两个方面的原因使用百度模拟蜘蛛爬取查看是否正常。文章源自玩技e族-https://www.playezu.com/656269.html
2.检查robots文件是否有封禁百度的相关配置。文章源自玩技e族-https://www.playezu.com/656269.html
robots封禁后,为什么线上结果没有立刻消除或百度爬虫依旧对封禁目录进行抓取?
网站在设置robots封禁,您可以使用搜索资源平台的robots工具进行更新,更新后可以尝试使用抓取诊断工具进行检测。 百度在robots封禁后,百度可以保证不再对robots封禁的网站和目录进行抓取,但无法保证线上结果会立即消除,线上更新需要1-2周。如您站想快速删除索引,您可以将域名设置404状态,使用死链工具进行提交。如问题依旧存在,请进行人工反馈。文章源自玩技e族-https://www.playezu.com/656269.html 文章源自玩技e族-https://www.playezu.com/656269.html
玩技站长微信
添加好友自动发送入群邀请
rainbow-shownow
玩技官方公众号
官方微信公众号
PLAYEZU
评论