做好SEO必须会使用百度抓取诊断工具

做好SEO必须会使用百度抓取诊断工具

前几天发现我的音乐网站流量突然骤降，用了站长工具的SEO工具，发现关键字也掉了很多，收录也变少。此刻发现了事情的严重性，便打开百度站长工具的抓取诊断工具，结果如下：

从上图可以看出来提交的链接百度总是抓取失败，也就是说我的网站把百度蜘蛛给屏蔽了。我首先想到的是先排查自己的网站是否有设置错误，清空了了robot.txt文件依然如此。然后是否是wordpress插件不稳定导致的结果，变关闭了当时不稳定的多说评论，另外清空缓存文件，结果抓取依然失败。所以，只有一种可能，那就是主机商屏蔽了百度蜘蛛！

我立即联系我的主机客服，排查还算迅速，他们给的回复是主机最近受到攻击不得不把防火墙等级提高导致误屏蔽了百度蜘蛛！有些主机商他们更多的关心是自己的主机不受攻击而忽略其他内容，因此大家发现自己的网站有什么不正常的地方立即用百度的诊断工具测试，逐一排查问题。

PS

其实百度站长的诊断工具功能还不仅如此，点击“抓取成功”后可以看到百度Spider抓取结果及页面信息，根据这些信息可以了解自己的网站内容是否被成功抓取。根据百度的建议，frame框架等内容是不被百度蜘蛛识别的，因此大家要特别注意自己所需的内容是否在抓取结果里面。

百度抓取诊断工具