我发现网站上的robots.txt文件导致Google的网站站长工具无法正确索引我的网站。我尝试并从文件中删除了几乎所有内容(使用WordPress,以便它仍会生成它),但在他们的面板中我一直遇到相同的错误,
“在站点上发现了严重的状态问题。-检查站点状态”。当我单击站点状态时,它告诉我robots.txt阻止了我的主页,实际上不是。
http://saturate.co/robots.txt-想法?
编辑:标记为已解决,似乎网站管理员工具现在接受了该网站,并且未显示任何错误。
您应该尝试将Disallow:
文件添加到末尾。所以看起来像这样:
User-agent: *
Disallow:
本文收集自互联网,转载请注明来源。
如有侵权,请联系 [email protected] 删除。
我来说两句