这个事情头疼啊 ,弄了很长时间了。都没弄好。我网站是做智能电视论坛的,前几个月就收到谷歌这样的提示邮件!提示如下:
http://www.tupowang.cn/:Googlebot 无法访问您的网站在过去 24 小时内,Googlebot 在尝试访问您的 robots.txt 时遇到了 587 个错误。为确保不会抓取该文件中列出的任何网页,我们推迟了抓取操作。您网站的 robots.txt 总体错误率为 99.0%。
您可以在网站站长工具中查看关于这些错误的更多详情。
推荐操作
如果网站错误率达到了 100%:
- 请使用网络浏览器尝试访问 http://www.tupowang.cn/robots.txt。如果您可以使用浏览器访问该文件,说明您的网站可能被配置为阻止 Googlebot 访问。请检查防火墙和网站的配置,确保您没有阻止 Googlebot 的访问。
- 如果您的 robots.txt 是静态页面,请验证您的网络服务拥有访问该文件的相应权限。如果您的 robots.txt 是动态生成的,请验证生成 robots.txt 的脚本配置无误并拥有运行权限。请查看您网站的日志了解脚本是否出错,如果确实出错,请尝试诊断错误根源。
如果网站错误率低于 100%:
- 请使用网站站长工具找到错误率较高的一天并检查网络服务器当天的日志。在那天的日志中查找访问 robots.txt 时出现的错误并修复这些错误的根源。
- 很可能是因为您的网站已过载。请与您的托管服务提供商联系,商讨重新配置您的网络服务器或为您的网站分配更多资源。如果您的网站重定向到另一主机名,还有可能是因为您网站上某个网址的重定向目标主机名在为 robots.txt 文件提供服务时出现了上述的一个或多个问题。
如果您认为问题已经解决,请使用 Google 抓取方式抓取 http://www.tupowang.cn/robots.txt 以验证 Googlebot 能正常访问您的网站。
要了解详情,请访问我们的帮助中心。
没办法了,
只能在这求帮助了。
谢谢大侠们,
如果这个问题不解决的话换友情连
接都是很大的问题啊。
|