在过去 24 小时内,Googlebot 在尝试访问您的 robots.txt 时遇到了 33 个错误。为确保不会抓取该文件中列出的任何网页,我们推迟了抓取操作。您网站的 robots.txt 总体错

1.如果您的网站是近期迁移到阿里云上来的,由于google收录有一定的时间抓取,建议您等待一段时间,同时建议您通过增加外链,交换外链等来增加收录;还可以在google站长工具上提交网页收录(https://support.google.com/webmasters/answer/1352276)查看效果如何。 
2.如果您已经迁移到阿里云服务器已经有一段时间,建议您 
1) 使用Google Webmaster工具fetch as google功能 测试Google抓取您的网站是否正常,同时查询是否是您设置网站user agent过滤或者防盗链等工具造成无法抓取导致; 
2) 登录Google的webmaster tools (https://www.google.com/webmasters/tools/)把target user in 切换到china; 

3) 如果您的网站用户主要面向国内,建议您将DNS服务器设置成万网或者国内比较稳定的DNS,因为同时某些不稳定的国内DNS服务器商有时也会遇到类似的阻断,会偶尔间歇性出现类似的问题;如果您的网站用户主要面向国外,建议您将DNS服务器解析设置成国外稳定的DNS服务商如godaddy等(可以DNS解析在国外,DNS管理在国内)。

我的网站:SI4463无线模块



你可能感兴趣的:(seo)