几周前,我安装了一个新的WordPress,我遇到了一些奇怪的问题。
1-我收到这样一条消息:“FirstName LastNamename-last.com的评论/由于此网站的机器人,因此无法提供此结果的描述。txt–了解更多信息。“当我用谷歌搜索我的名字时。我重新检查了设置,但没有选中“劝阻选项”
2-我安装了WP Better Security和Yoast SEO插件。现在我有另一个问题了!
当我在谷歌上搜索我的域名时,会出现随机网络嗅探网站,暴露我的数据服务器和更多东西!
我哪里出错了?
附言:我的机器人。txt已修复为从昨天起只允许插件文件夹(不太长)
SO网友:epilektric
您的robots文件截至目前:
User-agent: Googlebot
Disallow:
User-agent: *
Disallow:
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Sitemap: http://www.yadfaeq.com
您没有为Googlebot指定任何内容,因此应该将其删除。此外,
Disallow:
可解释为
Disallow: /
这会阻止你的整个网站。
您的robots文件应该是什么:
User-agent: *
Disallow: /cgi-bin/
Disallow: /wp-admin/
Disallow: /wp-includes/
Sitemap: http://www.yadfaeq.com
谷歌经常缓存机器人。txt文件,因此可能需要一些时间才能检查新文件。我建议您使用
Google Webmaster Tools 帮助控制Google的索引内容。
我看不到你所说的对你的机器人所做的改变。txt文件。也许您的服务器也在缓存它?