这个robots.txt是不是让谷歌不显示我的一些内容？

时间：2012-11-01 作者：janoChen

http://chineselearnonline.com/

User-agent: *

Disallow: /feed/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /xmlrpc.php
Disallow: /wp-

Sitemap: http://chineselearnonline.com/sitemap.xml
我刚换了一台新服务器。我的网站也开始不再出现在前几名的搜索结果中。我想知道这些机器人。上面的txt阻止了我的一些WordPress内容？

EDIT:

我更改了路径http://chineselearnonline.com/v4 到http://chineselearnonline.com/ 另外，不确定这是否是真正的问题robots.txt

2 个回复
SO网友:Rachel Baker

如果更改了站点路径，以前由搜索引擎索引的URL将不再有效。

Google Webmaster Tools有一个地址更改工具：http://support.google.com/webmasters/bin/answer.py?hl=en&answer=83106

通常，您需要：

设置301重定向旧URL

新建网站地图

耐心点

SO网友:markratledge

正如所指出的，你需要重定向，但对于机器人来说。txt，机器人中缺少允许行。txt文件：

User-agent: *
Allow: /

Disallow: /feed/
Disallow: /trackback/
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /xmlrpc.php
这句话毫无意义Disallow: /wp- , 所以删除它。

结束
标签： robots.txt   小码农  

相关推荐

用于WordPress多站点安装的robots.txt存储在哪里？

谷歌网站管理员工具可以看到它，但我找不到它。你知道它是如何生成的，或者它的文件结构在哪里吗？我在我的根目录中看不到该文件。我的网站位于http://mikewills.me 还有机器人。txt文件URL为http://mikewills.me/robots.txt.最后，谷歌没有为我的网站编制索引，我正试图找出如何编辑机器人。txt，以便允许索引。我已经更改了隐私选项以允许索引，但这并没有更新机器人。txt。