您当前的位置：首页 > TAG信息列表 > robots.txt
挂在我的服务器根文件夹上，robots.txt文件没有删除
我移除机器人。txt文件在我的服务器根目录下，但谷歌无法删除。Webmastertool创建robotx。txt文件如何删除或禁用。
NoFollow Entire Website
默认情况下，无论何时通过管理设置禁用索引[x]阻止搜索引擎为此网站编制索引它在标题中添加了一个元标记，如下所示：<meta name=\'robots\' content=\'noindex,follow\' /> 我该如何将其更改为nofollow 而不是follow? 我觉得这很奇怪，因为它支持“跟踪”，并且总体上需要它noindex,nofollow.我可以直接回音到wp_head 但这并不能解释wp登录之类的页面。
Trying to update robots.txt
我已经安装并激活了WP Robots txt插件。那我就去wp-admin/options-reading.php 我贴了一个新的机器人。txt内容并保存。但我在上看不到新内容mysite.com/robots.txt 有什么帮助吗？我也安装了SEO插件，这可能是相关的吗？
在WordPress的robots.txt文件中，用户代理和不允许是什么意思
用户代理和不允许的含义是什么robots.txt WordPress中的文件。我对此有点困惑。
“WP Robots Txt”插件的“隐私”菜单在哪里？
我希望能够更新机器人。我的WordPress站点的txt。从简短的研究来看，“WP Robots Txt”插件是最简单的。然而，教程如https://www.youtube.com/watch?v=JY9A5OqHTvw 假设我需要查看“设置”->“隐私”菜单，以便更新机器人的文本。txt。即使插件安装没有错误，此菜单也不存在。
不允许：robots.txt中的/wp-*？
我刚刚收到一封来自谷歌的电子邮件，告知它无法从我的网站访问某些javascript和css内容。我看过机器人。包含以下内容的txt文件：用户代理：*爬网延迟：5不允许：/feed/不允许：/trackback/不允许：/wp admin/不允许：/wp包括/不允许：/xmlrpc。phpDisallow: /wp-*看起来是Disallow: /wp-* 这造成了破坏。我只是依次禁用每个插件，看看是哪个插件（如果有的话）导致这一行出现在机器人中。txt文件，但是否有其他原因（例如核心WordPress功能
将robots.txt安装到WordPress网站管理员
我们的网站是http://syno-int.co.kr并使用wordpress。我试着安装机器人。txt到插件部分，但当我将zip文件放入其中时，它显示如下。无法创建目录wp content/uploads/2018/07。其父目录是否可由服务器写入？我该怎么办？请让我知道。非常感谢。
如何删除不断覆盖我的根robots.txt的WordPress虚拟robots.txt？
这就是问题所在。我正在尝试删除虚拟机器人。wordpress站点中的txt文件。我意识到这是在我使用该站点之前使用插件（xml sitemap插件）生成的。以下是我所做的。我制造了一个新的机器人。txt文件，已上载并确保它位于根目录下。不幸的是，它没有显示出来，就好像虚拟机器人正在覆盖实际的根机器人。txt。我甚至不能用速度工具来分析网站。非常感谢您的帮助，谢谢！*请注意，我与此相关的插件是ArneBrachold的Yoast SEO插件和Google站点地图生成器。
不允许具有robots.txt的作者
我想disallow the authors （例如，指帖子）在文件robots中。txt。事实上，我注意到，对于我的一些网站，谷歌为文章的作者编制了索引，我不想这样做。有人认为这可能吗？（我尝试了一些类似“不允许”：/author/ 但我不确定它是否有效……）提前感谢您，ArbreMojo。
如何查看某个页面的代码？
谷歌正在索引我一年前使用过的页面，现在它们是404。我想给它们添加一个noindex标记，但不知道如何打开所需页面的代码，以便放入标记。此外，我应该对这些404页做些什么，这样我就有了更好的seo吗？
robots.txt Not Updating
今天我收到了一封来自网站管理员工具的电子邮件，声明“Googlebot无法访问CSS和JS文件”。所以我开始更新我的机器人。txt文件位于我的服务器的根目录中。原始内容：User-agent: * Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /wp-content/plugins/ Disallow: /wp-content/themes/ #<--CAUSE OF THE PROBLEM &#
No exposure on search engines
我有一个博客，但它没有显示在任何搜索引擎上。为什么我的wordpress博客看不见，但我总是在发布。
Robots.txt not updating
当我尝试用谷歌搜索我的网址时，后续内容将作为元描述出现“由于此网站的robots.txt–了解更多信息，因此此结果的描述不可用。”这个website我试着编辑机器人。txt（下载了WP Robot插件），虽然我已将其更改为User-agent: * Disallow: /wp-admin/ Disallow: /wp-includes/ Therobots.txt 仍显示为User-agent: * Disallow: / 我有Yoast SEO、WP Robo
隐藏伪页不被显示的正确方式？
我们开发的网站主页有四部分内容：父页面和另外三个“页面”的文本，我们使用PHP将这些文本引入父页面。如果你喜欢，可以叫他们Foo，Bar1，Bar2，Bar3。也许这是或不是解决复杂页面问题的正确方法，但它对我们和客户都有效，他现在已经习惯了。小问题是，这些伪迷你页面Bar1、Bar2和Bar3由谷歌编制索引，可以作为自己的页面使用。这样做看起来并不可怕，但我们希望尽可能避免。我想我可以通过以下方式解决此问题：1） 通过我们的SEO插件在htaccess或htaccess中将mysite/bar1重定向到
Google网站管理员工具错误“URL已被robots.txt阻止。”
我有一个WordPress网站，我把它提交给了谷歌站长，在提交了网站地图后，它给了我一个错误“URL blocked by robots.txt”。请帮忙，我该怎么办？
Google Say在我的网站上被robots.txt屏蔽，但没有robots.txt
一切都在标题中。我没有机器人。txt在我的网站上。我已在全局设置中启用搜索引擎索引。但是，由于不存在机器人，谷歌无法抓取我的网站。txt。您是否已经遇到过这样的问题？
将WordPress的robot.txt和sitemap.xml安装在其自己的目录中的位置
我的网站是在wordpress安装在它自己的子目录中的地方设置的，但内容就像是在域根目录中一样（此wordpress codex page 详细说明配置）Wordpress Url：https://www.example.com/wordpress网站Url：https://www.example.com 因此，在这种情况下，URL被重新写入，不包括/wordpress 在url中，它为来自的页面提供服务（尽管图像url包括：https://www.example.com/wordpress/wp-co
如何不索引，关注特定类别的WordPress？
谷歌似乎忽视了我的机器人。txt（尽管有效）我如何不使用索引，遵循没有插件的特定类别？
为什么谷歌图像搜索仍然显示我的图像？
我有一些图像文件的问题，我想阻止谷歌图像搜索。我正在使用Yoast SEO插件，它允许我直接编辑机器人。txt文件。一些在网站上有肖像图像的人要求不要出现在图像搜索中，因此我们添加了如下条目：User-Agent: Googlebot-Image Disallow: /wp-content/uploads/2019/03/domain.eu-adam.png Disallow: /wp-content/uploads/2020/02/domain.eu-team-eve.jpg
如何防止Google索引/wp-content/目录？
我收到谷歌的一个错误，说我的网站上有移动可用性错误。“the”；第“”页；他们指的是www.example.com/wp-content/plugins/ag-admin.我不是在寻求那个插件的帮助，而是想弄明白如何让谷歌根本不索引那个目录。正在我的机器人中消除这种干扰。txt足够了，或者我应该这样做吗？