Seo Robots.txt，加密字符？不允许：/azr94v2hh2lg/

有人知道这是什么吗？我在我的robots.txt中找到了这个。这是某种加密字符吗

Disallow: /azr94v2hh2lg/

这是某种加密字符吗

Disallow: /azr94v2hh2lg/

不支持，robots.txt不支持加密。显然，它的目的是成为一个不存在的URL，以抵消一些网络爬虫多年前可能出现的错误

我不知道这篇文章的原始来源是什么，完全有可能它不再在线，但这里有一个关于这个问题的来源，它反过来引用了另一个似乎不再有这个内容的网站

摘录自： 注意：这个“/azr94v2hh2lg/”告诉谷歌以及任何其他机器人类型的搜索引擎不要进入你的“/azr94v2hh2lg/”目录。当然，您的Web服务器上没有此目录。通过这样做，我们提供了一个真正的禁止指令，它将使搜索引擎满意，并且不会产生任何错误。您可以替换“/azr94v2hh2lg/”只要该目录没有也永远不会成为您网站的一部分，您希望使用任何其他目录名，它将具有相同的效果。”–www.scrubtheweb.com

假设某些爬虫程序在没有包含至少一个非空

Disallow

条目的

robots.txt

文件的情况下无法正确地爬网网站，而这一字符序列就是有人为了实现此目的而提出的伪随机字符串

至于这种说法的有效性，我无法置评。我发现当涉及到SEO建议时，有大量可疑的谣言和未经证实的声明

然而，如果这是真的，我非常怀疑这个问题是否仍然相关

这是某种加密字符吗

Disallow: /azr94v2hh2lg/

不支持，robots.txt不支持加密。显然，它的目的是成为一个不存在的URL，以抵消一些网络爬虫多年前可能出现的错误

我不知道这篇文章的原始来源是什么，完全有可能它不再在线，但这里有一个关于这个问题的来源，它反过来引用了另一个似乎不再有这个内容的网站

摘录自： 注意：这个“/azr94v2hh2lg/”告诉谷歌以及任何其他机器人类型的搜索引擎不要进入你的“/azr94v2hh2lg/”目录。当然，您的Web服务器上没有此目录。通过这样做，我们提供了一个真正的禁止指令，它将使搜索引擎满意，并且不会产生任何错误。您可以替换“/azr94v2hh2lg/”只要该目录没有也永远不会成为您网站的一部分，您希望使用任何其他目录名，它将具有相同的效果。”–www.scrubtheweb.com

假设某些爬虫程序在没有包含至少一个非空

Disallow

条目的

robots.txt

文件的情况下无法正确地爬网网站，而这一字符序列就是有人为了实现此目的而提出的伪随机字符串

至于这种说法的有效性，我无法置评。我发现当涉及到SEO建议时，有大量可疑的谣言和未经证实的声明

然而，如果这是真的，我非常怀疑这个问题是否仍然相关