Robots.txt,禁止多语言网址

Osk*_*lin 5 asp.net-mvc seo robots.txt

我有一个公共页面,用户无法登录.所以我有一个网址,没有链接,你必须手动输入然后登录.

网址是多语言,所以它可以是"/ SV /帐户/登录"或"/ EN /帐户/登录"等等.我可以禁用此网址为所有语言编入索引吗?

aja*_*hiz 3

此网址可能对您有帮助http://www.robotstxt.org/robotstxt.html。在您的情况下,不会有通配符排除,您必须在 robots.txt 中添加所有特定于语言的登录网址

更新

您可以将Disallow: /folder/subfolder/或放入Disallow: /folder/robots.txt 文件中