我有 2 个网站。第一个是“test-www.xxxxxx.net”,另一个是“www.xxxxxx.net”。我想制作一个动态无索引元标记。Google 机器人可以为我的实时网站编制索引,但我不希望将其用于我的测试网站。通常我可以添加一个属性并使其在 _Layout.cshtml 中动态化,如下所示。
@if (!Helper.IsLiveSite())
{
<meta name="robots" content="noindex">
}
Run Code Online (Sandbox Code Playgroud)
有没有办法可以将其写入 robots.txt 文件?有些文章中写道“我强烈建议您尽可能使用Noindex。 ”
所以请帮忙!我怎样才能在robot.txt中做到这一点?我不知道下面的文件是否会产生错误。
User-agent: *
Disallow: /styles/
Sitemap: http://xxxxxx/sitemap/sitemap.xml
Noindex: test-www.xxxxxxx.net/*
Noindex: http://test-www.xxxxxxx.net/*
Noindex: https://test-www.xxxxxxx.net/*
Run Code Online (Sandbox Code Playgroud)
谢谢。