shi*_*ape 1 dns .htaccess redirect search-engine google-index
我在a.com上有一个网站(例如).我还有一些其他域名,我没有使用任何东西:b.com和c.com.他们目前转发到a.com.我注意到Google正在使用b.com/stuff和c.com/stuff从我的网站索引内容,而不仅仅是a.com/stuff.告诉Google只通过a.com索引内容的正确方法是什么,而不是b.com和c.com？
似乎通过htaccess进行301重定向是最佳解决方案,但我不知道该怎么做.只有一个htaccess文件(每个域都没有自己的htaccess文件).
b.com和c.com并不是a.com的别名,它们只是我为未来可能的项目保留的其他域名.
robots.txt是告诉蜘蛛抓取什么以及不抓取什么的方法.如果您将以下内容放在网站的根目录/robots.txt中:
User-agent: *
Disallow: /
表现良好的蜘蛛不会搜索您网站的任何部分.大多数大型网站都有robots.txt,就像Google一样
User-agent: *
Disallow: /search
Disallow: /groups
Disallow: /images
Disallow: /news
#and so on ...