Goo*_*bot 9 html php robots.txt web
我想创建一个私人网址
http://domain.com/content.php?secret_token=XXXXX
然后,只有拥有确切URL(例如通过电子邮件收到)的访问者才能看到该页面.我们$_GET['secret_token']在显示内容之前检查.
我的问题是,如果任何机会搜索机器人找到URL,他们将只是索引它,URL将是公共的.有没有一种实用的方法来避免机器人访问和后续索引？
可能但不利的方法:
登录系统(例如通过php会话):但我不想提供用户登录.
受密码保护的文件夹:问题如上.
使用Robots.txt:许多搜索引擎机器人都不尊重它.
你所谈论的是通过默默无闻的安全.它永远不是一个好主意.如果你必须,我会提出这些想法: