Tim*_*ott 8 robots.txt googlebot robot
我在根目录中有以下robots.txt的网站:
User-agent: * Disabled: / User-agent: Googlebot Disabled: / User-agent: Googlebot-Image Disallow: /
Googlebots会整天扫描此网站中的网页.我的文件或Google有问题吗？
Sea*_*ter 23
它应该是Disallow:,而不是Disabled:.
Disallow:
Disabled:
Mar*_*ski 9
也许试试Google robots.txt检查器
归档时间：
17 年，6 月 前
查看次数：
997 次
最近记录：
17 年，4 月 前