有没有办法告诉机器人不要查看目录？

Question

我有一个充满图像的目录，我不想让机器人查看，有没有办法将此目录设为私有？

谢谢！

Answer 1

如何在搜索引擎优化 (SEO) 中使用 Robots.txt

为包含您不希望搜索引擎抓取的文件的任何文件夹输入“禁止：/文件夹名称” 。

或者，
为您不希望搜索引擎索引的任何页面或文件输入“ Disallow: /filename.filetype ” 。

请注意以下示例：

* Disallow: /private/
* Disallow: /private/image01.jpg