对于面向公众的网站,我是否绝对需要robots.txt文件?

Sam*_*ham 0 search-engine

我正在审查我的几个网站,以确保我的SEO基础被覆盖.相关网站上没有私人网页,我们希望将所有网页编入索引.无论如何,包括robots.txt文件,即使不需要,也会让我的网站看起来更有信誉,对Google来说更重要吗?

Red*_*ves 9

我只想包括一个空白的,因为没有它你的服务器仍在向请求者吐出404消息.这可能比空白的robots.txt文件更大.