这是一个关于企业存储成本的规范问题。
另请参阅以下问题：

• 向开发人员和其他用户解释存储问题的最佳方式是什么

关于一般问题，例如：

• 为什么我必须每月为每 GB 存储空间支付 50 美元？
• 我们的文件服务器总是空间不足，为什么我们的系统管理员不直接在其中添加一个额外的 1TB 驱动器？
• 为什么SAN设备这么贵？

此处的答案将尝试更好地了解企业级存储的工作原理以及影响价格的因素。如果您可以扩展问题或提供有关答案的见解，请发布。

序幕：

我是一个代码猴子，越来越多地为我的小公司承担系统管理员的职责。我的代码就是我们的产品，而且我们越来越多地提供与 SaaS 相同的应用程序。

大约 18 个月前，我将我们的服务器从一家以优质托管为中心的供应商转移到了 IV 级数据中心的准系统机架推进器。（字面意思是在街对面。）这个人自己做的事情更多——比如网络、存储和监控。

作为重大举措的一部分，为了取代我们从托管公司租用的直连存储，我构建了一个基于 SuperMicro 机箱、3ware RAID 卡、Ubuntu 10.04、两打 SATA 磁盘、DRBD 和 . 三篇博文详细记录了这一切：构建和测试新的 9TB SATA RAID10 NFSv4 NAS：第一部分、第二部分和第三部分。

我们还设置了一个 Cacit 监控系统。最近，我们添加了越来越多的数据点，例如 SMART 值。

我不能这样做这一切，而不真棒 挤入 在 ServerFault。这是一次有趣且有教育意义的经历。我的老板很高兴（我们节省了大量的美元），我们的客户很高兴（存储成本下降），我很高兴（有趣，有趣，有趣）。

直到昨天。

中断和恢复：

午饭后一段时间，我们开始从我们的应用程序（一个按需流媒体 CMS）收到性能缓慢的报告。大约在同一时间，我们的 Cacti 监控系统发送了大量电子邮件。一个更有说服力的警报是 iostat await 的图表。

性能变得如此下降以至于 Pingdom 开始发送“服务器关闭”通知。整体负载适中，没有流量高峰。

在登录应用服务器、NAS 的 NFS 客户端后，我确认几乎所有东西都在经历高度间歇性和超长的 IO 等待时间。一旦我跳到主要 NAS 节点本身，在尝试导航问题阵列的文件系统时，同样的延迟很明显。

是时候进行故障转移了，一切顺利。在 20 分钟内，一切都被确认备份并完美运行。

验尸：

在任何和所有系统故障后，我都会进行事后分析以确定故障原因。我做的第一件事是 ssh 回到盒子里并开始查看日志。它完全离线。是时候去数据中心旅行了。硬件复位，备份并运行。

在/var/syslog我发现这个可怕的条目：

Nov …

好吧，前几天我正在和一个人谈论服务器。每当我问他 SCSI 和 SATA 之间是否有任何显着差异以及他为什么总是使用 SCSI 时，我都感到有点震惊。（注意，我不确定他所说的 SCSI 是否指的是 SAS）

他告诉我 SCSI 总是更快，驱动器总是更可靠。我的意思是，这似乎是一个大胆的声明。

他告诉我一些关于 SCSI 总是比 SATA 快的事情，因为操作系统向 SCSI（控制器？）发送一个获取文件的请求，它将在 SCSI 控制器内部构建文件，而不是在整个磁盘上进行搜索。我不明白那是如何工作的，所以我认为它是 BS。

SAS 和 SATA 目前具有相同的数据速率速度。

他认为 SCSI 总是比 SATA 更​​快、更可靠的推理有什么真正的依据吗？

我们希望购买新的 3 TB 企业级驱动器，并且可以购买 SAS 或 SATA 型号。

AFAIK，SAS 通常提供比 SATA 更​​好的性能，但搜索基准我找到了文章Seagate Constellation.2 和 Constellation ES.2 Hard Drive Review。

总而言之，在大多数测试中，SATA 实际上比 SAS 快。但是通过评论阅读，似乎有一个称为“预扫描”的功能，这显然是导致性能低下的原因。

从性能的角度可以推荐什么，是SATA还是SAS？现实世界的表现是否可以接受？

我们系统的工作负载是繁重的多线程顺序写入和擦除，偶尔会有随机读取访问。

我买了一台二手 HP MDS 600 用作 ZFS 文件系统的 JBOD。

最初我只是假设它是一个非常“笨”的盒子，我可以使用像 16 端口 LSI 那样的 SAS 卡，以及大多数 SATA 驱动器，尤其是我想到的 3TB WD Caviar Reds。

有什么相反的经历吗？我有 25 天左右的时间来“归还”这件事。我愿意在真正的 HP SAS 卡上多花一点美元，但我绝对负担不起用价格过高的 HP '批准' 驱动器来存储这个东西。

更新：我计划使用 Dell PowerEdge 1950，它有两个空的 PCIe 8x 插槽。