SAN 性能缓慢

Question

我有一个装有 12 x 300gb DP SAS 驱动器的 iSCSI HP P2000。这连接到 2 个运行 XenServer 的 64GB RAM 的 DL385 服务器。SAN 网络通过 2 个千兆交换机进行多路径传输（从 P2000 到每个交换机的 4 条铜缆链路，然后每个 XenServer 都有一个到每个交换机的铜缆链路）

最近，我重新评估了我的安装时决定，以创建 2 个虚拟磁盘：RAID-5 和 RAID-10。我认为 RAID-5 毫无意义并销毁了它，然后使用这些磁盘将 RAID-10 扩展为一个大阵列，带有 2 个热备用磁盘。

自从那件事完成后（就在一周前），磁盘性能一直非常糟糕；在top两个 XenServer 主机上查看显示约 15% 的 I/O 等待。VM 内的 hdparm 显示了1.12MB/s从 SAN 读取的内容。

还有另外 2 台 Win2008R2 机器也连接到 SAN。我之前的性能测试表明它们也存在显着差异，因此我认为这不是 XenServer 主机上的问题。

• 以前 8k 随机读取~24.75MB/s，现在1.67MB/s
• 以前的 64k 随机读取~170MB/s，现在3.61MB/s

RAID 扩展已完成，SMU 中一切正常。XenServer 非常“空”（其中一个有 7 个 VM，另一个有 4 个 VM），但它是一个生产环境。

Answer 1

经过更多调查，事实证明问题是有人（咳嗽）根据互联网文章的建议在 SAN 交换机上启用了流量控制，该文章讨论了相同的硬件并明确鼓励使用流量控制。

禁用流量控制后，Load Average 和 I/O Wait 立即减少，24 小时后，一旦完成一些困难的维护任务，它就完全恢复正常（0.0%wa 和 Load Average < 0.10）。