Vas*_*yev 6 performance filesystems distributed-filesystems
我的项目使用了几台加工机和一台存储机。当前使用 MSSQL 文件表共享文件夹组织的存储。存储中的每个文件在数据库中都有一些元数据。
处理机器执行需要存储文件及其元数据的任务。完成任务后,处理机将结果数据放回存储中。从那里它被另一台处理机器取走,它也会生成一些文件并将其放回存储中。等等。
一切都很好,但是随着处理机器数量的增加,我发现自己遇到了存储机器硬盘驱动器性能的瓶颈。
所以我希望处理机器将文件放在分布式FS中。从存储机器上提升负载,他们可以从存储机器中获取数据,而不仅仅是存储机器。
你能推荐一个满足我需求的特定分布式 FS 吗?或者有另一种方法来解决这个问题,没有它?
FS 中一次的数据量就像几个 TB。(存储可以处理这个,但处理器不能)。数据一致性至关重要。读写策略是:一旦文件被写入 - 它的常量并且只能被删除,但不能被修改。
我当前的平台是 Windows,但我准备切换它,如果在另一个平台上有更方便的解决方案。
归档时间: |
|
查看次数: |
170 次 |
最近记录: |