标签: parallel-computing

要在我们的 IBM GPFS 集群中递归删除文件，我们使用简单的 unix 命令，如：

rm /my/directories -fr

然而，删除工作需要很长时间。

问题是我们的分布式应用程序（基于 Spark）one hour需要完成。但是，它也会took about an other hour删除由 Spark 等分布式应用程序生成的临时文件。

因此，全局工作负载非常低效。可能是因为该rm命令必须列出每个子目录..

无论如何，您知道使用 GPFS 有效删除整个目录（和子目录）的方法吗？

可能是 IBM 给出了一个特殊的命令来做到这一点？

这是机器规格：

CPU(s):                20
Thread(s) per core:    1
Core(s) per socket:    10
Socket(s):             2

根据我到目前为止所读到的内容，这些数字意味着我可以运行 20 个并行作业，因为我有 20 个 CPU。

但是，每个 CPU 中可以运行多少个线程？