小编pow*_*rox的帖子

任何人都可以描述以下声明吗？

template<> float func<float>(char *txt)
{
blah blah 
}

第二个<>是什么？

我需要从给定的根位置开始读取目录树中的每个文件.我想尽可能快地使用并行性来做到这一点.我有48个内核和1 TB内存,所以线程资源不是问题.我还需要记录每个被读取的文件.

我查看了使用joblib,但无法将joblib与os.walk结合使用.

我可以想到两种方式:

• 遍历树并将所有文件添加到队列或列表中,并使工作线程队列出队列文件 - 最佳负载平衡,可能由于初始步行和队列开销而导致更多时间
• 产生线程并静态地为每个线程分配树的部分 - 低负载平衡,没有初始步行,基于某种散列分配目录.

或者,还有更好的方法？

编辑存储的性能不是问题.假设有一个无限快速的存储,可以处理无限数量的并行读取

EDIT删除了多节点情况,以便将重点放在并行目录上

我可以用 python 或其他高级语言轻松地做到这一点。我感兴趣的是用 bash 来做这件事。

这是文件格式：

head-xyz
item1
item2
item3
head-abc
item8
item5
item6
item9

我想做的是打印以下输出：

head-xyz: 3
head-abc: 4

标头将具有类似于我上面给出的示例的特定模式。项目也有特定的模式，如上例所示。我只对每个标题下的项目数感兴趣。