相关疑难解决方法(0)

设置dask worker数量的最佳实践

在集群上设置worker时,我对dask和dask.distributed中使用的不同术语感到有些困惑.

我遇到的术语是:线程,进程,处理器,节点,工作者,调度程序.

我的问题是如何设置每个的数量,以及其中任何一个之间是否存在严格或建议的关系.例如:

  • 每个节点1个工作器,n个进程用于节点上的n个核心
  • 线程和进程是同一个概念?在dask-mpi中,我必须设置nthreads,但它们在客户端中显示为进程

还有其他建议吗?

dask dask-distributed

14
推荐指数
1
解决办法
1279
查看次数

标签 统计

dask ×1

dask-distributed ×1