为 Jupyter 笔记本设置最大内核数

Question

我和同事共用一台电脑。他们在那里运行并行计算，我需要运行 Jupyter。我可能只使用几个核心，而不是全部。

但是，每次我在 Jupyter 中运行使用 numpy 的单元时，它都会尝试使用尽可能多的内核。当同事的计算在运行时，Python 占用了一半的内核。

我尝试将 Jupyter 进程的 niceness 设置为 19，以便其 Python 子进程继承 niceness 值并且不尝试使用所有内核，但它不起作用。

有没有办法限制 Jupyter 及其 Python 子进程使用最大数量的内核？我希望这个限制有一个变量。

Answer 1

Jupyter/notebook 没有任何内置的资源管理器。主要是因为所有这些东西最终都在Jupyterhub中，它就像 Jupyter 架构之上的另一层，旨在使 Jupyter 能够与其他人在多种环境中良好地协作。 - 用户环境。这几乎就是你现在所处的位置。

Jupyterhub 确实提供了一种对其使用的核心数量设置硬性限制的方法。详细信息请参见此处。