Python线程使用pm2导致内存泄漏

Pro*_*bie 6 python multithreading memory-leaks node.js pm2

怎么了?

我做了一些测试,并意识到当使用 pm2 线程时,它会导致内存泄漏,它会堆叠线程而不是转储它们。我已经用 pm2 和普通终端进行了测试。使用线程时,我可以看到使用普通终端大约需要 60mb~ 的使用量。虽然使用 PM2 可以叠加超过 160MB~ 使用相同的确切代码。

我所做的是,当线程完成其任务时,应该用 return/或 sys.exit() 杀死它

我们如何重现这个问题?

这是我做过的一个例子,我不确定这是否可以复制它,但相同的代码应该给出两个不同的 RAM 使用量,即使它是完全相同的代码。

编辑:

在 Windows 上测试后。问题仍然存在。我可以看到 PM2 大约需要 11MB~,而终端/cmd 大约需要 4.5MB。

#!/usr/bin/python3
# -*- coding: utf-8 -*-

import random
import threading
import time


class Monitoring(object):

    def parseNew(self):

        ListsNumber = []

        while True:

            newtLists = random.sample(range(1, 1000), 999)

            for numbers in newtLists:
                if numbers not in ListsNumber:
                    ListsNumber.append(numbers)

                    threading.Thread(
                        target=self.threadingTest,
                        args=(numbers,)
                    ).start()
            else:
                print("sleeping")
                time.sleep(random.randint(2, 4))

    def threadingTest(self, numbers):
        print(numbers)
        return


if __name__ == '__main__':
    Monitoring().parseNew()
Run Code Online (Sandbox Code Playgroud)

配套资料

Python 3.8.2,Ubuntu 20.04.1 LTS

--- PM2 report ----------------------------------------------------------------
Date                 : Fri Sep 11 2020 15:45:24 GMT+0200 (Central European Summe                                                                                                                                                             r Time)
===============================================================================
--- Daemon -------------------------------------------------
pm2d version         : 4.4.0
node version         : 14.6.0
node path            : /usr/bin/pm2
argv                 : /usr/bin/node,/usr/lib/node_modules/pm2/lib/Daemon.js
argv0                : node
user                 : testing
uid                  : 1000
gid                  : 1000
uptime               : 50586min
===============================================================================
--- CLI ----------------------------------------------------
local pm2            : 4.4.0
node version         : 14.6.0
node path            : /usr/bin/pm2
argv                 : /usr/bin/node,/usr/bin/pm2,report
argv0                : node
user                 : testing
uid                  : 1000
gid                  : 1000
===============================================================================
--- System info --------------------------------------------
arch                 : x64
platform             : linux
type                 : Linux
cpus                 : Intel(R) Core(TM) i7-8700T CPU @ 2.40GHz
cpus nb              : 12
freemem              : 1734098944
totalmem             : 16617046016
home                 : /home/tester
===============================================================================
Run Code Online (Sandbox Code Playgroud)

另一个问题可能是我使用线程的方式,但我不这么认为,因为它使用 pm2 和 cmd 提供了两种不同的 RAM 使用情况