Node-MySQL 上的连接过多

Question

Too many connections当 INSERT IGNORE INTO 循环中有很多项目时，我会收到错误消息。

function insertCases(cases) {
    for(var i in cases) {
        var thequery = 'INSERT IGNORE INTO `cases` SET keysused='+cases.keysused+' 
        pool.query(thequery, function(ee, rr) {
            if(ee) {
                logger.info(ee);
                throw ee;
            }
        });
    }
}

当现在有 100 多个案例时，INSERT IGNORE INTO 比我获得太多连接的次数要多 100 次。我不知道它到底崩溃了多少，但有 100 次它就可以工作了。

我读到的是，该查询运行查询并在完成后关闭连接，所以我读到，我不需要在之后关闭它。

如果我运行 100，等待很短的时间并再次运行 100，依此类推，则不会出现连接过多的错误。

只有当一次运行这么多时间时。

这是我的数据库设置

var db_config = {
    connectionLimit : 5000,
    host: 'localhost',
    user: 'userexample',
    password: '*******',
    database: 'example.com'
};

这就是 createPool 的功能。

function database_connection() {
pool = mysql.createPool(db_config);
pool.getConnection(function(err, connection) {
    if(err) {
        logger.error('[ERROR] Connecting to database "' + err.toString() + '"');
        setTimeout(function() { database_connection(); }, 2500);
    }
    else
    {
        pool.query('SET NAMES utf8');
        pool.query('SET CHARACTER SET utf8');
        logger.trace('[INFO] Connected to database and set utf8!');
    }
});

}

节点上的所有查询都简单地运行 pool.query

在database_connection()被称为对节点的开始

Answer 1

你已经设置connectionLimit为五千！这意味着 node-mysql 子系统将继续尝试通过添加新连接来处理多个查询请求，直到它有 5000 个。您的 MySQL 服务器的连接限制似乎是 100，因此当达到该限制时，您的 nodejs 应用程序就会崩溃。

放 connectionLimit: 10,

然后您将使用 10 个池连接，当它们都在使用时，您的pool.query调用将等到一个可用。

为什么不将限制设置为 100？两个原因：

1. 您想为其他客户端软件保留一些 MySQL 连接。
2. 如果您并行使用许多类似的查询（在您的情况下为 INSERT 查询）来锤击数据库，它将花时间避免争用。并行连接越少，每个查询将完成得更快。