神秘的 mariadb 10.4.1 ram 使用情况

Question

我已经从 mariadb 10.1.36 升级到 10.4.8，我可以看到新版本上的内存使用量神秘增加。我还编辑了 innodb_buffer_pool_size ant 似乎设置为 15M 或 4G 没有效果，ram 只是慢慢增加。过了一会儿，它吃掉了整个 ram，oom 杀手杀死了 mariadb，这正在重复。

我的服务器有 8GB RAM，并且每天增加 60-150MB。这并不可怕，但我有大约 150 个数据库服务器，所以这是一个大问题。

我可以通过重新启动 mariadb 并重新启动来临时解决问题。

有关数据库服务器的信息： 数据库：200+ 表：28200（每个数据库 141） 平均活动连接：100-200 存储数据大小：100-350GB

中央处理器：4 内存：8GB

这是我的配置：

server-id=101
datadir=/opt/mysql/
socket=/var/lib/mysql/mysql.sock
tmpdir=/tmp/
gtid-ignore-duplicates=True
log_bin=mysql-bin
expire_logs_days=4
wait_timeout=360
thread_cache_size=16
sql_mode="ALLOW_INVALID_DATES"
long_query_time=0.8
slow_query_log=1
slow_query_log_file=/opt/log/slow.log
log_output=TABLE
userstat = 1
user=mysql
symbolic-links=0
binlog_format=STATEMENT
default_storage_engine=InnoDB
slave_skip_errors=1062,1396,1690innodb_autoinc_lock_mode=2
innodb_buffer_pool_size=4G
innodb_buffer_pool_instances=5
innodb_log_file_size=1G
innodb_log_buffer_size=196M
innodb_flush_log_at_trx_commit=1
innodb_thread_concurrency=24
innodb_file_per_table
innodb_write_io_threads=24
innodb_read_io_threads=24
innodb_adaptive_flushing=1
innodb_purge_threads=5
innodb_adaptive_hash_index=64
innodb_flush_neighbors=0
innodb_flush_method=O_DIRECT
innodb_io_capacity=10000
innodb_io_capacity_max=16000
innodb_lru_scan_depth=1024
innodb_sort_buffer_size=32M
innodb_ft_cache_size=70M
innodb_ft_total_cache_size=1G
innodb_lock_wait_timeout=300
slave_parallel_threads=5
slave_parallel_mode=optimistic
slave_parallel_max_queued=10000000
log_slave_updates=on
performance_schema=on
skip-name-resolve
max_allowed_packet = 512M
query_cache_type=0
query_cache_size = 0
query_cache_limit = 1M
query_cache_min_res_unit=1K
max_connections = 1500
table_open_cache=64K
innodb_open_files=64K
table_definition_cache=64K
open_files_limit=1020000
collation-server = utf8_general_ci
character-set-server = utf8
log-error=/opt/log/error.log
log-error=/opt/log/error.log
pid-file=/var/run/mysqld/mysqld.pid
malloc-lib=/usr/lib64/libjemalloc.so.1

Answer 1

我解决了！问题是内存分配库。

如果执行以下 SQL 查询：

显示类似“version_malloc_library”的变量；

您必须获取“jemalloc”库的值。如果你只得到“系统”，你可能会遇到问题。

要更改它，您需要编辑此目录中的任何 .conf 文件：

/etc/systemd/system/mariadb.service.d/

在那里，添加这一行：

环境=“LD_PRELOAD=/usr/lib/x86_64-linux-gnu/libjemalloc.so.1”

（该库文件可能在其他文件夹中）

然后你必须重新启动mysqld

服务 mysqld 停止 && systemctl 守护进程重新加载 && 服务 mysqld 启动