小编Mar*_*k D的帖子

MySQL 导入 CSV 文件真的很慢

我正在尝试将 CSV 文件导入表中,但速度非常慢。我有大约 1000 个文件,每个文件大小为 40 MB。每当我尝试导入它时,我都可以看到例如 MySQL 工作台它以每秒大约 30 - 60 行的速度插入。处理我的所有文件需要很长时间。我怎样才能加快速度?我已经将 mysql.cnf 文件修改为以下配置,不幸的是它没有加快速度:

/etc/mysql/conf.d/mysql.cnf

[mysqld]
innodb_buffer_pool_size=12G
innodb_io_capacity = 2000
innodb_read_io_threads = 48
innodb_thread_concurrency = 0
innodb_write_io_threads = 48
innodb_buffer_pool_size=12G
innodb_log_file_size = 512M
max_connections = 1000
max_allowed_packet = 128M
#key_buffer = 1000M
bulk_insert_buffer_size = 1024M
innodb_doublewrite = 0
innodb_flush_log_at_trx_commit = 2
key_buffer_size = 4000M
Run Code Online (Sandbox Code Playgroud)

它确实说根据 PHPMyAdmin 在 InnoDB 中配置了 12G,所以我可以安全地确认配置至少有效。

万一需要的规格:

OS: Ubuntu 18.04
CPU: 6 cores, 12 threads @ 4.5 GHz
RAM: 32 GB DDR4 @ 3.2 GHz …
Run Code Online (Sandbox Code Playgroud)

mysql phpmyadmin mysql-workbench csv 18.04

3
推荐指数
1
解决办法
2793
查看次数

标签 统计

18.04 ×1

csv ×1

mysql ×1

mysql-workbench ×1

phpmyadmin ×1