批量导入大量数据到 mysql 最快的方法是使用 load data infile 语句,它直接从数据文件中加载数据,绕过 mysql 服务器的常规验证过程。load data infile 语句的语法如下:load data infile ”into table [fields terminated by ”][lines terminated by ‘
MySQL 批量导入数据
使用 LOAD DATA INFILE
LOAD DATA INFILE 语句是批量导入大量数据的最快方法之一。它读取一个文件并将数据直接加载到表中,绕过 MySQL 服务器的常规解析和验证过程。
语法:
LOAD DATA INFILE '<file_path>' INTO TABLE <table_name> [FIELDS TERMINATED BY '<terminator>'] [LINES TERMINATED BY '<terminator>'] [IGNORE <number> LINES]</number></terminator></terminator></table_name></file_path>
登录后复制
参数:
- :要加载的数据文件路径。
-
:要导入数据的目标表。
- :分隔字段和行的字符(默认为制表符和换行符)。
- :要跳过的行数(如果数据文件中有标题行)。
示例:
假设有一个名为 students 的表,有以下模式:
CREATE TABLE students ( id INT NOT NULL, name VARCHAR(255) NOT NULL, age INT NOT NULL );
登录后复制
并且有一个名为 students.csv 的数据文件,包含以下内容:
1,John,20 2,Mary,21 3,Bob,22
登录后复制
要将此数据批量导入到 students 表中,可以使用以下命令:
LOAD DATA INFILE 'students.csv' INTO TABLE students FIELDS TERMINATED BY ',' LINES TERMINATED BY 'n' IGNORE 1 LINES;
登录后复制
其他方法
除了 LOAD DATA INFILE,还有其他方法可以批量导入数据:
- 使用 INSERT 语句:对于较小的数据集,可以使用多个 INSERT 语句手动将数据插入表中。
- 使用 MySQL Workbench:MySQL Workbench 是一个图形化工具,允许用户通过拖放操作导入数据。
- 使用第三方工具:例如,Data Import/Export Tool 和 MySQL Connector/Python 等第三方工具可以简化批量数据导入过程。
优化导入性能
- 优化数据文件:使用合适的字段分隔符和行终止符,并确保数据文件格式正确。
- 使用索引:在目标表上创建索引可以加快数据插入速度。
- 使用批量插入:一次插入多行数据比逐行插入更快。
- 禁用外键检查:在导入数据时暂时禁用外键完整性检查,然后在导入完成后重新启用。
以上就是mysql怎么批量导入数据的详细内容,更多请关注叮当号网其它相关文章!
文章来自互联网,只做分享使用。发布者:pansz,转转请注明出处:https://www.dingdanghao.com/article/536665.html