mysql 倒入csv文件

基础概念

MySQL 是一个关系型数据库管理系统，广泛用于存储和管理数据。CSV（Comma-Separated Values）文件是一种简单的文本文件格式，用于存储表格数据，每行代表一条记录，每个字段由逗号分隔。

类型

MySQL 支持多种方式导入 CSV 文件，包括使用 LOAD DATA INFILE 语句和 mysqlimport 工具。

应用场景

数据迁移：将数据从一个系统迁移到另一个系统时，CSV 文件是一个常用的中间格式。
数据备份：定期将数据库中的数据导出为 CSV 文件，以便备份和恢复。
数据分析：将数据库中的数据导出为 CSV 文件，使用数据分析工具进行处理和分析。

导入 CSV 文件的方法

使用 `LOAD DATA INFILE` 语句

LOAD DATA INFILE 'path/to/your/file.csv'
INTO TABLE your_table_name
FIELDS TERMINATED BY ','
ENCLOSED BY '"'
LINES TERMINATED BY '\n'
IGNORE 1 ROWS;

path/to/your/file.csv：CSV 文件的路径。
your_table_name：目标表的名称。
FIELDS TERMINATED BY ','：字段由逗号分隔。
ENCLOSED BY '"'：字段值由双引号包围。
LINES TERMINATED BY '\n'：每行记录由换行符分隔。
IGNORE 1 ROWS：忽略 CSV 文件的第一行（通常是标题行）。

使用 `mysqlimport` 工具

mysqlimport --local --fields-terminated-by=',' --fields-enclosed-by='"' --lines-terminated-by='\n' --ignore-lines=1 -u your_username -p your_database_name path/to/your/file.csv

--local：指定 CSV 文件在本地。
--fields-terminated-by=','：字段由逗号分隔。
--fields-enclosed-by='"'：字段值由双引号包围。
--lines-terminated-by='\n'：每行记录由换行符分隔。
--ignore-lines=1：忽略 CSV 文件的第一行。
-u your_username：数据库用户名。
-p：提示输入密码。
your_database_name：数据库名称。
path/to/your/file.csv：CSV 文件的路径。

可能遇到的问题及解决方法

1. 权限问题

问题描述：导入 CSV 文件时提示权限不足。

解决方法：确保 MySQL 用户有足够的权限执行 LOAD DATA INFILE 或 mysqlimport 命令。可以通过以下命令授予权限：

GRANT FILE ON *.* TO 'your_username'@'localhost';

2. 文件路径问题

问题描述：无法找到 CSV 文件。

解决方法：确保文件路径正确，并且 MySQL 服务器能够访问该文件。如果文件在本地，可以使用 --local 选项。

3. 字段匹配问题

问题描述：导入的数据与表结构不匹配。

解决方法：确保 CSV 文件的字段顺序和类型与目标表的字段顺序和类型一致。可以使用 FIELDS TERMINATED BY 和 ENCLOSED BY 等选项进行调整。

4. 编码问题

问题描述：导入的数据出现乱码。

解决方法：确保 CSV 文件和 MySQL 数据库的编码一致。可以在 LOAD DATA INFILE 语句中指定字符集：

LOAD DATA INFILE 'path/to/your/file.csv'
INTO TABLE your_table_name
CHARACTER SET utf8mb4
FIELDS TERMINATED BY ','
ENCLOSED BY '"'
LINES TERMINATED BY '\n'
IGNORE 1 ROWS;