当前位置：首页 > 数据库 > 正文

如何快速将CSV导入MySQL数据库？

admin
数据库
2025-06-12
2402

使用MySQL Workbench导入向导或LOAD DATA INFILE命令导入CSV，确保文件路径正确，数据列与表结构匹配，并注意字符编码（如UTF8）和字段分隔符设置，避免格式错误。

将CSV文件导入MySQL数据库的完整指南

为什么需要导入CSV到MySQL？

CSV（逗号分隔值）是通用数据交换格式，而MySQL是主流关系型数据库，数据迁移、报表分析或系统集成时，常需将CSV导入MySQL实现：

海量数据的高效存储与查询
复杂关系型数据管理
自动化数据处理流程
与其他系统数据整合

准备工作

开始前请确保：

环境配置
- 已安装MySQL服务器（社区版≥5.6）
- 拥有数据库操作权限的账户
- 终端或MySQL Workbench访问权限
CSV文件规范
- 文件扩展名为.csv
- 首行为列名（建议英文）
- 使用逗号分隔字段,文本字段用双引号包裹
- 日期格式统一（如YYYY-MM-DD）
- 无BOM头（可用记事本另存为UTF-8解决）

创建目标表

如何快速将CSV导入MySQL数据库？第1张

CREATE TABLE employees (
  id INT PRIMARY KEY AUTO_INCREMENT,
  name VARCHAR(50) NOT NULL,
  department VARCHAR(50),
  salary DECIMAL(10,2),
  hire_date DATE
);

4种导入方法详解

▶ 方法1：LOAD DATA INFILE（命令行高效导入）

适用场景：大数据量快速导入（百万级记录）

LOAD DATA LOCAL INFILE '/path/to/employees.csv'
INTO TABLE employees
FIELDS TERMINATED BY ',' 
ENCLOSED BY '"'
LINES TERMINATED BY 'n'
IGNORE 1 ROWS;  -- 跳过标题行

关键参数说明：

LOCAL：从客户端机器读取文件（无LOCAL则需服务器路径）
FIELDS TERMINATED BY：字段分隔符（如t处理TSV）
ENCLOSED BY：文本限定符
SET：强制转换数据类型（例：SET hire_date = STR_TO_DATE(@hire_date, '%d/%m/%Y')）

常见错误处理：

# 权限问题解决方案
mysql> SET GLOBAL local_infile=1;
$ mysql --local-infile=1 -u root -p

▶ 方法2：MySQL Workbench（图形化操作）

操作流程：

右键目标表 → “Table Data Import Wizard”
选择CSV文件 → 配置编码（推荐UTF-8）
映射列字段 → 调整数据类型
预览数据 → 点击”Apply”执行

优势：

自动检测分隔符
实时数据预览
无需记忆命令

▶ 方法3：Python脚本（灵活处理复杂数据）

import pandas as pd
import sqlalchemy
# 读取CSV并清洗数据
df = pd.read_csv('employees.csv', parse_dates=['hire_date'])
# 创建数据库连接
engine = sqlalchemy.create_engine('mysql+pymysql://user:password@localhost/db_name')
# 导入MySQL
df.to_sql('employees', engine, if_exists='append', index=False)

适用场景：

需数据预处理（如空值填充、格式转换）
定时自动化任务
非结构化数据清洗

▶ 方法4：phpMyAdmin导入

步骤：

选择数据库 → 点击”导入”选项卡
上传CSV文件
设置格式：
- Format: CSV
- 勾选”文件开头跳过行”
- 列分隔符：逗号
执行导入

高频问题解决方案

问题现象	原因分析	解决方案
ERROR 1290 (HY000)	secure_file_priv限制	`SHOW VARIABLES LIKE 'secure_file_priv';` 修改my.cnf
中文乱码	字符集不匹配	文件转UTF-8，连接添加`charset=utf8mb4`
日期导入失败	格式不一致	用`STR_TO_DATE()`函数转换
字段数量不匹配	CSV列数与表结构不一致	使用`FIELDS TERMINATED BY`明确分隔符
特殊字符报错	未转义引号	确保文本字段用双引号包裹

安全与性能优化建议

安全防护
- 禁用LOAD DATA LOCAL生产环境（防止反面文件读取）
- 用mysql_real_escape_string()处理手动导入数据
- 限制数据库账户权限（仅授予INSERT权限）

性能提升技巧

ALTER TABLE employees DISABLE KEYS;  -- 导入前禁用索引
LOAD DATA INFILE ...                 -- 执行导入
ALTER TABLE employees ENABLE KEYS;   -- 完成后重建索引

大文件分割为多个CSV分批导入
调整bulk_insert_buffer_size参数

方法对比与选择

方法	速度	上手难度	适合场景
LOAD DATA INFILE	服务器本地大数据导入
MySQL Workbench	初学者/小于500MB文件
Python脚本	需数据清洗/自动化任务
phpMyAdmin	<100MB文件/临时操作