将csv文件转换成Mysql中的数据（csv转成mysql）

将CSV文件转换成MySQL中的数据

在数据处理和分析领域中，CSV文件是一种很常见的数据格式。在实际应用中，我们经常需要将CSV文件中的数据导入到MySQL数据库中进行存储和处理。本文将介绍如何将CSV文件转换成MySQL中的数据，并提供相应的代码实现。

第一步：创建数据库表

我们需要在MySQL数据库中创建与CSV文件相对应的表结构。以一个包含姓名、年龄和性别字段的CSV文件为例，我们可以创建如下结构的表：

CREATE TABLE `user` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `name` varchar(50) NOT NULL,
  `age` int(11) NOT NULL,
  `gender` enum('male','female') NOT NULL,
  PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

在这个表中，id字段是自增长主键，name、age和gender分别表示用户的姓名、年龄和性别。其中，gender字段使用了枚举类型，只允许取值为male或female。

第二步：导入CSV文件

接下来，我们需要使用MySQL命令行或图形化工具，将CSV文件导入到MySQL数据库中的user表中。以下是使用MySQL命令行导入CSV文件的示例代码：

LOAD DATA INFILE '/path/to/user.csv'
INTO TABLE user
FIELDS TERMINATED BY ','
ENCLOSED BY '"'
LINES TERMINATED BY '\n'
IGNORE 1 ROWS
(name, age, gender);

其中，/path/to/user.csv是CSV文件的路径；用FIELDS TERMINATED BY ‘,’指定字段之间的分隔符为逗号，用ENCLOSED BY ‘”‘指定字段内容被双引号包含，用LINES TERMINATED BY ‘\n’指定行之间的分隔符为换行符；IGNORE 1 ROWS表示忽略CSV文件中的头部行；最后的(name, age, gender)指定了用户表中的字段顺序。

第三步：查询导入的数据

导入CSV文件后，我们可以使用如下SQL语句查询导入的数据：

SELECT * FROM user;

该语句将返回user表中所有的记录，包括姓名、年龄和性别等字段信息。

完整的示例代码如下：

“`python

import pymysql

import csv

# 连接MySQL数据库

conn = pymysql.connect(host=’localhost’, port=3306, user=’root’, password=’123456′, db=’testdb’)

# 获取游标对象

cursor = conn.cursor()

# 创建user表

cursor.execute(“CREATE TABLE `user` (`id` int(11) NOT NULL AUTO_INCREMENT, `name` varchar(50) NOT NULL, `age` int(11) NOT NULL, `gender` enum(‘male’,’female’) NOT NULL, PRIMARY KEY (`id`)) ENGINE=InnoDB DEFAULT CHARSET=utf8;”)

# 读取CSV文件

with open(‘/path/to/user.csv’) as f:

reader = csv.reader(f)

next(reader) # 跳过头部行

for row in reader:

# 插入数据到user表格中

cursor.execute(“INSERT INTO user (name, age, gender) VALUES (%s, %s, %s)”, row)

# 提交事务

conn.commit()

# 查询user表中的数据

cursor.execute(“SELECT * FROM user”)

result = cursor.fetchall()

print(result)

# 关闭游标和连接

cursor.close()

conn.close()

以上代码使用Python编写，首先连接MySQL数据库，然后创建user表格和读取CSV文件中的数据，最后将数据插入到user表格中。为了避免SQL注入等问题，我们将CSV文件中的数据使用参数化的方式插入到数据库中。我们查询user表格中的数据并打印出来，在关闭游标和连接之前，需要提交事务。

总结

以上就是将CSV文件转换成MySQL中的数据的方法和代码实现，这对于数据分析和处理等领域中的实际应用具有重要意义。需要注意的是，由于CSV文件格式比较容易出错，使用时需要严格按照指定格式进行导入操作，否则可能会导致数据无法插入或插入错误的问题。