导入csv文件到数据库
csv:逗号分隔值(Comma-Separated Values,CSV,有时也称为字符分隔值,因为分隔字符也可以不是逗号),其文件以纯文本形式存储表格数据(数字和文本)。纯文本意味着该文件是一个字符序列,不含必须像二进制数字那样被解读的数据。CSV文件由任意数目的记录组成,记录间以某种换行符分隔;每条记录由字段组成,字段间的分隔符是其它字符或字符串,最常见的是逗号或制表符。通常,所有记录都有完全相同的字段序列。
这是使用记事本打开大一个csv文件:

另外,csv也可以像excel那样作为一个表格的形式打开:

当然,首要先要一个前提,你要添加到数据库的数据,必须和数据库中标的字段互相对应:

注意:这里我故意将表格中某些字段没有输入数据,尤其是表格的第五行,主键没有,所以,这个是不能插入到数据中的,我们将在后台进行判断。
下面开始代码:(数据库连接部分省略)
public static void main(String[] args) throws IOException {
// 获取要录入的文件
BufferedReader br = new BufferedReader(new FileReader(new File("C:/Users/Nemo/Desktop/testCSV.csv")));
// 读取直到最后一行
String line = "";
boolean isFirstRow = true; // 判断是不是表头
int collumNum = 0;
while ((line = br.readLine()) != null) {
if (isFirstRow) { // 如果是表头,根据表头判断这个表一共有几个字段,并跳过表头的插入
isFirstRow = false;
collumNum = line.split(",").length;
continue;
}
String[] fields = new String[collumNum];
fields = line.split(",");
if (fields.length == 7) { // 判断最后一个字段有没有内容
User user = new User(); // 封装要添加到数据库的对象
if (fields[0] == null || fields[0].equals("")) {
System.out.println("**************此行没有主键,跳过**************");
continue;
} else
user.setId(Integer.parseInt(fields[0]));
if (fields[1] == null || fields[1].equals(""))
user.setName(null);
else
user.setName(fields[1]);
if (fields[2] == null || fields[2].equals(""))
user.setPassword(null);
else
user.setPassword(fields[2]);
if (fields[3] == null || fields[3].equals(""))
user.setNickName(null);
else
user.setNickName(fields[3]);
if (fields[4] == null || fields[4].equals(""))
;
else
user.setAge(Integer.parseInt(fields[4]));
if (fields[5] == null || fields[5].equals(""))
user.setGender(null);
else
user.setGender(fields[5]);
if (fields[6] == null || fields[6].equals(""))
user.setAddress(null);
else
user.setAddress(fields[6]);
addToDb(user); // 添加到数据库
} else { // 最后一个字段没有输入内容
User user = new User(); // 封装要添加到数据库的对象
if (fields[0] == null || fields[0].equals("")) {
System.out.println("**************此行没有主键,跳过**************");
continue;
} else
user.setId(Integer.parseInt(fields[0]));
if (fields[1] == null || fields[1].equals(""))
user.setName(null);
else
user.setName(fields[1]);
if (fields[2] == null || fields[2].equals(""))
user.setPassword(null);
else
user.setPassword(fields[2]);
if (fields[3] == null || fields[3].equals(""))
user.setNickName(null);
else
user.setNickName(fields[3]);
if (fields[4] == null || fields[4].equals(""))
;
else
user.setAge(Integer.parseInt(fields[4]));
if (fields[5] == null || fields[5].equals(""))
user.setGender(null);
else
user.setGender(fields[5]);
addToDb(user); // 添加到数据库
}
}
br.close();
System.out.println("**************录入完毕**************");
}
/**
* 向数据库中添加记录
*
* @param user
*/
private static void addToDb(User user) {
// 判断数据库当中是否存在该条记录
if (isRepeat(user))
return;
Connection conn = null;
PreparedStatement pstmt = null;
try {
conn = DbUtil.getConnection();
String sql = "insert into t_user(dbid, name, pwd, nickName, age, gender, addres) values(?, ?, ?, ?, ?, ?, ?)";
pstmt = conn.prepareStatement(sql);
pstmt.setInt(1, user.getId());
pstmt.setString(2, user.getName());
pstmt.setString(3, user.getPassword());
pstmt.setString(4, user.getNickName());
pstmt.setInt(5, user.getAge());
pstmt.setString(6, user.getGender());
pstmt.setString(7, user.getAddress());
pstmt.execute();
} catch (Exception e) {
e.printStackTrace();
}
}
/**
* 判断数据库中是否有该条记录
*
* @param user
* @return
*/
private static boolean isRepeat(User user) {
ResultSet rs = null;
Connection conn = null;
PreparedStatement pstmt = null;
try {
conn = DbUtil.getConnection();
String sql = "select * from t_user";
pstmt = conn.prepareStatement(sql);
rs = pstmt.executeQuery();
while (rs.next())
if (rs.getString("dbid").equals(user.getId()))
return true;
} catch (Exception e) {
e.printStackTrace();
}
return false;
}
导入csv文件到数据库的更多相关文章
- Oracle数据库导入csv文件(sqlldr命令行)
1.说明 Oracle数据库导入csv文件, 当csv文件较小时, 可以使用数据库管理工具, 比如DBevaer导入到数据库, 当csv文件很大时, 可以使用Oracle提供的sqlldr命令行工具, ...
- 将文件夹下的所有csv文件存入数据库
# 股票的多因子分层回测代码实现 import os import pymysql # import datetime, time # from config import * database_ta ...
- ACCESS导入CSV文件出现乱码解决办法
在ACCESS或Excel中导入CSV文件时常常出现乱码,这是因为简体中文版的windows操作系统及其应用软件默认都是ANSI/GBK编码,而导入的文件使用的编码与操作系统默认的编码不相符.出现这种 ...
- C# 将List中的数据导入csv文件中
//http://www.cnblogs.com/mingmingruyuedlut/archive/2013/01/20/2849906.html C# 将List中的数据导入csv文件中 将数 ...
- 利用kettle组件导入excel文件到数据库
利用kettle组件导入excel文件到数据库 1. 实现目标 把excel文件内容导入到目标表中:然后用java调用kettle的转换.excel文件的内容仅仅有两列,示比例如以下: wat ...
- oracle导入csv文件
oracle导入csv文件: 1.建好对应的表和字段: 2.新建test.ctl文件,用记事本编辑写入: load data infile 'e:\TB_KC_SERV.csv' --修改对应的文件路 ...
- python导入csv文件时,出现SyntaxError
背景 np.loadtxt()用于从文本加载数据. 文本文件中的每一行必须含有相同的数据. *** loadtxt(fname, dtype=<class 'float'>, commen ...
- R: 导入 csv 文件,导出到csv文件,;绘图后导出为图片、pdf等
################################################### 问题:导入 csv 文件 如何从csv文件中导入数据,?参数怎么设置?常用参数模板是啥? 解决方 ...
- python导入csv文件出现SyntaxError问题分析
python导入csv文件出现SyntaxError问题分析 先简单描述下碰到的题目,要求是写出2个print的结果 可以看到,a指向了一个列表list对象,在Python中,这样的赋值语句,其实内部 ...
随机推荐
- Apache Mina入门实例
一.mina是啥 ApacheMINA是一个网络应用程序框架,用来帮助用户简单地开发高性能和高可扩展性的网络应用程序.它提供了一个通过Java NIO在不同的传输例如TCP/IP和UDP/IP上抽象的 ...
- 【Electron】Electron开发入门
Electron简介: Electron提供了丰富的本地(操作系统)的API,使你能够使用纯JavaScript来创建桌面应用程序,并且跨平台(win,mac,linux等各种PC端平台).与其它各种 ...
- Python之路-字符编码&数据类型补充
作业 三级菜单程序 menu = { '北京':{ '海淀':{ '五道口':{ 'soho':{ }, '网易':{ }, 'google':{ } }, '中关村':{ '爱奇艺':{}, '汽车 ...
- ABP框架实战 1.基础信息维护
在之前的一个开发项目中,因为公司战略发展,引用了这个ABP开源框架作为新项目的基础版本,由于客户的要求需要迁移旧系统数据,以及其他的一些原因,数据库采用了Oracle数据库管理.所以引用了Dapper ...
- Android开发艺术1之Activity的生命周期
作为<Android开发艺术探索>这本书的第一篇博客,我就多说几句.本系列博客旨在对书中相关内容进行解读,简化,提供一个入门到提高的流程.不敢说书评,也不能说教程,只希望对有些人有帮助就好 ...
- Android中的socket本地通讯框架
一.先分析Native层: 1.C++基类SocketListener: class SocketListener { int mSock; const char *mSocketNa ...
- HTML基础学习(二)—CSS
一.CSS概述 CSS(Cascading Stytle Sheets)层叠样式表,用来定义网页的显示效果.可以解决HTNL代码对样式定义的重复,提高了后期样式代码的可维护性,并增强了网页的显 ...
- java 基础知识六 字符串1
java 基础知识六 字符串1 String 不是java的基本数据类型 String 不是java的基本数据类型 String 不是java的基本数据类型 字符串是是一个字符序列 1.创建 创建 ...
- Memetic Algorithm(文化基因算法)
1. 文化进化理论 威尔逊认为,从性质上来讲,文化进化总是以拉马克主义为特征的,即文化进化依赖于获得性状的传递,相对来说速度比较快:而基因进化是达尔文主义式的,依赖于经过几个世代的基因频率的改变,因而 ...
- 找到一个新的超好用的U盘启动制作工具了
有同事叫帮装电脑,弄个U盘说制作一个启动盘,结果一搜,出了“雨林木风”的主页. 太好用了,高手的产物,比以前找的方便一百倍.又简单,又实用,同步又下载好GHO文件.唯一 的问题是XP中用的GHO,好多 ...