在项目中我们偶尔可能会遇到批量向数据库中导入数据,如果批处理的情况较多的情况下可以使用spring batch,如果只是一个导入功能的话可以考虑使用jdbc的preparedStatement处理。

1.使用逻辑,首先根据导入的文件,将数据转换成我们的对象放进list集合中。

2.创建preparedStatement对象,处理数据。

下面是具体的示例:

1.创建表:

CREATE TABLE TEST
(
ID VARCHAR2(50) NOT NULL,
NAME VARCHAR2(50) NOT NULL,
HOME VARCHAR2(50) NOT NULL,
TEL VARCHAR2(50) NOT NULL,
PATH VARCHAR2(50)
)

2.实体类:

@Getter
@Setter
@ToString
public class TestModel { private String id;
private String name;
private String home;
private String tel;
private String path; }

3.Dao层:

@Mapper
public interface TestDao { public List<TestModel> selectList(); public void addData(List<TestModel> list);
}

4.mapper.xml:

<mapper namespace="com.jason.springboot.demo.web.dao.TestDao">

    <select id="selectList" resultType="com.jason.springboot.demo.web.pojo.TestModel">
select
id id,
name name,
home home,
tel tel,
path path
from
test
</select> <insert id="addData" parameterType="com.jason.springboot.demo.web.pojo.TestModel">
INSERT INTO
TEST
VALUES(#{id},#{name},#{home},#{tel},#{path})
</insert> </mapper>

5.批处理类:

/**
* 使用JDBC preparedStatement批处理数据
*
*/
@Service
public class SqlBatch {
@Autowired
private SqlSessionFactory sqlSessionFactory; public static final String MAPPER_01 = "com.jason.springboot.demo.web.dao.TestDao.addData";
  public static final String SQL_ADD = "INSERT INTO TEST VALUES(?,?,?,?,?)"; public void batchSelect(List<TestModel> list) {
String sql = "";
SqlSession session = null;
PreparedStatement prepareStatement = null;
try {
if (list == null || list.isEmpty()) {
return;
}
Map<String, Object> map = new HashMap<String, Object>();
map.put("id", list.get(0).getId());
map.put("name", list.get(0).getName());
map.put("home", list.get(0).getHome());
map.put("tel", list.get(0).getTel());
map.put("path", list.get(0).getPath()); sql = getSql(MAPPER_01, map);
// 或者
// sql=SQL_ADD ;
session = sqlSessionFactory.openSession(ExecutorType.BATCH, true);
prepareStatement = session.getConnection().prepareStatement(sql); for (TestModel model : list) {
prepareStatement.setString(1, model.getId());
prepareStatement.setString(2, model.getName());
prepareStatement.setString(3, model.getHome());
prepareStatement.setString(4, model.getTel());
prepareStatement.setString(5, model.getPath()); prepareStatement.addBatch();
} int[] executeBatch = prepareStatement.executeBatch();
System.out.println(executeBatch); } catch (SQLException e) {
System.out.println("批量处理SQL异常:" + e);
} catch (Exception e) {
System.out.println("批处理添加数据异常:" + e);
} finally {
try {
prepareStatement.close();
} catch (SQLException e) {
System.out.println("关闭批处理异常:" + e);
}
} } // 根据参数从MyBatis中获取对应的sql
private String getSql(String mapper, Map<String, Object> param) {
return sqlSessionFactory.getConfiguration().getMappedStatement(mapper).getBoundSql(param).getSql();
} }

6.Controller类,测试添加数据:

@RestController
public class DemoController {
@Autowired
private TestService testService;
@Autowired
private SqlBatch sqlBatch;
private static final Logger LOGGER = LoggerFactory.getLogger(DemoController.class); @RequestMapping("/test")
public String test1() {
addData();
List<TestModel> selectList = testService.selectList();
    
List<TestModel> newList = new ArrayList<>();
newList.addAll(selectList.subList(0, 20));
  for (TestModel testModel : newList) {
LOGGER.info("数据:{}", testModel.toString());
}
newList.clear();return " spring boot is starting ....";
} private void addData() {
long start = System.currentTimeMillis();
    // 造数据
List<TestModel> list = new ArrayList<TestModel>();
for (int i = 0; i < 50000; i++) {
TestModel model = new TestModel();
model.setId(UUID.randomUUID().toString().replace("-", ""));
model.setName("姓名" + i);
model.setHome("家庭地址" + i);
model.setTel("联系电话" + i);
model.setPath("URL:" + i);
list.add(model);
}
    // 批量添加
sqlBatch.batchSelect(list); long end = System.currentTimeMillis(); LOGGER.info("总共耗时:[{}]", (end - start));
}
}

java中使用JDBC的preparedStatement批处理数据的添加的更多相关文章

  1. java中,字符串类型的时间数据怎样转换成date类型。

    将字符串类型的时间转换成date类型可以使用SimpleDateFormat来转换,具体方法如下:1.定义一个字符串类型的时间:2.创建一个SimpleDateFormat对象并设置格式:3.最后使用 ...

  2. 第67节:Java中的JDBC运用

    第67节:Java中的JDBC运用 https://www.jianshu.com/p/628a9ba1b205

  3. java中使用poi导出excel表格数据并且可以手动修改导出路径

    在我们开发项目中,很多时候会提出这样的需求:将前端的某某数据以excel表格导出,今天就给大家写一个简单的模板. 这里我们选择使用poi导出excel: 第一步:导入需要的jar包到 lib 文件夹下

  4. java中使用jdbc配置连接串时mysql 5.6与5.7版本“编码”参数有区别!

    在mysql5.6中 java程序使用jdbc时链接字符串应该使用?characterEncoding=utf-8,而5.7版本可以省略,否则可能会有相关的语句执行结果出错! String drive ...

  5. Java中的JDBC是什么?

    JDBC(Java Data Base Connectivity, Java数据库连接)是一种用于执行SQL语句的Java API,可以为多种关系数据库提供统一访问,它有一组用Java语言编写的类和接 ...

  6. java中的JDBC

    Java 是通过 JDBC 技术实现对各种数据库访问的,换句话说,JDBC 充当了 Java 应用程 序与各种不同数据库之间进行对话的媒介. JDBC 是 Java 数据库连接(Java DataBa ...

  7. Java中float、double、long类型变量赋值添加f、d、L尾缀问题

    展开1. 添加尾缀说明 我们知道Java在变量赋值的时候,其中float.double.long数据类型变量,需要在赋值直接量后面分别添加f或F.d或D.l或L尾缀来说明.  其中,long类型最好以 ...

  8. Java学习笔记——JDBC之PreparedStatement类中“预编译”的综合应用

    预编译 SQL 语句被预编译并存储在 PreparedStatement 对象中.然后可以使用此对象多次高效地执行该语句. 预编译的优点 1.PreparedStatement是预编译的,对于批量处理 ...

  9. Java中通过JDBC远程连接Oracle数据库

    通过jdbc连接数据库,拢共分三步: 第一步:下载一个JDBC的驱动,然后把jar包扔到项目里并add to build path: 第二步:去本地oracle文件夹下找到“TNSNAMES.ORA” ...

随机推荐

  1. hasOne、hasMany、belongsTo

    这里将hasOne.hasMany.belongsTo进行一个详细举例说明. 首先,这3个的大致中文意思: hasOne:有一个,加上主谓语应该是 ,A 有一个 B hasMany:有很多,A 有很多 ...

  2. 使用Selenium+ChromeDriver登录微博并且获取cookie

    using OpenQA.Selenium;using OpenQA.Selenium.Chrome; public class GetSinaCookie { private static stri ...

  3. neo4j 学习笔记

    1.参考 https://blog.csdn.net/appleyk/article/category/7408344 系列文章 (不支持 spring boo 2.0 以下的,入门可做参考) 2.底 ...

  4. Linux 内存释放命令非常不错具有参考借鉴价值

    这篇文章主要介绍了Linux 内存释放命令的相关资料,非常不错具有参考借鉴价值,需要的朋友可以参考下(http://www.120xcjl.com) 我使用的是CentOS 6.5 ,由于卸载Solr ...

  5. hdu5701-中位数计数

    题目链接:http://acm.hdu.edu.cn/showproblem.php?pid=5701 题目: Problem Description 中位数定义为所有值从小到大排序后排在正中间的那个 ...

  6. Typescript高级类型与泛型难点详解

    最近做的TS分享,到了高级类型这一块.通过琢磨和实验还是挖掘出了一些深层的东西,在此处做一下记录,也分享给各位热爱前端的小伙伴.   其实在学习TS之前就要明确以下几点:   1. typescrip ...

  7. python flask_Sqlalchemy管理数据库

    懒癌复发直接粘贴代码,算是做一个简单备份吧. #coding:utf8 from flask import Flask from flask_sqlalchemy import SQLAlchemy ...

  8. 【BZOJ1103】大都市 解题报告

    题目传送门 打算5分钟写完题解 题目大意 有一棵n个点的有根树, 初始时每条边均为红色,有两种操作: 把某条边染为蓝色 统计根到某一点路径上的红边数量 思路 用\(a_i\)表示根到点i路径上的红边数 ...

  9. ActiveMq实例

    1.发布端 import javax.jms.Connection; import javax.jms.ConnectionFactory; import javax.jms.DeliveryMode ...

  10. Codechef July Challenge 2018 : Picking Fruit for Chefs

    传送门 好久没写题解了,就过来水两篇. 对于每一个人,考虑一个序列$A$,$A_I$表示当k取值为 i 时的答案. 如果说有两个人,我们可以把$(A+B)^k$二项式展开,这样就发现把两个人合并起来的 ...