【Hibernate框架】批量操作Batch总结
在我们做.net系统的时候,所做的最常见的批量操作就是批量导入、插入、更新、删除等等,以前我们怎么做呢?基本上有以下几种方式:
1、利用循环调用insert方法,一条条插入。
- public boolean insertStudent(List<Student> studentList)
- {
- try{
- if(studentList.count !=0){
- for(int i=0;i<studentList.count;i++){
- //调用save方法
- }
- return true;
- }
- }catch(Exception ex){
- throw New Exception("插入失败,请重试!")
- return false;
- }
- }
2、利用循环做sql语句拼接,然后批量执行sql语句。
- public boolean insertStudent(List<Student> studentList)
- {
- try{
- if(studentList.count !=0){
- stringBuffer strSqltxt="";
- for(int i=0;i<studentList.count;i++){
- strSqltxt.append("insert into TableName (……) values (……);"
- }
- cmd.executesql(strSqltxt.toString());
- }
- }catch(Exception ex){
- throw New Exception("插入失败,请重试!")
- return false;
- }
- }
可是,对于封装比较完善的hibernate持久层,我们又能怎么做呢?
最常见的,也是利用循环来批量操作,但是,这里有一个必须要注意的点,就是缓存或者说是session区的空间是有限的,禁不起我们无限制的存放,所以,当我们执行以下操作时,会抛异常,内存溢出OutOfMemoryException!
- Session session = sessionFactory.openSession();
- Transaction tx = session.beginTransaction();
- for ( int i=0; i<100000; i++ ) {
- Customer customer = new Customer(.....);
- session.save(customer);
- }
- tx.commit();
- session.close();
这样是不可以的,但是在这时,hibernate也给我们提供了解决方法,就是我们可以通过设置JDBC的批量抓去数量参数(batch size)来设置一个合适的值,比如说10-50-100不等,配置:
- <span style="font-size:18px;"><property name="hibernate.jdbc.batch_size">100</property></span>
另外,我们还可以显示的禁用二级缓存,以前我们也提到过:
<property name="hibernate.cache.use_second_level_cache">false</property>
正确代码:
- Session session = sessionFactory.openSession();
- Transaction tx = session.beginTransaction();
- for ( int i=0; i<100000; i++ ) {
- Customer customer = new Customer(.....);
- session.save(customer);
- if(i%100==0){//100, 和配置的JDBC batch size一样
- session.fulsh();//刷出并同步到底层持久化, 批量的插入并且释放内存:
- session.clear(); //完全清除session
- }
- }
- tx.commit();
- session.close();
这样就能解决我们的那个内存溢出的问题,因为当你的存储对象数超过你设定的能接受的合理值的时候,程序会自动将持久化对象flush进数据缓存起来,然后清空session,进行下一轮存储,待所有数据全部完成,执行commit进行提交,数据库更新数据,说的简单,这样的效率是不咋地的,不信你可以试试,你想想,先发出sql,100一轮,执行1000轮用来缓存sql语句,然后数据库统一执行sql,时间啊!
StatelessSession(无状态session)接口
但是这不是问题,因为hibernate还给我们提供了一个StatelessSession(无状态session)接口,作为选择,Hibernate提供了基于命令的API:
1、可以用detached object(托管对象)的形式把数据以流的方法加入到数据库,或从数据库输出。
2、StatelessSession没有持久化上下文,也不提供多少高层的生命周期语义。
3、无状态session不实现第一级cache;
4、也不和第二级缓存交互,也不和查询缓存交互。
5、它不实现事务化写,也不实现脏数据检查。
6、用stateless session进行的操作甚至不级联到关联实例。
7、stateless session忽略集合类(Collections)。
8、通过stateless session进行的操作不触发Hibernate的事件模型和拦截器。
9、无状态session对数据的混淆现象免疫,因为它没有第一级缓存。
10、无状态session是低层的抽象,和低层JDBC相当接近。换句话说,它可以直接操作数据。
- StatelessSession session = sessionFactory.openStatelessSession();
- Transaction tx = session.beginTransaction();
- ScrollableResults customers = session.getNamedQuery("GetCustomers")
- .scroll(ScrollMode.FORWARD_ONLY);
- while ( customers.next() ) {
- Customer customer = (Customer) customers.get(0);
- customer.updateStuff(...);
- session.update(customer);
- }
- tx.commit();
- session.close();
DML(Data Manipulation Language数据操作语言)风格操作
再有就是特殊服务(业务需求)需要我们采用DML(Data Manipulation Language数据操作语言)风格操作,从一张表导入另一张表数据,比方说从学生表(T_Studeng)里面往大三学生表(T_ThreeStudent)里面倒数据.
- Session session = sessionFactory.openSession();
- Transaction tx = session.beginTransaction();
- String hqlInsert = "insert into ThreeStudent(id, name) select s.id, s.name from Student s where ...";
- int createdEntities = s.createQuery( hqlInsert )
- .executeUpdate();
- tx.commit();
- session.close();
以上就是对批量操作的一点总结,万望对大家能有点帮助
【Hibernate框架】批量操作Batch总结的更多相关文章
- Hibernate框架(未完待续······)
作为SSH三大框架之一的Hibernate,是用来把程序的Dao层和数据库打交道用的,它封装了JDBC的步骤,是我们对数据库的操作更加简单,更加快捷.利用Hibernate框架我们就可以不再编 ...
- Hibernate框架之Criteria查询 和注解(重点☆☆☆☆☆,难点☆☆☆)
写好一篇博客,不是容易的事.原因是:你要给自己以后看的时候,还能看懂,最重要的是当别人看到你的博客文章的时候,也一样很清楚的明白你自己写的东西.其实这也是一种成就感!! 对于每一个知识点,要有必要的解 ...
- Hibernate 系列 01 - 框架技术 (介绍Hibernate框架的发展由来)
引导目录: Hibernate 系列教程 目录 本篇导航: 为什么学习框架技术 框架的概念 主流框架的介绍 1.为什么学习框架技术 如何制作一份看上去具有专业水准的PPT文档呢?一个简单的方法就是使用 ...
- 2.0、Hibernate框架的简单搭建
一.Hibernate:是一个开放源代码的对象关系映射框架,对JDBC进行了非常轻量级的对象封装,它将POJO与数据库表建立映射关系,是一个全自动的orm框架,hibernate可以自动生成SQL语句 ...
- 【Hibernate框架】对象的三种持久化状态
一.综述 hibernate中的对象有三种状态,分别是TransientObjects(瞬时对象).PersistentObjects(持久化对象)和DetachedObjects(托管对象也叫做离线 ...
- hibernate框架int和Integer类型区别
hibernate 框架在定义实体时,int类型最好定义为Inttger类型,因为在注入时int是值类型不允许为空.
- SSH(Struts2+Spring+Hibernate)框架搭建流程<注解的方式创建Bean>
此篇讲的是MyEclipse9工具提供的支持搭建自加包有代码也是相同:用户登录与注册的例子,表字段只有name,password. SSH,xml方式搭建文章链接地址:http://www.cnblo ...
- ECLIPSE/JAVAWEB (二)三大框架之Hibernate框架 持续更新中...
(一)发展历史 在Struts框架中使用jdbc连接来读写数据库,我们最常见的就是打开数据库连接.使用复杂的sql语句进行读写.关闭连接,获得的数据又需要转换或封装后往外传,这是一个非常繁琐的过程. ...
- Hibernate框架简单应用
Hibernate框架简单应用 Hibernate的核心组件在基于MVC设计模式的JAVA WEB应用中,Hibernate可以作为模型层/数据访问层.它通过配置文件(hibernate.proper ...
- Hibernate框架之get和load方法的区别
我们在学习Hibernate框架时,经常会进行修改,删除操作,对于这些操作,我们都应该先加载对象,然后在执行或删除的操作,那么这里Hibernate提供了两种方法按照主键加载对象,也就是我要说的get ...
随机推荐
- js自动轮播图片的两种循环方法(原创)
用5个div,布局从左到右5张图片,从左到右5个div分别指定ID为img1,img2,img3,img4,img5.(背景是relative,5个div是相对于背景absolute定位) 显示如下: ...
- SPSS课程学习思路及流程
数据挖掘领域对行的分析
- 百度链接提交-主动推送Python版
百度目前提供自动提交链接和手动提交链接两种方式,其中自动提交又分为主动推送.自动推送和sitemap三种形式,按百度的说法,主动推送的效果最好,百度站长平台后台也提供了curl.php.ruby的推送 ...
- Java Abstract Class & Interface
一. 抽象类 1. 抽象类:包含了一个抽象方法的类就是抽象类 2. 抽象方法:声明而未被实现的方法,用关键字abstract声明 3. 抽象类被子类继承,子类(如果不是抽象类)必须重写(overrid ...
- Notepad++源码编译及其分析
Notepad++是一个小巧精悍的编辑器,其使用方法我就不多说了,由于notepad++是使用c++封装的windows句柄以及api来实现的,因此对于其源码的研究有助于学习如何封装自己简单的库(当然 ...
- centos 7配置网络 更新yum源
cd /etc/sysconfig/network-script/ 找到对应的ifcfg-entxxxx文件,然后添加网关,修改dhcp为static,静态ip,添加IPADDR ip地址.onboo ...
- 使用node初始化项目
初始化项目 在建项目的时候经常会建很多文件夹和文件,今天使用node初始化项目自动生成这些内容. 执行步骤 执行命令 node init 初始化项目生成package.json 设置配置文件 var ...
- 在Parallel中使用DbSet.Add()发现的一系列多线程问题和解决过程
发现问题 需求很简单,大致就是要批量往数据库写数据,于是打算用Parallel并行的方式写入,希望能利用计算机多核特性加快程序执行速度.想的很美好,于是快速撸了类似下面的一串代码: using (va ...
- 变量声明---let,const,解构
let在很多方面与var是相似的,但是可以帮助大家避免在JavaScript里常见一些问题. const是对let的一个增强,它能阻止对一个变量再次赋值. 块作用域 当用let声明一个变量,它使用的是 ...
- MVC中使用Entity Framework 基于方法的查询学习笔记 (一)
EF中基于方法的查询方式不同于LINQ和以往的ADO.NET,正因为如此,有必要深入学习一下啦.闲话不多说,现在开始一个MVC项目,在项目中临床学习. 创建MVC项目 1.“文件”--“新建项目”-- ...