在本文将介绍如何使用JDBC操作MySQL数据库对于大容量数据类型的读取。在之前的博客中已经介绍了如何使用JDBC来操作数据库对各种数据的增删改查,那么大容量数据类型的数据操作又为何不同呢。

  原因在于之前对数据的操作,都可以存储在系统的内存中,但是如果我们对于大容量数据还按以前的方式操作的话,就要将数据先存储在内存中,这样极有可能造成系统内存溢出。所以对于JDBC操作大容量数据,就该使用“IO流”的方式。

  注:本文只是探讨在数据库读取和存入大容量数据的技术兴趣,实际开发并不适用。因为对大容量数据的操作会占用数据库链接很大的时间,而数据库链接又是非常宝贵的,其次大容量数据也会对数据库存储容量造成极大的资源浪费。所以在一般开发中都以上传与下载方式在硬盘中存储一个大数据容量的文件。

  在MySQL数据库中,对于大容量的“字符”数据类型使用的是TEXT系列类型,该系列具体类型为如下四种:

  TINYTEXT、TEXT、MEDIUMTEXT、LONGTEXT

  对于大容量的“字节”数据类型使用的是BLOB系列类型,该系列具体类型为如下四种:

  TINYBLOB、BLOB、MEDIUMBLOB、LONGBLOB

  那么在JDBC是如何操作大容量数据类型呢?和以前操作其他数据不同的步骤在哪里呢?其实大部分还是相同的,不同的地方在于:

  ⑴ 如果是使用JDBC将大容量数据存入MySQL数据库中,使用的是PreparedStatement对象,在替代占位符的部分,应该是使用

setCharacterStream( index , reader , length)  对于大容量字符类型

setBinaryStream( index, inputStream, length)  对于大容量字节类型

  ⑵ 如果是使用JDBC将大容量数据读取MySQL数据库中,使用的是结果集ResultSet对象,当判断ResultSet的next()方法发现结果集有内容时,对内容处理的方法过程中,使用

reader = resultSet.getCharacterStream(int  columnIndex)  对于大容量字符类型

或者reader = resultSet.getCharacterStream(String  columnLabel)  对于大容量字符类型

inputStream = resultSet.getBinaryStream(int  columnIndex)  对于大容量字节类型

或者inputStream = resultSet.getBinaryStream(String  columnLabel)  对于大容量字节类型

注:下面以一个例子分别来介绍如何使用JDBC操作大容量数据的类型,其中使用到了自定义的工具类JdbcUtils,该自定义类具体请看《JDBC操作数据库的学习(2)》中定义的方式。

例1:使用JDBC处理MySQL的大容量字符类型

假如我们有一个文本类型的文件,如txt、word等等,里面有大量的文字,现在使用JDBC将该文件中的内容存储到MySQL数据库中。这个文本文件假设为a.txt,在D盘目录下。

数据库和表的创建:

create database blobtext;
use blobtext;
create table text(
id int primary key,
words text
);

  注:在表text中,只有一个id列和words列,其中words列的类型为TEXT。

创建Java工程

  在该工程中导入配置文件,编写好工具类(JdbcUtils),在该工具类中主要功能有读取配置文件、注册数据库驱动、获取链接、释放资源,这两步请看《JDBC操作数据库的学习(2)》,此处略。

创建类,则添加大容量字符类型的方法demo代码为:

 public void insert() throws Exception {
Connection conn = null;
PreparedStatement st = null;
ResultSet rs = null; try{
conn = JdbcUtils.getConnection();
String sql = "insert into text(id,words) values(?,?)";
st = conn.prepareStatement(sql);
st.setInt(1, 1);
File file = new File("D:\\a.txt");
if(file.exists()) {
FileReader reader = new FileReader(file);
st.setCharacterStream(2, reader,file.length());
int num = st.executeUpdate();
if(num>0) {
System.out.println("插入成功");
}
reader.close();
}
}finally{
JdbcUtils.release(conn, st, rs);
}
}

  通过该方法就可以将一个文本文件中的文字内容存储到MySQL数据库中。

读取大容量字符类型的方法demo代码为:

 public void read() throws Exception {
Connection conn = null;
PreparedStatement st = null;
ResultSet rs = null; try{
conn = JdbcUtils.getConnection();
String sql = "select words from text where id=1";
st = conn.prepareStatement(sql);
rs = st.executeQuery();
if(rs.next()) {
Reader reader = rs.getCharacterStream("words");
int length = 0;
char[] buffer = new char[1024];
FileWriter writer = new FileWriter("D:\\b.txt");
while((length=reader.read(buffer))>0) {
writer.write(buffer, 0, length);
}
writer.close();
reader.close();
}
}finally{
JdbcUtils.release(conn, st, rs);
}
}

  这里将数据库中的一个大容量数据类型的数据读取到一个文本文件中(D盘目录下的b.txt),避免在程序中直接显示,否则将会导致程序内存溢出。

  上面的例子是操作文本类型的大容量数据,而对于字节类型的大容量数据类型,例如图片,歌曲,视频等等,处理的过程也是类型的。

使用JDBC处理数据库大容量数据类型的更多相关文章

  1. 通过 JDBC 驱动程序使用大容量复制

    Microsoft SQL Server 包含一个名为 bcp 的受欢迎的命令行实用工具,以便将较大文件快速大容量复制到 SQL Server 数据库的表或视图中. SQLServerBulkCopy ...

  2. 通过jdbc获取数据库中的表结构

    通过jdbc获取数据库中的表结构 主键 各个表字段类型及应用生成实体类   1.JDBC中通过MetaData来获取具体的表的相关信息.可以查询数据库中的有哪些表,表有哪些字段,字段的属性等等.Met ...

  3. 用JDBC查询数据库

    JDBC API的核心组件:1.DriverManager类:用语跟踪可用的JDBC驱动程序并产生数据库连接. 2.Connection接口:用于取得数据库信息.生成数据库语句,并管理数据库事务. 3 ...

  4. javaweb学习总结(三十三)——使用JDBC对数据库进行CRUD

    一.statement对象介绍 Jdbc中的statement对象用于向数据库发送SQL语句,想完成对数据库的增删改查,只需要通过这个对象向数据库发送增删改查语句即可. Statement对象的exe ...

  5. 使用JDBC调用数据库的存储过程

    本篇讲述如何使用JDBC来调用MySQL数据库中的存储过程.建议在学习如何使用JDBC调用存储过程前,请先了解如何在数据库中使用存储过程. 存储过程是指在数据库系统中,一组为了完成特定功能的SQL语句 ...

  6. javaweb(三十三)——使用JDBC对数据库进行CRUD

    一.statement对象介绍 Jdbc中的statement对象用于向数据库发送SQL语句,想完成对数据库的增删改查,只需要通过这个对象向数据库发送增删改查语句即可. Statement对象的exe ...

  7. Java之JDBC操作数据库

    DBC JDBC就是一套接口,真正执行的是jar包里得实现类,通过泛型对象来执行实现类里的方法. 步骤: ###1.导入驱动jar包到工程中 ###2.编写代码注册驱动,我们要让程序知道用的是哪个驱动 ...

  8. 二.使用JDBC对数据库CRUD

    一.statement对象介绍 Jdbc中的statement对象用于向数据库发送SQL语句,想完成对数据库的增删改查,只需要通过这个对象向数据库发送增删改查语句即可. Statement对象的exe ...

  9. 十六:使用JDBC对数据库进行CRUD

    一.statement对象介绍 Jdbc中的statement对象用于向数据库发送SQL语句,想完成对数据库的增删改查,只需要通过这个对象向数据库发送增删改查语句即可. Statement对象的exe ...

随机推荐

  1. Eclipse开启与关闭代码自动提示功能

        Eclipse代码里面的代码提示功能默认是关闭的,只有输入“.”的时候才会提示功能,用vs的用户可能不太习惯 这种,vs是输入任何字母都会提示,下面说一下如何修改eclipse配置,开启代码自 ...

  2. javascript 学习随笔2

    <html> <head> <script type="text/javascript"> function writeText(txt) { ...

  3. 树莓派安装ftp服务器

    在树莓派安装ftp服务器,可上载\下载文件 vsftpd是开源的轻量级的常用ftp服务器. 1,安装vsftpd服务器 (约400KB)sudo apt-get install vsftpd 2,启动 ...

  4. 一起学习CMake – 03

    这一节我们就一起来看看如何用CMake来链接自己写的lib库,如何进行这些库文件的管理. 一个团队共同开发软件时,一般都是分模块进行作业的,每个人负责整个软件中的一部分,然后再整合成一个完整的软件系统 ...

  5. busybox 致命错误: curses.h:没有那个文件或文件夹

    $:~/dd/busybox-1.19.3$ make menuconfig   HOSTCC  scripts/basic/fixdep   HOSTCC  scripts/basic/split- ...

  6. 另外一种方式装win2008r2

    装系统有很多方法,但是这种,我很少用. 注意第二个红圈处,是要启动的电话引导盘符.容易选择你的启动U盘,如果是后者,表现出的结果就是引导U盘不能引导,且安装的电脑也会显示ntdl丢失.当然,也可以解决 ...

  7. c# winform 弹出确认消息框判断是否删除?

    if (MessageBox.Show("确认删除?", "此删除不可恢复", MessageBoxButtons.YesNo) == DialogResult ...

  8. lvs、haproxy、nginx 负载均衡的比较分析

    lvs和nginx都可以用作多机负载的方案,它们各有优缺,在生产环境中需要好好分析实际情况并加以利用. 首先提醒,做技术切不可人云亦云,我云即你云:同时也不可太趋向保守,过于相信旧有方式而等别人来帮你 ...

  9. python binary lib on win/各种python库的二进制包

    虽然很不愿意在windows上折腾python,但有时linux不在身边的时候还得在windows上写代码.很久之前找到这个地址,后来忘了,今天搜了半天才把它找到,所以记录一下. http://www ...

  10. springmvc + jquery easyui实现分页显示

    如有不明确的地方,戏迎增加QQ群交流:66728073      推荐一本Java学习的书:深入理解Java7 一,下载并导入jquery easyui的导 <link rel="st ...