处理大数据对象

CLOB中可以存储海量文字

BLOB中可以存储海量二进制数据

如果程序中要想处理这样的大对象操作，则必须使用PreparedStatement完成，所有的内容要通过IO流的方式从大文本字段中保存和读取。

写入大文本数据

汉字的编码要改成gbk

//=================================================

// File Name       :	Clob_demo

//------------------------------------------------------------------------------

// Author          :	Common

import java.io.File;

import java.io.FileInputStream;

import java.io.InputStream;

import java.sql.*;

import java.text.SimpleDateFormat;

//主类

//Function        : 	Clob_demo

public class Clob_demo {

	//定义MySQL的数据库驱动程序

	public static final String DBDRIVER = "org.gjt.mm.mysql.Driver";

	//定义MySQL数据库的连接地址

	public static final String DBURL = "jdbc:mysql://localhost:3306/mysql_demo";

	//MySQL数据库的连接用户名

	public static final String DBUSER = "root";

	//MySQL数据库的连接密码

	public static final String DBPASS = "123456";

	public static void main(String[] args) throws Exception{

		// TODO 自动生成的方法存根

		Connection conn = null;						//数据库连接

		PreparedStatement pstmt = null;	//数据库操作

		String name = "张三";

		String sql = "INSERT INTO userclob(name,note) VALUES (?,?) ";

		Class.forName(DBDRIVER);			//加载驱动程序

		//连接MySQL数据库时，要写上连接的用户名和密码

		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

		//声明一个File对象，用于找到要操作的大文本文件

		File f = new File("/home/common/software/database/zhangsan.txt");

		InputStream input = null;				//通过输入流读取内容

		input = new FileInputStream(f);		//通过输入流读取文件

		pstmt.setString(1, name); 				//设置第一个“？”的内容

		pstmt.setAsciiStream(2,input, (int)f.length()); 				//设置输入流

		pstmt.executeUpdate();					//执行数据库更新操作

		pstmt.close();										//操作关闭

		conn.close();										//数据库关闭

	}

}

读取大文本字段

//=================================================

// File Name       :	Clob_demo

//------------------------------------------------------------------------------

// Author          :	Common

import java.io.File;

import java.io.FileInputStream;

import java.io.InputStream;

import java.sql.*;

import java.text.SimpleDateFormat;

import java.util.Scanner;

//主类

//Function        : 	Clob_demo

public class Clob_demo {

	//定义MySQL的数据库驱动程序

	public static final String DBDRIVER = "org.gjt.mm.mysql.Driver";

	//定义MySQL数据库的连接地址

	public static final String DBURL = "jdbc:mysql://localhost:3306/mysql_demo";

	//MySQL数据库的连接用户名

	public static final String DBUSER = "root";

	//MySQL数据库的连接密码

	public static final String DBPASS = "123456";

	public static void main(String[] args) throws Exception{

		// TODO 自动生成的方法存根

		Connection conn = null;						//数据库连接

		PreparedStatement pstmt = null;	//数据库操作

		ResultSet rs = null;								//保存结果集

		int id = 2;

		String sql = "SELECT name,note FROM userclob WHERE id=?";

		Class.forName(DBDRIVER);			//加载驱动程序

		//连接MySQL数据库时，要写上连接的用户名和密码

		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

		pstmt.setInt(1, id);     									//设置查询的id

		rs = pstmt.executeQuery();							//查询

		while(rs.next()){

			String name = rs.getString(1);

			StringBuffer note = new StringBuffer();

			System.out.println("姓名："+name);

			InputStream input = rs.getAsciiStream(2);		//接收全部的文本数据

			Scanner scan = new Scanner(input);					//接收数据

			scan.useDelimiter("\r\n");										//将文件换行作为分隔符

			while(scan.hasNext()){

				note.append(scan.next()).append("\n");			//不断读取内容

			}

			System.out.println("内容："+note);

			input.close();

		}

		pstmt.close();										//操作关闭

		conn.close();										//数据库关闭

	}

}


//=================================================

// File Name       :	Clob_demo

//------------------------------------------------------------------------------

// Author          :	Common

import java.io.File;

import java.io.FileInputStream;

import java.io.InputStream;

import java.sql.*;

import java.text.SimpleDateFormat;

import java.util.Scanner;

//主类

//Function        : 	Clob_demo

public class Clob_demo {

	//定义MySQL的数据库驱动程序

	public static final String DBDRIVER = "org.gjt.mm.mysql.Driver";

	//定义MySQL数据库的连接地址

	public static final String DBURL = "jdbc:mysql://localhost:3306/mysql_demo";

	//MySQL数据库的连接用户名

	public static final String DBUSER = "root";

	//MySQL数据库的连接密码

	public static final String DBPASS = "123456";

	public static void main(String[] args) throws Exception{

		// TODO 自动生成的方法存根

//		Connection conn = null;						//数据库连接

//		PreparedStatement pstmt = null;	//数据库操作

//

//		String name = "张三";

//		String sql = "INSERT INTO userclob(name,note) VALUES (?,?) ";

//		Class.forName(DBDRIVER);			//加载驱动程序

//		//连接MySQL数据库时，要写上连接的用户名和密码

//		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

//		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

//		//声明一个File对象，用于找到要操作的大文本文件

//		File f = new File("/home/common/software/database/无标题文档");

//		InputStream input = null;				//通过输入流读取内容

//		input = new FileInputStream(f);		//通过输入流读取文件

//		pstmt.setString(1, name); 				//设置第一个“？”的内容

//		pstmt.setAsciiStream(2,input, (int)f.length()); 				//设置输入流

//		pstmt.executeUpdate();					//执行数据库更新操作

//		pstmt.close();										//操作关闭

//		conn.close();										//数据库关闭

//		Connection conn = null;						//数据库连接

//		PreparedStatement pstmt = null;	//数据库操作

//		ResultSet rs = null;								//保存结果集

//

//		int id = 2;

//		String sql = "SELECT name,note FROM userclob WHERE id=?";

//		Class.forName(DBDRIVER);			//加载驱动程序

//		//连接MySQL数据库时，要写上连接的用户名和密码

//		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

//		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

//		pstmt.setInt(1, id);     									//设置查询的id

//		rs = pstmt.executeQuery();							//查询

//

//		while(rs.next()){

//			String name = rs.getString(1);

//			StringBuffer note = new StringBuffer();

//			System.out.println("姓名："+name);

//			InputStream input = rs.getAsciiStream(2);		//接收全部的文本数据

//			Scanner scan = new Scanner(input);					//接收数据

//			scan.useDelimiter("\r\n");										//将文件换行作为分隔符

//			while(scan.hasNext()){

//				note.append(scan.next()).append("\n");			//不断读取内容

//			}

//			System.out.println("内容："+note);

//			input.close();

//		}

//

//		pstmt.close();										//操作关闭

//		conn.close();										//数据库关闭

		Connection conn = null;						//数据库连接

		PreparedStatement pstmt = null;	//数据库操作

		ResultSet rs = null;								//保存结果集

		int id = 2;

		String sql = "SELECT name,note FROM userclob WHERE id=?";

		Class.forName(DBDRIVER);			//加载驱动程序

		//连接MySQL数据库时，要写上连接的用户名和密码

		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

		pstmt.setInt(1, id);     									//设置查询的id

		rs = pstmt.executeQuery();							//查询

		while(rs.next()){

			String name = rs.getString(1);			//取出name列的内容

			Clob c = rs.getClob(2);							//取出大文本数据

			String note = c.getSubString(1, (int)c.length());	//CLOB开始的位置为1

			System.out.println("姓名："+name);

			System.out.println("内容："+note);

			c.truncate(100);

			System.out.println("部分的读取内容："+c.getSubString(1,  (int)c.length()));

		}

		pstmt.close();										//操作关闭

		conn.close();										//数据库关闭

	}

}

处理BLOB数据

create table userblob(id INT AUTO_INCREMENT PRIMARY KEY,name VARCHAR(30) NOT NULL,photo LONGBLOB);

//=================================================

// File Name       :	Blob_demo

//------------------------------------------------------------------------------

// Author          :	Common

import java.io.File;

import java.io.FileInputStream;

import java.io.FileOutputStream;

import java.io.InputStream;

import java.sql.*;

import java.text.SimpleDateFormat;

import java.util.Scanner;

//主类

//Function        : 	Blob_demo

public class Blob_demo {

	//定义MySQL的数据库驱动程序

	public static final String DBDRIVER = "org.gjt.mm.mysql.Driver";

	//定义MySQL数据库的连接地址

	public static final String DBURL = "jdbc:mysql://localhost:3306/mysql_demo";

	//MySQL数据库的连接用户名

	public static final String DBUSER = "root";

	//MySQL数据库的连接密码

	public static final String DBPASS = "123456";

	public static void main(String[] args) throws Exception{

		// TODO 自动生成的方法存根

//		Connection conn = null;						//数据库连接

//		PreparedStatement pstmt = null;	//数据库操作

//

//		String name = "赵六";

//		String sql = "INSERT INTO userblob(name,photo) VALUES (?,?) ";

//		Class.forName(DBDRIVER);			//加载驱动程序

//		//连接MySQL数据库时，要写上连接的用户名和密码

//		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

//		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

//		//声明一个File对象，用于找到要操作的大文本文件

//		File f = new File("/home/common/software/database/photo.jpg");

//		InputStream input = null;				//通过输入流读取内容

//		input = new FileInputStream(f);		//通过输入流读取文件

//		pstmt.setString(1, name); 				//设置第一个“？”的内容

//		pstmt.setBinaryStream(2,input, (int)f.length()); 				//设置输入流

//		pstmt.executeUpdate();					//执行数据库更新操作

//		pstmt.close();										//操作关闭

//		conn.close();										//数据库关闭

		Connection conn = null;						//数据库连接

		PreparedStatement pstmt = null;	//数据库操作

		ResultSet rs = null;								//保存结果集

		int id = 1;

		String sql = "SELECT name,photo FROM userblob WHERE id=?";

		Class.forName(DBDRIVER);			//加载驱动程序

		//连接MySQL数据库时，要写上连接的用户名和密码

		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

		pstmt.setInt(1, id);				//设置查询的id

		rs = pstmt.executeQuery();							//查询

		while(rs.next()){

			String name = rs.getString(1);

			StringBuffer note = new StringBuffer();

			System.out.println("姓名："+name);

			InputStream input = rs.getBinaryStream(2);		//接收全部的大文本数据

			FileOutputStream out = null;

			out = new FileOutputStream(new File("/home/common/software/database/photo_copy.jpg"));

			int temp = 0;

			while((temp = input.read()) != -1){							//边读边写

				out.write(temp);

			}

			input.close();

			out.close();

		}

		pstmt.close();										//操作关闭

		conn.close();										//数据库关闭

	}

}

使用Ｂlob读取内容

//=================================================

// File Name       :	Blob_demo

//------------------------------------------------------------------------------

// Author          :	Common

import java.io.File;

import java.io.FileInputStream;

import java.io.FileOutputStream;

import java.io.InputStream;

import java.sql.*;

import java.text.SimpleDateFormat;

import java.util.Scanner;

//主类

//Function        : 	Blob_demo

public class Blob_demo {

	//定义MySQL的数据库驱动程序

	public static final String DBDRIVER = "org.gjt.mm.mysql.Driver";

	//定义MySQL数据库的连接地址

	public static final String DBURL = "jdbc:mysql://localhost:3306/mysql_demo";

	//MySQL数据库的连接用户名

	public static final String DBUSER = "root";

	//MySQL数据库的连接密码

	public static final String DBPASS = "123456";

	public static void main(String[] args) throws Exception{

		// TODO 自动生成的方法存根

		Connection conn = null;						//数据库连接

		PreparedStatement pstmt = null;	//数据库操作

		ResultSet rs = null;								//保存结果集

		int id = 1;

		String sql = "SELECT name,photo FROM userblob WHERE id=?";

		Class.forName(DBDRIVER);			//加载驱动程序

		//连接MySQL数据库时，要写上连接的用户名和密码

		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

		pstmt.setInt(1, id);				//设置查询的id

		rs = pstmt.executeQuery();							//查询

		if(rs.next()){

			String name = rs.getString(1);

			System.out.println("姓名："+name);

			Blob b = rs.getBlob(2);					//读取Ｂlob数据

			FileOutputStream out = null;

			out = new FileOutputStream(new File("/home/common/software/database/photo_copy2.jpg"));

			out.write(b.getBytes(1, (int)b.length()));

			out.close();

		}

		pstmt.close();										//操作关闭

		conn.close();										//数据库关闭

	}

}

Java数据库——处理大数据对象的更多相关文章

  1. java 跨数据库导入大数据

    java 跨数据库导入大数据 /** * java程序跨服务器跨数据库批量导入导出百万级数据 * @param args * @throws Exception */ public static vo ...

  2. Java在处理大数据的时候一些小技巧

    Java在处理大数据的时候一些小技巧 发布时间:2013-05-09 00:00:00 来源:中国IT实验室 作者:佚名   关键字:Java 众所周知,java在处理数据量比较大的时候,加载到内存必 ...

  3. 处理大数据对象clob数据和blob数据

    直接上下代码: package com.learn.jdbc.chap06; import java.io.File; import java.io.FileInputStream; import j ...

  4. 开发入门，学Java还是学大数据？

    经常有人问,我想学习开发,到底是学Java好还是学大数据好?或者是,学习大数据还有必要学Java吗?      依我说,这个提问的标准答案是:两者都学.      先来甩两张图.      一张是腾讯 ...

  5. PDO操作大数据对象

    一般在数据库中,我们保存的都只是 int . varchar 类型的数据,一是因为现代的关系型数据库对于这些内容会有很多的优化,二是大部分的索引也无法施加在内容过多的字段上,比如说 text 类型的字 ...

  6. c#几种数据库的大数据批量插入（SqlServer、Oracle、SQLite和MySql）

    这篇文章主要介绍了c#几种数据库的大数据批量插入(SqlServer.Oracle.SQLite和MySql),需要的朋友可以了解一下. 在之前只知道SqlServer支持数据批量插入,殊不知道Ora ...

  7. java 导出Excel 大数据量，自己经验总结！

    出处: http://lyjilu.iteye.com/ 分析导出实现代码,XLSX支持: /** * 生成<span style="white-space: normal; back ...

  8. 23个适合Java开发者的大数据工具和框架

    转自:https://www.yidianzixun.com/article/0Ff4gqZQ?s=9&appid=yidian&ver=3.8.4&utk=6n9c2z37 ...

  9. Java编码规范之数据对象命名

    数据对象分多种,为方便阅读并区分各数据对象的用途,习惯将数据对象分为以下几类,供参考: 持久对象 PO(persistant object)对象关系映射(ORM)概念的产物,基本上对象的成员变量对应了 ...

随机推荐

  1. 在Word2013中多次应用格式刷

    顾名思义,格式刷是为了方便需要跨区域操作时候,能快速的应用格式到相应文本.那么怎么使用word进行格式刷的多次使用呢.我们先来看单次的,这个比较容易,只要在先需要的格式单击一次格式刷,再到需要的文本执 ...

  2. jquery里的on方法使用

    <!DOCTYPE html><html> <head> <meta charset="UTF-8"> <script src ...

  3. 安卓 Context 和 Application的关系

    1. 我开始一直不理解显式Intent中传一个this(当前的activity)是为什么.因为Intent里面的构造方法对应的只有 Context, Class.后面查资料才发现 Intent i = ...

  4. A+B

    Problem Description Calculate A + B. Input Each line will contain two integers A and B. Process to e ...

  5. 如何配置全世界最小的 MySQL 服务器

    配置全世界最小的 MySQL 服务器——如何在一块 Intel Edison 为控制板上安装一个 MySQL 服务器. 介绍 在我最近的一篇博文中,物联网,消息以及 MySQL,我展示了如果 Part ...

  6. 莫比乌斯函数筛法 & 莫比乌斯反演

    模板: int p[MAXN],pcnt=0,mu[MAXN]; bool notp[MAXN]; void shai(int n){ mu[1]=1; for(int i=2;i<=n;++i ...

  7. 折腾笔记之wordpress安装出现错误---【wordpress点击文章找不到网页的解决办法】

    本来写的好好的在后台,然后发表在前台,能够看见在网站首页,但是一点击进去,就提示找不到链接了.郁闷,经过查找资料.终于解决了 1,.htaccess要开放写权限,这样在自定义wp的永久链接时,wp会自 ...

  8. bzoj1066

    首先,我们可以想到从源点向每个有蜥蜴的地方连边,然后拆点,因为我们不能把一个点连向多条边,这样修改边的时候不可以,所以拆个点,就可以了 #include<iostream> #includ ...

  9. Java 学习之路 之 泛型方法

    前面介绍了在定义类.接口时可以使用类型形参,在该类的方法定义和 Field 定义.接口的方法定义中,这些类型形参可被当成普通类型来用.在另外一些情况下,我们定义类.接口时没有使用类型形参,但定义方法时 ...

  10. C#版 Socket编程（最简单的Socket通信功能）

    示例程序是同步套接字程序,功能很简单,只是客户端发给服务器一条信息,服务器向客户端返回一条信息:这里只是一个简单的示例,是一个最基本的socket编程流程,在接下来的文章中,会依次记录套接字的同步和异 ...