处理大数据对象

CLOB中可以存储海量文字

BLOB中可以存储海量二进制数据

如果程序中要想处理这样的大对象操作，则必须使用PreparedStatement完成，所有的内容要通过IO流的方式从大文本字段中保存和读取。

写入大文本数据

汉字的编码要改成gbk

//=================================================

// File Name       :	Clob_demo

//------------------------------------------------------------------------------

// Author          :	Common

import java.io.File;

import java.io.FileInputStream;

import java.io.InputStream;

import java.sql.*;

import java.text.SimpleDateFormat;

//主类

//Function        : 	Clob_demo

public class Clob_demo {

	//定义MySQL的数据库驱动程序

	public static final String DBDRIVER = "org.gjt.mm.mysql.Driver";

	//定义MySQL数据库的连接地址

	public static final String DBURL = "jdbc:mysql://localhost:3306/mysql_demo";

	//MySQL数据库的连接用户名

	public static final String DBUSER = "root";

	//MySQL数据库的连接密码

	public static final String DBPASS = "123456";

	public static void main(String[] args) throws Exception{

		// TODO 自动生成的方法存根

		Connection conn = null;						//数据库连接

		PreparedStatement pstmt = null;	//数据库操作

		String name = "张三";

		String sql = "INSERT INTO userclob(name,note) VALUES (?,?) ";

		Class.forName(DBDRIVER);			//加载驱动程序

		//连接MySQL数据库时，要写上连接的用户名和密码

		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

		//声明一个File对象，用于找到要操作的大文本文件

		File f = new File("/home/common/software/database/zhangsan.txt");

		InputStream input = null;				//通过输入流读取内容

		input = new FileInputStream(f);		//通过输入流读取文件

		pstmt.setString(1, name); 				//设置第一个“？”的内容

		pstmt.setAsciiStream(2,input, (int)f.length()); 				//设置输入流

		pstmt.executeUpdate();					//执行数据库更新操作

		pstmt.close();										//操作关闭

		conn.close();										//数据库关闭

	}

}

读取大文本字段

//=================================================

// File Name       :	Clob_demo

//------------------------------------------------------------------------------

// Author          :	Common

import java.io.File;

import java.io.FileInputStream;

import java.io.InputStream;

import java.sql.*;

import java.text.SimpleDateFormat;

import java.util.Scanner;

//主类

//Function        : 	Clob_demo

public class Clob_demo {

	//定义MySQL的数据库驱动程序

	public static final String DBDRIVER = "org.gjt.mm.mysql.Driver";

	//定义MySQL数据库的连接地址

	public static final String DBURL = "jdbc:mysql://localhost:3306/mysql_demo";

	//MySQL数据库的连接用户名

	public static final String DBUSER = "root";

	//MySQL数据库的连接密码

	public static final String DBPASS = "123456";

	public static void main(String[] args) throws Exception{

		// TODO 自动生成的方法存根

		Connection conn = null;						//数据库连接

		PreparedStatement pstmt = null;	//数据库操作

		ResultSet rs = null;								//保存结果集

		int id = 2;

		String sql = "SELECT name,note FROM userclob WHERE id=?";

		Class.forName(DBDRIVER);			//加载驱动程序

		//连接MySQL数据库时，要写上连接的用户名和密码

		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

		pstmt.setInt(1, id);     									//设置查询的id

		rs = pstmt.executeQuery();							//查询

		while(rs.next()){

			String name = rs.getString(1);

			StringBuffer note = new StringBuffer();

			System.out.println("姓名："+name);

			InputStream input = rs.getAsciiStream(2);		//接收全部的文本数据

			Scanner scan = new Scanner(input);					//接收数据

			scan.useDelimiter("\r\n");										//将文件换行作为分隔符

			while(scan.hasNext()){

				note.append(scan.next()).append("\n");			//不断读取内容

			}

			System.out.println("内容："+note);

			input.close();

		}

		pstmt.close();										//操作关闭

		conn.close();										//数据库关闭

	}

}


//=================================================

// File Name       :	Clob_demo

//------------------------------------------------------------------------------

// Author          :	Common

import java.io.File;

import java.io.FileInputStream;

import java.io.InputStream;

import java.sql.*;

import java.text.SimpleDateFormat;

import java.util.Scanner;

//主类

//Function        : 	Clob_demo

public class Clob_demo {

	//定义MySQL的数据库驱动程序

	public static final String DBDRIVER = "org.gjt.mm.mysql.Driver";

	//定义MySQL数据库的连接地址

	public static final String DBURL = "jdbc:mysql://localhost:3306/mysql_demo";

	//MySQL数据库的连接用户名

	public static final String DBUSER = "root";

	//MySQL数据库的连接密码

	public static final String DBPASS = "123456";

	public static void main(String[] args) throws Exception{

		// TODO 自动生成的方法存根

//		Connection conn = null;						//数据库连接

//		PreparedStatement pstmt = null;	//数据库操作

//

//		String name = "张三";

//		String sql = "INSERT INTO userclob(name,note) VALUES (?,?) ";

//		Class.forName(DBDRIVER);			//加载驱动程序

//		//连接MySQL数据库时，要写上连接的用户名和密码

//		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

//		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

//		//声明一个File对象，用于找到要操作的大文本文件

//		File f = new File("/home/common/software/database/无标题文档");

//		InputStream input = null;				//通过输入流读取内容

//		input = new FileInputStream(f);		//通过输入流读取文件

//		pstmt.setString(1, name); 				//设置第一个“？”的内容

//		pstmt.setAsciiStream(2,input, (int)f.length()); 				//设置输入流

//		pstmt.executeUpdate();					//执行数据库更新操作

//		pstmt.close();										//操作关闭

//		conn.close();										//数据库关闭

//		Connection conn = null;						//数据库连接

//		PreparedStatement pstmt = null;	//数据库操作

//		ResultSet rs = null;								//保存结果集

//

//		int id = 2;

//		String sql = "SELECT name,note FROM userclob WHERE id=?";

//		Class.forName(DBDRIVER);			//加载驱动程序

//		//连接MySQL数据库时，要写上连接的用户名和密码

//		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

//		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

//		pstmt.setInt(1, id);     									//设置查询的id

//		rs = pstmt.executeQuery();							//查询

//

//		while(rs.next()){

//			String name = rs.getString(1);

//			StringBuffer note = new StringBuffer();

//			System.out.println("姓名："+name);

//			InputStream input = rs.getAsciiStream(2);		//接收全部的文本数据

//			Scanner scan = new Scanner(input);					//接收数据

//			scan.useDelimiter("\r\n");										//将文件换行作为分隔符

//			while(scan.hasNext()){

//				note.append(scan.next()).append("\n");			//不断读取内容

//			}

//			System.out.println("内容："+note);

//			input.close();

//		}

//

//		pstmt.close();										//操作关闭

//		conn.close();										//数据库关闭

		Connection conn = null;						//数据库连接

		PreparedStatement pstmt = null;	//数据库操作

		ResultSet rs = null;								//保存结果集

		int id = 2;

		String sql = "SELECT name,note FROM userclob WHERE id=?";

		Class.forName(DBDRIVER);			//加载驱动程序

		//连接MySQL数据库时，要写上连接的用户名和密码

		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

		pstmt.setInt(1, id);     									//设置查询的id

		rs = pstmt.executeQuery();							//查询

		while(rs.next()){

			String name = rs.getString(1);			//取出name列的内容

			Clob c = rs.getClob(2);							//取出大文本数据

			String note = c.getSubString(1, (int)c.length());	//CLOB开始的位置为1

			System.out.println("姓名："+name);

			System.out.println("内容："+note);

			c.truncate(100);

			System.out.println("部分的读取内容："+c.getSubString(1,  (int)c.length()));

		}

		pstmt.close();										//操作关闭

		conn.close();										//数据库关闭

	}

}

处理BLOB数据

create table userblob(id INT AUTO_INCREMENT PRIMARY KEY,name VARCHAR(30) NOT NULL,photo LONGBLOB);

//=================================================

// File Name       :	Blob_demo

//------------------------------------------------------------------------------

// Author          :	Common

import java.io.File;

import java.io.FileInputStream;

import java.io.FileOutputStream;

import java.io.InputStream;

import java.sql.*;

import java.text.SimpleDateFormat;

import java.util.Scanner;

//主类

//Function        : 	Blob_demo

public class Blob_demo {

	//定义MySQL的数据库驱动程序

	public static final String DBDRIVER = "org.gjt.mm.mysql.Driver";

	//定义MySQL数据库的连接地址

	public static final String DBURL = "jdbc:mysql://localhost:3306/mysql_demo";

	//MySQL数据库的连接用户名

	public static final String DBUSER = "root";

	//MySQL数据库的连接密码

	public static final String DBPASS = "123456";

	public static void main(String[] args) throws Exception{

		// TODO 自动生成的方法存根

//		Connection conn = null;						//数据库连接

//		PreparedStatement pstmt = null;	//数据库操作

//

//		String name = "赵六";

//		String sql = "INSERT INTO userblob(name,photo) VALUES (?,?) ";

//		Class.forName(DBDRIVER);			//加载驱动程序

//		//连接MySQL数据库时，要写上连接的用户名和密码

//		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

//		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

//		//声明一个File对象，用于找到要操作的大文本文件

//		File f = new File("/home/common/software/database/photo.jpg");

//		InputStream input = null;				//通过输入流读取内容

//		input = new FileInputStream(f);		//通过输入流读取文件

//		pstmt.setString(1, name); 				//设置第一个“？”的内容

//		pstmt.setBinaryStream(2,input, (int)f.length()); 				//设置输入流

//		pstmt.executeUpdate();					//执行数据库更新操作

//		pstmt.close();										//操作关闭

//		conn.close();										//数据库关闭

		Connection conn = null;						//数据库连接

		PreparedStatement pstmt = null;	//数据库操作

		ResultSet rs = null;								//保存结果集

		int id = 1;

		String sql = "SELECT name,photo FROM userblob WHERE id=?";

		Class.forName(DBDRIVER);			//加载驱动程序

		//连接MySQL数据库时，要写上连接的用户名和密码

		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

		pstmt.setInt(1, id);				//设置查询的id

		rs = pstmt.executeQuery();							//查询

		while(rs.next()){

			String name = rs.getString(1);

			StringBuffer note = new StringBuffer();

			System.out.println("姓名："+name);

			InputStream input = rs.getBinaryStream(2);		//接收全部的大文本数据

			FileOutputStream out = null;

			out = new FileOutputStream(new File("/home/common/software/database/photo_copy.jpg"));

			int temp = 0;

			while((temp = input.read()) != -1){							//边读边写

				out.write(temp);

			}

			input.close();

			out.close();

		}

		pstmt.close();										//操作关闭

		conn.close();										//数据库关闭

	}

}

使用Ｂlob读取内容

//=================================================

// File Name       :	Blob_demo

//------------------------------------------------------------------------------

// Author          :	Common

import java.io.File;

import java.io.FileInputStream;

import java.io.FileOutputStream;

import java.io.InputStream;

import java.sql.*;

import java.text.SimpleDateFormat;

import java.util.Scanner;

//主类

//Function        : 	Blob_demo

public class Blob_demo {

	//定义MySQL的数据库驱动程序

	public static final String DBDRIVER = "org.gjt.mm.mysql.Driver";

	//定义MySQL数据库的连接地址

	public static final String DBURL = "jdbc:mysql://localhost:3306/mysql_demo";

	//MySQL数据库的连接用户名

	public static final String DBUSER = "root";

	//MySQL数据库的连接密码

	public static final String DBPASS = "123456";

	public static void main(String[] args) throws Exception{

		// TODO 自动生成的方法存根

		Connection conn = null;						//数据库连接

		PreparedStatement pstmt = null;	//数据库操作

		ResultSet rs = null;								//保存结果集

		int id = 1;

		String sql = "SELECT name,photo FROM userblob WHERE id=?";

		Class.forName(DBDRIVER);			//加载驱动程序

		//连接MySQL数据库时，要写上连接的用户名和密码

		conn = DriverManager.getConnection(DBURL,DBUSER,DBPASS);

		pstmt = conn.prepareStatement(sql);		//实例化PreparedStatement

		pstmt.setInt(1, id);				//设置查询的id

		rs = pstmt.executeQuery();							//查询

		if(rs.next()){

			String name = rs.getString(1);

			System.out.println("姓名："+name);

			Blob b = rs.getBlob(2);					//读取Ｂlob数据

			FileOutputStream out = null;

			out = new FileOutputStream(new File("/home/common/software/database/photo_copy2.jpg"));

			out.write(b.getBytes(1, (int)b.length()));

			out.close();

		}

		pstmt.close();										//操作关闭

		conn.close();										//数据库关闭

	}

}

Java数据库——处理大数据对象的更多相关文章

  1. java 跨数据库导入大数据

    java 跨数据库导入大数据 /** * java程序跨服务器跨数据库批量导入导出百万级数据 * @param args * @throws Exception */ public static vo ...

  2. Java在处理大数据的时候一些小技巧

    Java在处理大数据的时候一些小技巧 发布时间:2013-05-09 00:00:00 来源:中国IT实验室 作者:佚名   关键字:Java 众所周知,java在处理数据量比较大的时候,加载到内存必 ...

  3. 处理大数据对象clob数据和blob数据

    直接上下代码: package com.learn.jdbc.chap06; import java.io.File; import java.io.FileInputStream; import j ...

  4. 开发入门，学Java还是学大数据？

    经常有人问,我想学习开发,到底是学Java好还是学大数据好?或者是,学习大数据还有必要学Java吗?      依我说,这个提问的标准答案是:两者都学.      先来甩两张图.      一张是腾讯 ...

  5. PDO操作大数据对象

    一般在数据库中,我们保存的都只是 int . varchar 类型的数据,一是因为现代的关系型数据库对于这些内容会有很多的优化,二是大部分的索引也无法施加在内容过多的字段上,比如说 text 类型的字 ...

  6. c#几种数据库的大数据批量插入（SqlServer、Oracle、SQLite和MySql）

    这篇文章主要介绍了c#几种数据库的大数据批量插入(SqlServer.Oracle.SQLite和MySql),需要的朋友可以了解一下. 在之前只知道SqlServer支持数据批量插入,殊不知道Ora ...

  7. java 导出Excel 大数据量，自己经验总结！

    出处: http://lyjilu.iteye.com/ 分析导出实现代码,XLSX支持: /** * 生成<span style="white-space: normal; back ...

  8. 23个适合Java开发者的大数据工具和框架

    转自:https://www.yidianzixun.com/article/0Ff4gqZQ?s=9&appid=yidian&ver=3.8.4&utk=6n9c2z37 ...

  9. Java编码规范之数据对象命名

    数据对象分多种,为方便阅读并区分各数据对象的用途,习惯将数据对象分为以下几类,供参考: 持久对象 PO(persistant object)对象关系映射(ORM)概念的产物,基本上对象的成员变量对应了 ...

随机推荐

  1. MapReduce编程示例

    1.将hadoop插件放入eclipse/plugins目录中 2.eclipse配置hadoop 依赖包目录 Window—Preferences 3.新建Map/Reduce Project项目 ...

  2. Intent传参数

    Intent 是Android 程序中各组件之间进行交互的一种重要方式,它不仅可以指明当前组 件想要执行的动作,还可以在不同组件之间传递数据.Intent 一般可被用于启动活动.启动 服务.以及发送广 ...

  3. android -- 之PopupWindow的使用

    LayoutInflater inflater = (LayoutInflater) getSystemService(LAYOUT_INFLATER_SERVICE); View contentVi ...

  4. 强联通 HDU 2767 3836

    n个点m条边 最少需要几条边变成强连通图 设有a个结点的入读为0, b个结点的出度为0, 则 max{a, b}就是答案. 注意特殊情况: 当原图已经强连通时, 答案是0而不是1. 加一条边少一个入度 ...

  5. CSS3动画属性之Animation

    首先定义一个动画规则: @keyframes mymove { from {top:0px;} to {top:200px;} } @-moz-keyframes mymove /* Firefox ...

  6. Maven-eclipse运行maven命令

    右击项目,点击Run as,如下图: 即可看到有很多现有的maven命令,点击即可运行,并在控制台可以看到运行信息 如果你想运行的maven命令在这里没有找到,点击Maven build创建新的命令, ...

  7. Integer与int的种种比较你知道多少？

    如果面试官问Integer与int的区别:估计大多数人只会说道两点,(1)Ingeter是int的包装类,int的初值为0:(2)Ingeter的 初值为null.但是如果面试官再问一下Integer ...

  8. SQLite3 学习笔记

    1．数据存储方式 Plist(NSArray\NSDictionary) Preference(偏好设置\NSUserDefaults) NSCoding(NSKeyedArchiver\NSkeye ...

  9. Spark 与 MapReduce的区别

    学习参考自 http://spark-internals.books.yourtion.com/markdown/4-shuffleDetails.html 1.  Shuffle read 边 fe ...

  10. 【BZOJ-2095】Bridge 最大流 + 混合图欧拉回路 + 二分

    2095: [Poi2010]Bridges Time Limit: 10 Sec  Memory Limit: 259 MBSubmit: 604  Solved: 218[Submit][Stat ...