java操作Hbase
public class Test {
public Connection connection;
// 用HBaseconfiguration初始化配置信息是会自动加载当前应用的classpath下的hbase-site.xml
public static Configuration configuration = HBaseConfiguration.create();
public Test() throws Exception {
// 当然也可以手动加载配置文件,手动加载配置文件时要调用configuration的addResource方法
// configuration.addResource("hbase-site.xml");
connection = ConnectionFactory.createConnection(configuration);
}
public void createTable(String tableName, String... cf1) throws Exception {
Admin admin = connection.getAdmin();
//HTD需要TableName类型的tableName,创建TableName类型的tableName
TableName tbName = TableName.valueOf(tableName);
//判断表述否已存在,不存在则创建表
if (admin.tableExists(tbName)) {
System.err.println("表" + tableName + "已存在!");
return;
}
//通过HTableDescriptor创建一个HTableDescriptor将表的描述传到createTable参数中
HTableDescriptor HTD = new HTableDescriptor(tbName);
//为描述器添加表的详细参数
for (String cf : cf1) {
// 创建HColumnDescriptor对象添加表的详细的描述
HColumnDescriptor HCD = new HColumnDescriptor(cf);
HTD.addFamily(HCD);
}
//调用createtable方法创建表
admin.createTable(HTD);
}
public void deleteTable(String tableName) throws Exception {
Admin admin = connection.getAdmin();
//通过tableName创建表名
TableName tbName = TableName.valueOf(tableName);
//判断表是否存在,若存在就删除,不存在就退出
if (admin.tableExists(tbName)) {
//首先将表解除占用,否则无法删除
admin.disableTable(tbName);
//调用delete方法
admin.deleteTable(tbName);
System.err.println("表" + tableName + "已删除");
} else {
System.err.println("表" + tableName + "不存在!");
}
}
public void putData() throws Exception {
//通过表名获取tbName
TableName tbname = TableName.valueOf("t1");
//通过connection获取相应的表
Table table = connection.getTable(tbname);
//创建Random对象以作为随机参数
Random random = new Random();
//hbase支持批量写入数据,创建Put集合来存放批量的数据
List<Put> batput = new ArrayList<>();
for (int i = 0; i < 10; i++) {
//实例化put对象,传入行键
Put put = new Put(Bytes.toBytes("rowkey_" + i));
//调用addcolum方法,向f1列簇中添加字段
put.addImmutable(Bytes.toBytes("f1"), Bytes.toBytes("username"), Bytes.toBytes("un_" + i));
put.addImmutable(Bytes.toBytes("f1"), Bytes.toBytes("age"), Bytes.toBytes(random.nextInt(50) + 1));
put.addImmutable(Bytes.toBytes("f1"), Bytes.toBytes("birthday"), Bytes.toBytes("2017" + i));
put.addImmutable(Bytes.toBytes("f1"), Bytes.toBytes("phone"), Bytes.toBytes("phone:" + i));
put.addImmutable(Bytes.toBytes("f1"), Bytes.toBytes("邮箱"), Bytes.toBytes("邮箱:" + i));
//将测试数据添加到list中
batput.add(put);
}
//调用put方法将list中的测试数据写入hbase
table.put(batput);
System.err.println("数据插入完成!");
}
public void getData() throws Exception {
//获取想要查询的表的TableName
TableName tbname = TableName.valueOf("t1");
//通过tbName获得Table对象
Table table = connection.getTable(tbname);
//创建Get的集合以承接查询的条件
List<Get> gets = new ArrayList<Get>();
//循环五次,取前五个测试数据
for (int i = 0; i < 5; i++) {
//就将查询条件放入get对象中
Get get = new Get(Bytes.toBytes("rowkey_" + i));
//将get对象放入聚合
gets.add(get);
}
//调用table.get方法传入查询条件,获得查询的结果的数组
Result[] results = table.get(gets);
//遍历结果数组,利用CellScanner配合cellUtil获得对应的数据
for (Result result : results) {
//调用result.cellscanner创建scanner对象
CellScanner cellScanner = result.cellScanner();
//遍历结果集,取出查询结果,
//如果存在下一个cell则advandce方法返回true,且current方法会返回一个有效的cell,可以当作循环条件
while (cellScanner.advance()) {
//current方法返回一个有效的cell
Cell cell = cellScanner.current();
//使用CellUtil调用相应的方法获取想用的数据,并利用Bytes.toString方法将结果转换为string输出
String family = Bytes.toString(CellUtil.cloneFamily(cell));
String qualify = Bytes.toString(CellUtil.cloneQualifier(cell));
String rowkey = Bytes.toString(CellUtil.cloneRow(cell));
String value = Bytes.toString(CellUtil.cloneValue(cell));
System.err.println(family + "_" + qualify + "_" + rowkey + "_" + value);
}
}
}
public void getData1() throws Exception {
TableName tbname = TableName.valueOf("bd14:fromJava");
Table table = connection.getTable(tbname);
List<Get> gets = new ArrayList<>();
for (int i = 0; i < 5; i++) {
Get get = new Get(Bytes.toBytes("rowkey_" + i));
gets.add(get);
}
Result[] results = table.get(gets);
for (Result result : results) {
NavigableMap<byte[], NavigableMap<byte[], NavigableMap<Long, byte[]>>> map = result.getMap();
for (byte[] cf : map.keySet()) {
NavigableMap<byte[], NavigableMap<Long, byte[]>> valueWithColumnQualify = map.get(cf);
for (byte[] columnQualify : valueWithColumnQualify.keySet()) {
NavigableMap<Long, byte[]> valueWithTimestamp = valueWithColumnQualify.get(columnQualify);
for (Long ts : valueWithTimestamp.keySet()) {
byte[] value = valueWithTimestamp.get(ts);
String rowKey = Bytes.toString(result.getRow());
String columnFamily = Bytes.toString(cf);
String columnqualify = Bytes.toString(columnQualify);
String timestamp = new Date(ts) + "";
String values = Bytes.toString(columnQualify);
System.out.println(rowKey + "-" + columnFamily + "-" + columnqualify + "-" + timestamp + "-" + values);
}
}
}
}
}
public void getData2() throws Exception {
TableName tbname = TableName.valueOf("bd14:fromJava");
Table table = connection.getTable(tbname);
List<Get> gets = new ArrayList<>();
for (int i = 0; i < 5; i++) {
Get get = new Get(Bytes.toBytes("rowkey_" + i));
gets.add(get);
}
Result[] results = table.get(gets);
//遍历结果对象results
for (Result result : results) {
//嵌套遍历result获取cell
for (Cell cell : result.listCells()) {
//使用CellUtil工具类直接获取cell中的数据
String family = Bytes.toString(CellUtil.cloneFamily(cell));
String qualify = Bytes.toString(CellUtil.cloneQualifier(cell));
String rowkey = Bytes.toString(CellUtil.cloneRow(cell));
String value = Bytes.toString(CellUtil.cloneValue(cell));
System.err.println(family + "_" + qualify + "_" + rowkey + "_" + value);
}
}
}
public void updateData(String tableName, String rowKey, String family, String columkey, String updatedata) throws Exception {
//hbase中更新数据同样采用put方法,在相同的位置put数据,则在查询时只会返回时间戳较新的数据
//且在文件合并时会将时间戳较旧的数据舍弃
Put put = new Put(Bytes.toBytes(rowKey));
//将新数据添加到put中
put.addImmutable(Bytes.toBytes(family), Bytes.toBytes(columkey), Bytes.toBytes(updatedata));
Table table = connection.getTable(TableName.valueOf(tableName));
//将put写入HBase
table.put(put);
}
//删除某条记录
public void deleteData(String tableName,String rowKey,String family, String columkey) throws Exception{
Table table = connection.getTable(TableName.valueOf(tableName));
//创建delete对象
Delete deletData= new Delete(Bytes.toBytes(rowKey));
//将要删除的数据的准确坐标添加到对象中
deletData.addColumn(Bytes.toBytes(family), Bytes.toBytes(columkey));
//删除表中数据
table.delete(deletData);
}
//删除一行数据
public void deleteRow(String tableName,String rowKey) throws Exception{
Table table = connection.getTable(TableName.valueOf(tableName));
//通过行键删除一整行的数据
Delete deletRow= new Delete(Bytes.toBytes(rowKey));
table.delete(deletRow);
}
public static void main(String[] args) {
try {
Test test = new Test();
test.createTable("t1", "f1");
// test.putData();
} catch (Exception e) {
e.printStackTrace();
}
}
}
java操作Hbase的更多相关文章
- Hbase深入学习(六) Java操作HBase
Hbase深入学习(六) ―― Java操作HBase 本文讲述如何用hbase shell命令和hbase java api对hbase服务器进行操作. 先看以下读取一行记录hbase是如何进行工作 ...
- Java操作hbase总结
用过以后,总得写个总结,不然,就忘喽. 一.寻找操作的jar包. java操作hbase,首先要考虑到使用hbase的jar包. 因为咱装的是CDH5,比较方便,使用SecureCRT工具,远程连接到 ...
- java操作Hbase实例
所用HBase版本为1.1.2,hadoop版本为2.4 /* * 创建一个students表,并进行相关操作 */ import java.io.IOException; import java.u ...
- 错误: 找不到或无法加载主类 java操作hbase出错
用java操作hbase 利用maven引入hbase包后发现无法启动程序,然后网上说是包的冲突. 我引入了下面三个包然后程序就不能运行了. <dependency> <groupI ...
- Java 操作 HBase 教程
Java 操作 HBase 教程 一.简介 二.hbase-client 引入 三.连接操作 四.表操作 五.运行测试 相关博文原文地址: 博客园:美码师:HBase(2) Java 操作 HBase ...
- 【hbase】——Java操作Hbase进行建表、删表以及对数据进行增删改查,条件查询
1.搭建环境 新建JAVA项目,添加的包有: 有关Hadoop的hadoop-core-0.20.204.0.jar 有关Hbase的hbase-0.90.4.jar.hbase-0.90.4-tes ...
- (转)Java操作Hbase进行建表、删表以及对数据进行增删改查,条件查询
1.搭建环境 新建JAVA项目,添加的包有: 有关Hadoop的hadoop-core-0.20.204.0.jar 有关Hbase的hbase-0.90.4.jar.hbase-0.90.4-tes ...
- Java操作Hbase进行建表、删表以及对数据进行增删改查,条件查询
1.搭建环境 新建JAVA项目,添加的包有: 有关Hadoop的hadoop-core-0.20.204.0.jar 有关Hbase的hbase-0.90.4.jar.hbase-0.90.4-tes ...
- HBase篇--HBase操作Api和Java操作Hbase相关Api
一.前述. Hbase shell启动命令窗口,然后再Hbase shell中对应的api命令如下. 二.说明 Hbase shell中删除键是空格+Ctrl键. 三.代码 1.封装所有的API pa ...
- HBASE学习d端口master:16010(java操作hbase)https://www.cnblogs.com/junrong624/p/7323483.html
HBase提示已创建表,但是list查询时,却显示表不存在. https://blog.csdn.net/liu16659/article/details/80216085 下载网址 http://a ...
随机推荐
- js Dom 编程
1. 节点及其类型: 1). 元素节点 2). 属性节点: 元素的属性, 可以直接通过属性的方式来操作. 3). 文本节点: 是元素节点的子节点, 其内容为文本. 2. 在 html 文档的 ...
- cordic
cordic里向量旋转得到新向量,利用的是旋转矩阵 摘自百度百科维基百科 旋转矩阵(Rotation matrix)是在乘以一个向量的时候改变向量的方向但不改变大小的效果的矩阵.旋转矩阵不包括反演,它 ...
- Spark_RDD之基本RDD操作
1.基本转化操作 1.1最常用的两个转化操作时map()和filter(). map()接收一个函数,把这个函数用于RDD中的每个元素,将函数作用之后的结果作为结果RDD中元素的值. filte ...
- BZOJ2124 等差子序列(树状数组+哈希)
容易想到一种暴力的做法:枚举中间的位置,设该位置权值为x,如果其两边存在权值关于x对称即合法. 问题是如何快速寻找这个东西是否存在.考虑仅将该位置左边出现的权值标1.那么若在值域上若关于x对称的两权值 ...
- LOJ116 有源汇有上下界最大流(上下界网络流)
考虑有源汇上下界可行流:由汇向源连inf边,那么变成无源汇图,按上题做法跑出可行流.此时该inf边的流量即为原图中该可行流的流量.因为可以假装把加上去的那些边的流量放回原图. 此时再从原来的源向原来的 ...
- BZOJ5334 [TJOI2018] 数学计算 【线段树分治】
题目分析: 大概是考场上的签到题.首先mod不是质数,所以不能求逆元.注意到有加入操作和删除操作.一个很典型的想法就是线段树分治.建立时间线段树然后只更改有影响的节点,最后把所有标记下传.时间复杂度是 ...
- postgresql c library use
#include <stdio.h> #include <libpq-fe.h> int main() { int lib_ver = PQlibVersion(); prin ...
- 修改 wordpress 后台管理员登录地址
拷贝根目录下的 wp-login.php文件命名为wp-login.php.backup,把原文件重命名为managewp.phpsed -i "s/wp-login.php/managew ...
- cf983E NN Country (倍增+dfs序+树状数组)
首先可以求出从某点做$2^k$次车能到的最浅的点,这个只要dfs一下,把它的孩子能到的最浅的点更新过来就可以 然后倍增地往上跳,不能跳到lca的上面,记录坐车的次数ans 此时有三种情况(设最远能跳到 ...
- UVALive - 6440(模拟)
题目链接:https://vjudge.net/contest/241341#problem/G 题目大意:输入一个N,n次操作.对于第一种操作增加一个病人,告诉病人的t0,st0,r.第二种操作,在 ...