linux 下通过过 hbase 的Java api 操作hbase
hbase版本:0.98.5
hadoop版本:1.2.1
使用自带的zk
本文的内容是在集群中创建java项目调用api来操作hbase,主要涉及对hbase的创建表格,删除表格,插入数据,删除数据,查询一条数据,查询所有数据等操作。
具体流程如下:
1.创建项目
2.获取jar包到项目的lib目录下(这边试用的事hbase 0.98 lib目录下的所有jar包)
3.编写java程序
4.编写ant脚本
package test2;
import java.util.ArrayList;
import java.util.List; import org.apache.hadoop.fs.Path;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.Cell;
import org.apache.hadoop.hbase.CellUtil;
import org.apache.hadoop.hbase.HBaseConfiguration;
import org.apache.hadoop.hbase.HColumnDescriptor;
import org.apache.hadoop.hbase.HTableDescriptor;
import org.apache.hadoop.hbase.TableName;
import org.apache.hadoop.hbase.client.Delete;
import org.apache.hadoop.hbase.client.Get;
import org.apache.hadoop.hbase.client.HBaseAdmin;
import org.apache.hadoop.hbase.client.HConnection;
import org.apache.hadoop.hbase.client.HConnectionManager;
import org.apache.hadoop.hbase.client.HTable;
import org.apache.hadoop.hbase.client.Put;
import org.apache.hadoop.hbase.client.Result;
import org.apache.hadoop.hbase.client.ResultScanner;
import org.apache.hadoop.hbase.client.Scan; public class TestHBase { private HBaseAdmin admin = null;
private Configuration conf = null; public TestHBase() throws Exception
{
conf = HBaseConfiguration.create();
conf.addResource(new Path("/home/work/hbase_dev/test2/lib/hbase-site.xml"));
//conf.set("hbase.zookeeper.quorum", "10.57.90.19");
//conf.set("hbase.zookeeper.property.clientPort", "2181");
admin = new HBaseAdmin(conf);
} public void createTable (String tableName , String[] columnFamily) throws Exception
{
if (admin.tableExists(tableName))
{
System.out.println(tableName + "已存在");
return ;
//System.exit(0);
} HTableDescriptor tableDescriptor = new HTableDescriptor(TableName.valueOf(tableName)); for (String colunm : columnFamily)
{
tableDescriptor.addFamily(new HColumnDescriptor(colunm));
} admin.createTable(tableDescriptor);
System.out.println("Create table successfully..");
} public boolean deleteTable (String tableName)
{
try {
if(admin.tableExists(tableName))
{
admin.disableTable(tableName);
admin.deleteTable(tableName);
System.out.println("drop table " + tableName);
}
return true;
} catch (Exception e) {
System.out.println("删除" + tableName + "失败");
return false;
}
} public List getAllTables()
{
List<String> tables = null;
if (admin != null)
{
try{
HTableDescriptor[] allTables = admin.listTables();
if(allTables.length > 0)
{
tables = new ArrayList<String>();
} for (HTableDescriptor tableDesc : allTables)
{
tables.add(tableDesc.getNameAsString());
System.out.println(tableDesc.getNameAsString());
}
}catch(Exception ex)
{
ex.printStackTrace();
}
} return tables;
} public boolean addOneRecord (String tableName , String key , String family , String column
, byte[] dataIn) throws Exception
{
HConnection connection = HConnectionManager.createConnection(conf);
//HTable table = new HTable(hbaseConf, tableName);
HTable table = (HTable)connection.getTable(tableName);
Put put = new Put(key.getBytes());
put.add(family.getBytes(), column.getBytes(), dataIn);
try {
table.put(put);
System.out.println("插入数据条 " + key + "成功");
return true;
} catch (Exception e) {
// TODO: handle exception
System.out.println("插入数据条 " + key + "失败");
return false;
}
} public void getValueFromKey (String tableName , String key)
{
try{
HConnection conn = HConnectionManager.createConnection(conf);
HTable table = (HTable) conn.getTable(tableName);
Get get = new Get(key.getBytes());
Result rs = table.get(get);
if (rs.rawCells().length == 0)
{
System.out.println("不存在关键字为" + key + "的行...");
}
else
{
for (Cell cell : rs.rawCells())
{
System.out.println(new String(CellUtil.cloneFamily(cell)) +
" " + new String(CellUtil.cloneQualifier(cell)) + " " + new String(CellUtil.cloneValue(cell)));
}
}
}
catch(Exception ex)
{
System.out.println("查询失败");
ex.printStackTrace();
}
} public void getAllData(String tableName) throws Exception
{
HConnection conn = HConnectionManager.createConnection(conf);
HTable table = (HTable) conn.getTable(tableName);
Scan scan = new Scan();
ResultScanner rs = table.getScanner(scan);
for (Result result : rs)
{
for (Cell cell : result.rawCells())
{
System.out.println("RowName: " + new String(CellUtil.cloneRow(cell)) + " ");
System.out.println("Timetamp: " + cell.getTimestamp() + " ");
System.out.println("Column family: " + new String(CellUtil.cloneFamily(cell)) + " ");
System.out.println("row name: " + new String(CellUtil.cloneQualifier(cell)) + " ");
System.out.println("value: " + new String(CellUtil.cloneValue(cell)) + " ");
}
}
} public void deleteRecord(String tableName , String key)
{
try
{
HConnection conn = HConnectionManager.createConnection(conf);
HTable table = (HTable)conn.getTable(tableName);
Delete delete = new Delete(key.getBytes()); table.delete(delete);
System.out.println("删除" + key +"成功...");
}
catch(Exception ex)
{
System.out.println("删除数据失败...");
ex.printStackTrace();
}
} public static void main(String[] args) throws Exception{
// TODO Auto-generated method stub
String[] column = {"family1" , "family2"};
try {
TestHBase hbase = new TestHBase();
hbase.deleteTable("students");
hbase.createTable("students", column);
//hbase.getAllData("scores");
hbase.addOneRecord("students", "id1", "family1", "name", "Jack".getBytes());
hbase.addOneRecord("students", "id1", "family1", "grade", "gaosan".getBytes());
//hbase.getAllTables();
//hbase.getAllData("students");
hbase.getValueFromKey("students", "id1");
hbase.deleteRecord("students", "id1");
hbase.addOneRecord("students", "id2", "family1", "name", "Holen".getBytes());
hbase.getValueFromKey("students", "id2");
} catch (Exception e) {
// TODO: handle exception
e.printStackTrace();
} } }
ant脚本
<?xml version="1.0"?>
<project name="HBaseProject" default="run" basedir=".">
<property name="src.dir" value="src" />
<property name="report.dir" value="report" />
<property name="classes.dir" value="classes" />
<property name="lib.dir" value="lib" />
<property name="dist.dir" value="dist" />
<property name="doc.dir" value="doc"/>
<path id="master-classpath">
<fileset file="${lib.dir}/*.jar" />
<pathelement path="${classes.dir}"/>
</path> <path id="run.path">
<path path="${classes.dir}"/>
<path refid="master-classpath" />
</path>
<target name="init" depends="clean">
<mkdir dir="${classes.dir}"/>
<mkdir dir="${dist.dir}"/>
</target>
<target name="compile" depends="init" description="compile the source files"> <javac srcdir="${src.dir}" destdir="${classes.dir}" target="1.6" includeantruntime="false">
<classpath refid="master-classpath"/>
</javac>
</target> <target name="run" depends="compile">
<java classname="test2.TestHBase" classpathref="run.path" fork="true" >
</java>
</target> <target name="pack" depends="compile" description="make .jar file">
<mkdir dir="${dist.dir}" />
<jar destfile="${dist.dir}/hbaseproject.jar" basedir="${classes.dir}">
<exclude name="**/*Test.*" />
<exclude name="**/Test*.*" />
</jar>
</target> <target name="clean" description="clean the project">
<delete dir="${classes.dir}"></delete>
<delete dir="${dist.dir}"></delete>
</target>
</project>
最后把项目放在集群中,进入项目的根目录,执行命令:ant run
即可运行!
linux 下通过过 hbase 的Java api 操作hbase的更多相关文章
- HBase 6、用Phoenix Java api操作HBase
开发环境准备:eclipse3.5.jdk1.7.window8.hadoop2.2.0.hbase0.98.0.2.phoenix4.3.0 1.从集群拷贝以下文件:core-site.xml.hb ...
- Hbase框架原理及相关的知识点理解、Hbase访问MapReduce、Hbase访问Java API、Hbase shell及Hbase性能优化总结
转自:http://blog.csdn.net/zhongwen7710/article/details/39577431 本blog的内容包含: 第一部分:Hbase框架原理理解 第二部分:Hbas ...
- Java API 操作HBase Shell
HBase Shell API 操作 创建工程 本实验的环境实在ubuntu18.04下完成,首先在改虚拟机中安装开发工具eclipse. 然后创建Java项目名字叫hbase-test 配置运行环境 ...
- HBase的Java Api连接失败的问题及解决方法
分布式方式部署的HBase,启动正常,Shell操作正常,使用HBase的Java Api操作时总是连接失败,信息如下: This server is in the failed servers li ...
- hadoop2-HBase的Java API操作
Hbase提供了丰富的Java API,以及线程池操作,下面我用线程池来展示一下使用Java API操作Hbase. 项目结构如下: 我使用的Hbase的版本是 hbase-0.98.9-hadoop ...
- 5 hbase-shell + hbase的java api
本博文的主要内容有 .HBase的单机模式(1节点)安装 .HBase的单机模式(1节点)的启动 .HBase的伪分布模式(1节点)安装 .HBase的伪分布模式(1节点)的启动 .HBase ...
- hbase-shell + hbase的java api
本博文的主要内容有 .HBase的单机模式(1节点)安装 .HBase的单机模式(1节点)的启动 .HBase的伪分布模式(1节点)安装 .HBase的伪分布模式(1节点)的启动 .HBas ...
- Linux 下报错:A Java RunTime Environment (JRE) or Java Development Kit (JDK) must解决方案
一.报错环境:在Linux mint下,前几天还用得很好的的eclipse,今天开机不知为什么这样. Linux 下报错:A Java RunTime Environment (JRE) or Jav ...
- MongoDB Java API操作很全的整理
MongoDB 是一个基于分布式文件存储的数据库.由 C++ 语言编写,一般生产上建议以共享分片的形式来部署. 但是MongoDB官方也提供了其它语言的客户端操作API.如下图所示: 提供了C.C++ ...
随机推荐
- CC2530串口工作
前言 嘿嘿,我只是写给我自己的一篇博客,今天研究了一天的CC2530,感觉好累,虽然是已经落伍的技术了,但是我觉得不要小看它,还是能够学到点东西的,随着学习的深入,渐渐感觉有点突破的苗头了!哈哈 CC ...
- 我与ARM的那些事儿2JINLK烧录nor flash
前言 最近在研究mini2440的友善之臂,但是我拿着的是实验室早期买的开发板,在做裸机开发的过程中老是不能很好地使用最新版的minitools进行烧录,因而各种不爽,因为生成了bin文件不能很好地传 ...
- Web开发者的福利 30段超实用CSS代码
1.花式连字符(&) 这个类应该在span元素里使用,并且里面包括&字符.它使用经典的serif字体和斜体来增强&符号. .amp { font-family: Baskerv ...
- Spring---AOP与DI的初步理解
依赖注入 依赖注入并没有我们听上去那么复杂,在项目中应用依赖注入,会使代码变的异常简单,更易于理解和测试. 任何一个有实际意义的应用,都是多个类组成,这些类之间相互协作,来实现特定的业务逻辑,通常,每 ...
- Web开发技术选型之Java与PHP
PHP与J2EE的对比 网上有很多关于PHP与J2EE之间的对比,细观无非以下几点: 1.语言特征 PHP为脚本语言,解释型语言,弱类型,专为Web开发打造.Java为C语言系编程语言,编译型,强类型 ...
- 初识JSP,第一天
1.什么JSP java Server Page java 服务端的页面,它和servlet 一样可以提供动态的html 响应. 不同的是 servlet 以 java 代码 为主 jsp 以html ...
- JS获取当前屏幕宽高
Javascript: 网页可见区域宽: document.body.clientWidth网页可见区域高: document.body.clientHeight网页可见区域宽: document.b ...
- 使用Tensorflow和MNIST识别自己手写的数字
#!/usr/bin/env python3 from tensorflow.examples.tutorials.mnist import input_data mnist = input_data ...
- groovy运行程序和类型推断
在 Java 中,如果要声明一个 String 变量,则必须输入: String value = "Hello World"; 等号右侧的字符已经表明 value 的类型是 Str ...
- 阿里巴巴的数据池DRUID
使用了阿里巴巴的数据池管理: 监控DB池连接和SQL的执行情况 https://github.com/alibaba/druid/wiki/常见问题 https://www.cnblogs.com ...