HBase详解(02) - HBase-2.0.5安装

HBase详解(02) - HBase-2.0.5安装

HBase安装环境准备

• Zookeeper安装

Zookeeper安装参考《Zookeeper详解(02) - zookeeper安装部署-单机模式-集群模式》

启动Zookeeper集群

bin/zkServer.sh start

• Hadoop安装

Hadoop安装参考《Hadoop详解(02) - Hadoop3.1.3集群运行环境搭建》

启动Hadoop集群

sbin/start-dfs.sh

sbin/start-yarn.sh

Hbase安装

• 安装包下载

HBase官网：https://hbase.apache.org/

Hbase安装包历史版本下载地址：https://archive.apache.org/dist/hbase/

hbase-2.0.5下载地址：https://archive.apache.org/dist/hbase/2.0.5/hbase-2.0.5-bin.tar.gz

• 上传解压

将Hbase安装包hbase-2.0.5-bin.tar.gz上传到服务器的/opt/software目录

解压：

[hadoop@hadoop102 software]$ tar -zxvf hbase-2.0.5-bin.tar.gz -C /opt/module/

重命名

[hadoop@hadoop102 software]$ cd /opt/module/

[hadoop@hadoop102 module]$ mv hbase-2.0.5/ hbase

• 修改配置文件hbase-env.sh

[hadoop@hadoop102 module]$ cd hbase/conf/

[hadoop@hadoop102 conf]$ vi hbase-env.sh

修改内容：

#使用独立的Zookeeper集群，找到如下内容，放开注释，将值修改为false

export HBASE_MANAGES_ZK=false

• 修改配置文件hbase-site.xml

[hadoop@hadoop102 conf]$ vi hbase-site.xml

添加如下内容：

<configuration>

<property>

<name>hbase.rootdir</name>

<value>hdfs://hadoop102:9820/hbase</value>

</property>

<property>

<name>hbase.cluster.distributed</name>

<value>true</value>

</property>

<property>

<name>hbase.zookeeper.quorum</name>

<value>hadoop102,hadoop103,hadoop104</value>

</property>

</configuration>

注意：hbase.rootdir配置的端口为Hadoop namenode端口，即与hadoop中core-site.xml的fs.defaultFS值配置的端口一致

• 修改regionservers

[hadoop@hadoop102 conf]$ vi regionservers

删除原来的内容，添加如下内容，表示需要启动的Region Server节点

hadoop102

hadoop103

hadoop104

• 分发安装包

将HBase安装包分发到其他集群

[hadoop@hadoop102 module]$ scp -r hbase/ hadoop103:/opt/module/

[hadoop@hadoop102 module]$ scp -r hbase/ hadoop104:/opt/module/

• 配置环境变量

[hadoop@hadoop102 module]$ sudo vi /etc/profile

在文件末尾添加如下内容

#HBASE_HOME

export HBASE_HOME=/opt/module/hbase

export PATH=$PATH:$HBASE_HOME/bin

注意：在hadoop103，hadoop104上也需要配置HBase的环境变量

• 启动Hbase集群

[hadoop@hadoop102 hbase]$ cd /opt/module/hbase/

[hadoop@hadoop102 hbase]$ bin/start-hbase.sh

停止服务：

[hadoop@hadoop102 hbase]$ bin/stop-hbase.sh

• 查看Hbase UI页面

浏览器中访问http://hadoop102:16010

提示：如果集群之间的节点时间不同步，会导致regionserver无法启动，抛出ClockOutOfSyncException异常。

解决方法：

方法一：同步时间服务

方法二：设置属性：hbase.master.maxclockskew设置更大的值

<property>

<name>hbase.master.maxclockskew</name>

<value>180000</value>

<description>Time difference of regionserver from master</description>

</property>

• 单点启动命令

bin/hbase-daemon.sh start master

bin/hbase-daemon.sh start regionserver

HMaster高可用(可选)

在HBase中HMaster负责监控HRegionServer的生命周期，均衡RegionServer的负载，如果HMaster挂掉了，那么整个HBase集群将陷入不健康的状态，并且此时的工作状态并不会维持太久。所以HBase支持对HMaster的高可用配置。

• 关闭HBase集群（如果没有启动Hbase集群则跳过此步）

[hadoop@hadoop102 hbase]$ bin/stop-hbase.sh

• 在conf目录下创建backup-masters文件

[hadoop@hadoop102 hbase]$ touch conf/backup-masters

• 在backup-masters文件中配置高可用HMaster节点

[hadoop@hadoop102 hbase]$ echo hadoop103 > conf/backup-masters

• 将conf目录scp到其他节点

[hadoop@hadoop102 hbase]$ scp -r conf/ hadoop103:/opt/module/hbase/

[hadoop@hadoop102 hbase]$ scp -r conf/ hadoop104:/opt/module/hbase/

• 启动HBase集群

[hadoop@hadoop102 hbase]$ bin/start-hbase.sh

• 打开页面测试查看

http://hadooo102:16010

访问备份节点的HMaster：http://hadoop103:16010

HBase Shell操作

基本操作

1．进入HBase客户端命令行

[hadoop@hadoop102 hbase]$ bin/hbase shell

2．查看帮助命令

hbase(main):001:0> help

namespace的操作

1．查看当前Hbase中有哪些namespace

hbase(main):002:0> list_namespace

NAMESPACE

default(创建表时未指定命名空间的话默认在default下)

hbase(系统使用的，用来存放系统相关的元数据信息等，勿随便操作)

2．创建namespace

hbase(main):010:0> create_namespace "test"

hbase(main):010:0> create_namespace "test01", {"author"=>"wyh", "create_time"=>"2020-03-10 08:08:08"}

3.查看namespace

hbase(main):010:0> describe_namespace "test01"

4.修改namespace的信息（添加或者修改属性）

hbase(main):010:0> alter_namespace "test01", {METHOD => 'set', 'author' => 'weiyunhui'}

添加或者修改属性:

alter_namespace 'ns1', {METHOD => 'set', 'PROPERTY_NAME' => 'PROPERTY_VALUE'}

删除属性:

alter_namespace 'ns1', {METHOD => 'unset', NAME => ' PROPERTY_NAME '}

5.删除namespace

hbase(main):010:0> drop_namespace "test01"

注意: 要删除的namespace必须是空的，其下没有表。

表的操作

0．查看当前数据库中有哪些表

hbase(main):002:0> list

1．创建表

hbase(main):002:0> create 'student','info'

2．插入数据到表

hbase(main):003:0> put 'student','1001','info:sex','male'

hbase(main):004:0> put 'student','1001','info:age','18'

hbase(main):005:0> put 'student','1002','info:name','Janna'

hbase(main):006:0> put 'student','1002','info:sex','female'

hbase(main):007:0> put 'student','1002','info:age','20'

3．扫描查看表数据

hbase(main):008:0> scan 'student'

hbase(main):009:0> scan 'student',{STARTROW => '1001', STOPROW => '1001'}

hbase(main):010:0> scan 'student',{STARTROW => '1001'}

4．查看表结构

hbase(main):011:0> describe 'student'

5．更新指定字段的数据

hbase(main):012:0> put 'student','1001','info:name','Nick'

hbase(main):013:0> put 'student','1001','info:age','100'

6．查看"指定行"或"指定列族:列"的数据

hbase(main):014:0> get 'student','1001'

hbase(main):015:0> get 'student','1001','info:name'

7．统计表数据行数

hbase(main):021:0> count 'student'

8．删除数据

删除某rowkey的全部数据：

hbase(main):016:0> deleteall 'student','1001'

删除某rowkey的某一列数据：

hbase(main):017:0> delete 'student','1002','info:sex'

9．清空表数据

hbase(main):018:0> truncate 'student'

提示：清空表的操作顺序为先disable，然后再truncate。

10．删除表

首先需要先让该表为disable状态：

hbase(main):019:0> disable 'student'

然后才能drop这个表：

hbase(main):020:0> drop 'student'

提示：如果直接drop表，会报错：ERROR: Table student is enabled. Disable it first.

11．变更表信息

将info列族中的数据存放3个版本：

hbase(main):022:0> alter 'student',{NAME=>'info',VERSIONS=>3}

hbase(main):022:0> get 'student','1001',{COLUMN=>'info:name',VERSIONS=>3}