Hadoop生态圈-hbase介绍-伪分布式安装

                                    作者:尹正杰

版权声明:原创作品,谢绝转载!否则将追究法律责任。

一.HBase简介

  HBase是一个分布式的,持久的,强一致性的存储系统,具有近似最优的写性能(能使I/O利用率达到饱和)进而出色的读性能,它充分利用了磁盘空间,支持特定列族切换可选压缩算法。

  HBase继承自谷歌公司的 BigTable模型,只考虑单一的索引,类似于RDBMS的主键,提供了服务器端钩子,可以实施灵活的辅助索引解决方案。此外,它还提供了过滤器功能,减少了网络传输的数据量。

  HBase并未将说明性查询语言作为核心实现的一部分,对事物的支持也有限。但行原子性和“读-修改-写”操作在实现中弥补了这个缺陷,它们覆盖了大部分的使用场景并消除了在其他系统中经历过的死锁,等待问题。

  HBase在进行负载均衡和故障恢复时对客户端时透明的。在生产环境中,系统的可扩展性体现在系统自动伸缩的过程中。更改数据并不涉及重新全量负载均衡和数据重分区,但整个处理过程完全是自动化的。

二.HBase伪分布式搭建

1>.下载HBase安装包(本次搭建版本是hbase-1.2.6)

  官网下载地址:http://archive.apache.org/dist/hbase/

2>.解压

[yinzhengjie@s101 data]$ tar -zxf hbase-1.2.-bin.tar.gz -C /soft/
[yinzhengjie@s101 data]$

3>.创建符号链接

[yinzhengjie@s101 data]$ ln -s /soft/hbase-1.2./ /soft/hbase
[yinzhengjie@s101 data]$

4>.配置环境变量并使其生效

[yinzhengjie@s101 data]$ tail - /etc/profile
#ADD HBASE
HBASE_HOME=/soft/hbase
PATH=$PATH:$HBASE_HOME/bin
[yinzhengjie@s101 data]
[yinzhengjie@s101 data]$ source /etc/profile
[yinzhengjie@s101 data]

5>.修改hbase环境变量脚本

[yinzhengjie@s101 data]$ grep -v ^# /soft/hbase/conf/hbase-env.sh | grep JAVA_HOME
export JAVA_HOME=/soft/jdk/
[yinzhengjie@s101 data]$ grep -v ^# /soft/hbase/conf/hbase-env.sh | grep HBASE_MANAGES_ZK
export HBASE_MANAGES_ZK=flase
[yinzhengjie@s101 data]$

6>.修改hbase-site.xml

[yinzhengjie@s101 data]$ more /soft/hbase/conf/hbase-site.xml
<?xml version="1.0"?>
<configuration>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.rootdir</name>
<value>hdfs://mycluster/user/hbase</value>
</property>
<property>
<name>hbase.zookeeper.property.dataDir</name>
<value>/home/yinzhengjie/zookeeper</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>s102:,s103:,s104:</value>
</property>
</configuration>
[yinzhengjie@s101 data]$

7>.启动hbase

[yinzhengjie@s101 data]$ start-hbase.sh
starting master, logging to /soft/hbase/bin/../logs/hbase-yinzhengjie-master-s101.out
Java HotSpot(TM) -Bit Server VM warning: ignoring option PermSize=128m; support was removed in 8.0
Java HotSpot(TM) -Bit Server VM warning: ignoring option MaxPermSize=128m; support was removed in 8.0
starting regionserver, logging to /soft/hbase/bin/../logs/hbase-yinzhengjie--regionserver-s101.out
[yinzhengjie@s101 data]

8>.查看进程是否启动

[yinzhengjie@s101 data]$ jps
HMaster ------->
NameNode
Jps
HRegionServer ------->
DFSZKFailoverController
ResourceManager
[yinzhengjie@s101 data]$

9>.WEB UI查看

Hadoop生态圈-hbase介绍-伪分布式安装的更多相关文章

  1. Hadoop生态圈-hbase介绍-完全分布式搭建

    Hadoop生态圈-hbase介绍-完全分布式搭建 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任.

  2. Hadoop + Hive + HBase + Kylin伪分布式安装

    问题导读 1. Centos7如何安装配置? 2. linux网络配置如何进行? 3. linux环境下java 如何安装? 4. linux环境下SSH免密码登录如何配置? 5. linux环境下H ...

  3. hadoop 2.7.3伪分布式安装

    hadoop 2.7.3伪分布式安装 hadoop集群的伪分布式部署由于只需要一台服务器,在测试,开发过程中还是很方便实用的,有必要将搭建伪分布式的过程记录下来,好记性不如烂笔头. hadoop 2. ...

  4. centos 7下Hadoop 2.7.2 伪分布式安装

    centos 7 下Hadoop 2.7.2 伪分布式安装,安装jdk,免密匙登录,配置mapreduce,配置YARN.详细步骤如下: 1.0 安装JDK 1.1 查看是否安装了openjdk [l ...

  5. Hbase的伪分布式安装

    Hbase安装模式介绍 单机模式 1> Hbase不使用HDFS,仅使用本地文件系统 2> ZooKeeper与Hbase运行在同一个JVM中 分布式模式– 伪分布式模式1> 所有进 ...

  6. hadoop 0.20.2伪分布式安装详解

    adoop 0.20.2伪分布式安装详解 hadoop有三种运行模式: 伪分布式不需要安装虚拟机,在同一台机器上同时启动5个进程,模拟分布式. 完全分布式至少有3个节点,其中一个做master,运行名 ...

  7. HBase的伪分布式安装(原创)

    准备工作: 1)安装了伪分布式hadoop:参照http://blog.csdn.net/zolalad/article/details/11472207 2)修改已安装好的hadoop配置文件: a ...

  8. 第二章 伪分布式安装hadoop hbase

    安装单机模式的hadoop无须配置,在这种方式下,hadoop被认为是一个单独的java进程,这种方式经常用来调试.所以我们讲下伪分布式安装hadoop. 我们继续上一章继续讲解,安装完先试试SSH装 ...

  9. Hbase伪分布式安装

    前面的文章已经讲过hadoop伪分布式安装,这里直接介绍hbase伪分布式安装. 1. 下载hbase 版本hbase 1.2.6 2. 解压hbase 3. 修改hbase-env.sh 新增如下内 ...

随机推荐

  1. Spring MVC controller的方法返回值

    ModeAndView 可以在构造时确定需要跳转的页面也可以通过setViewName方法来确定需要跳转的页面 String 指定返回页面的视图名称,页面跳转,如果加了@ResponseBody注解, ...

  2. No.100_第一次团队会议

    任务的确立 这次会议,我们的主要目标是确定任务: 我们的任务有以下几个选择: 学霸网站,这个项目拥有以前的前端代码,我们再使用Django后端服务.上手难度较低,环境较好. 多平台时间管理软件. 安卓 ...

  3. java第三次实验报告

    北京电子科技学院(BESTI) 实验报告 课程: Java程序设计 班级: 1352 姓名: 池彬宁 学号: 20135212 成绩: 指导教师: 娄嘉鹏 实验日期: 2015.6.3 实验密级: 无 ...

  4. My Sql数据库设置环境变量和字符集

    一.踩坑背景 之前开发中一直用的是sql  server 数据库,最近接到公司一个老的项目,用的my sql数据库做的,功能做了一大部分,现在客户要求对原程序和数据库进行服务器的迁移工作.产品经理给出 ...

  5. <s:action>的一些用法

    Action标签,顾名思义,是用来调用Action的标签,在JSP中页面中,可以具体指定某一命名空间中的某一Action.而标签的主体用于显示及渲染Actionr的处理结果. action标签有如下几 ...

  6. 其实servlet就是一种mvc设计思想的一种实现

    看图,不说话

  7. WPF里面制作圆角文本框

    转自:http://www.cnblogs.com/mengxin523/archive/2010/04/04/1704448.html 本以为WPF里面的XAML会很强大,可以设置很多属性,比如文本 ...

  8. 第五周PSP&进度条

    团队项目psp: 一.表格     C类型 C内容 S开始时间 E结束时间 I时间间隔 T净时间(mins) 预计花费时间(mins) 讨论 讨论用户界面 9:27 10:42 18 57 60 分析 ...

  9. 词频统计的java实现方法——第一次改进

    需求概要 原需求 1.读取文件,文件内包可含英文字符,及常见标点,空格级换行符. 2.统计英文单词在本文件的出现次数 3.将统计结果排序 4.显示排序结果 新需求: 1.小文件输入. 为表明程序能跑 ...

  10. 实测 | 转型微服务,这4大工具谁是API网关性能最优?

    转自:http://www.servicemesh.cn/?/article/45 作者:Turgay Çelik 翻译:钟毅(Drew Zhong) 原文:Comparing API Gateway ...