HBase环境搭建(hbase1.2.5+zookeeper3.4.6)
注:图片如果损坏,点击文章链接:https://www.toutiao.com/i6627857018461880836/
系统版本,Hadoop已安装完成
Mysql安装完成
Hive版本
Sqoop版本
我们先开启hdfs、出现问题
查看日志,发现端口被占用
查看端口
找找是那个程序占用,我们安装lsof
没有找到问题
我们修改端口号
修改文件
修改内容
重启后依然有错误,我们将端口调回
这时候突然发现是权限的问题才看不到PID
把占用的端口都kill掉
重启又出现新的问题
我们停止hdfs服务、将文件夹下dfs/name/in_use.lock文件删除、重启hdfs服务
停止hdfs服务
将文件夹下dfs/name/in_use.lock文件
重启hdfs服务
出现问题(只删除了namenode,重复上面步骤把datanode删除)
我们再重启,终于成功了
浏览器访问也OK
安装zookeeper
准备工具
我们解压
我们进入到安装目录中
我们修改zoo_sample.cfg文件名为zoo.cfg
我们建立一个数据目录,将目录配置到zoo.cfg中
在zoo.cfg中配置dataDir就可以了
注意:此处我们配置的是单节点的,如果是伪节点,需要做时间同步,然后配置2888等端口后,此处我们暂时只配置单节点
启动Zookeeper
查看jps
我们安装HBase
准备工具
解压到目录
我们进入到目录
进入Hbase
我们先配置hbase-env.sh,记下java_home
配置jdk
使用的是hbase自带的zookeper,需要将这个变量值设置为true,我们配置了单节点zookeeper,所以此处设为false
接下来可以保存了
然后我们配置hbase-site.xml,这里面现在是空的
这里面的配置我们来这里找:
这个安装包在我们本地
我们把它解压
找到这个jar
找到这个文件
我们打开可以看到,这些是我们要配置的
我们修改里面的内容
先修改hbase.tmp.dir,我们先创建目录
完成配置
我们继续修改hbase.rootdir
然后是hbase.fs.tmp.dir和hbase.bulkload.staging.dir,这个不需要改动
然后hbase.cluster.distributed
然后是hbase.zookeeper.quorum
我们拷贝到hbase-site.xml
我们修改配置regionservers
修改为
接下来我们替换jar
我们看到jar包中,hadoop版本是2.5.1,这个可能存在兼容性问题
我们删除原来的包、替换新的包(zookeeper-3.4.6.jar、htrace-core-3.1.0-incubating.jar是符合的我们不替换jar、),这样替换的话是14个
都已经删除了
这是准备的16个包
我们上传
然后我们启动Hbase
启动有两种
必须要提前启动zookeeper、hadoop进程再启动hbase
bin/hbase-daemon.sh start master
bin/hbase-daemon.sh start regionserver
或者
bin/start-hbase.sh
我们启动
少了一个任务,我们查看日志发现
这是因为我们配置Hadoop使用的9000
而hbase是8020
我们做下修改
重新启动
继续启动
我们访问UI界面
我们再看下Hadoop中的UI
就能看到一些信息
HBase环境搭建(hbase1.2.5+zookeeper3.4.6)的更多相关文章
- 大数据学习系列之二 ----- HBase环境搭建(单机)
		引言 在上一篇中搭建了Hadoop的单机环境,这一篇则搭建HBase的单机环境 环境准备 1,服务器选择 阿里云服务器:入门型(按量付费) 操作系统:linux CentOS 6.8 Cpu:1核 内 ... 
- Hadoop + ZK + HBase 环境搭建
		Hadoop 环境搭建 参考资料: http://hadoop.apache.org/docs/r2.4.1/hadoop-project-dist/hadoop-common/ClusterSetu ... 
- 《OD大数据实战》HBase环境搭建
		一.环境搭建 1. 下载 hbase-0.98.6-cdh5.3.6.tar.gz 2. 解压 tar -zxvf hbase-0.98.6-cdh5.3.6.tar.gz -C /opt/modul ... 
- HBase环境搭建、shell操作及Java API编程
		一. 1.掌握Hbase在Hadoop集群体系结构中发挥的作用和使过程. 2.掌握安装和配置HBase基本方法. 3.掌握HBase shell的常用命令. 4.使用HBase shell命令进行表的 ... 
- HBase环境搭建
		HBase与Hadoop对应关系:http://hbase.apache.org/book.html#basic.prerequisites 4.1. Hadoop 这块介绍了对应关系 HBase ... 
- HBase环境搭建随记
		====软件版本==== jdk:jdk-8u77-linux-x64.tar.gz zookeeper:zookeeper-3.4.6.tar.gz hadoop:hadoop-2.7.4.tar. ... 
- 基于Ubuntu14.10的Hadoop+HBase环境搭建
		本篇博文中谈及的Hadoop和HBase都是单机版,简单了解. 首先在Ubuntu上搭建Hadoop开发环境,主要参考另外一篇博客,仔细照做并解决出现的问题即可. 地址:http://www.powe ... 
- 大数据学习(16)—— HBase环境搭建和基本操作
		部署规划 HBase全称叫Hadoop Database,它的数据存储在HDFS上.我们的实验环境依然基于上个主题Hive的配置,参考大数据学习(11)-- Hive元数据服务模式搭建. 在此基础上, ... 
- 【Hbase二】环境搭建
		此笔记仅用于作者记录复习使用,如有错误地方欢迎留言指正,作者感激不尽,如有转载请指明出处 Hbase环境搭建 Hbase环境搭建 hadoop为HA的Hbase配置 Zookeeper集群的正常部署并 ... 
随机推荐
- JAVA日志发展史
			JAVA日志发展史 第一阶段 2001年以前,Java是没有日志库的,打印日志全凭System.out和System.err 缺点: 产生大量的IO操作同时在生产环境中无法合理的控制是否需要输出 输出 ... 
- 使用plantuml,业务交接就是这么简单
			使用plantuml,业务交接就是这么简单 你好,我是轩脉刃. 最近交接了一个业务,原本还是有挺复杂的业务逻辑的,但发现交接过来的项目大有文章,在项目代码中有一个docs文件夹,里面躺着若干个 pum ... 
- 《手把手教你》系列技巧篇(五十一)-java+ selenium自动化测试-字符串操作-下篇(详解教程)
			1.简介 自动化测试中进行断言的时候,我们可能经常遇到的场景.从一个字符串中找出一组数字或者其中的某些关键字,而不是将这一串字符串作为结果进行断言.这个时候就需要我们对字符串进行操作,宏哥这里介绍两种 ... 
- Linux 内核到底长啥样
			目录 一.简介 二.结构 地基 地面层 进程表 http进程 21进程 22进程 到文件系统 定时任务 管道 411进程 跃层 一.简介 今天,我来为大家解读一幅来自 TurnOff.us 的漫画 & ... 
- 追踪工具strace
			目录 一.简介 二.例子 找出程序读取的文件 查看现在程序在做什么 查看程序中哪个部分消耗大量cpu 无法连接服务器查看信息 一.简介 Linux 操作系统有很多用来跟踪程序行为的工具,内核态的函数调 ... 
- CF977C Less or Equal 题解
			Content 给定一个 \(n\) 个数的数列 \(a_1,a_2,a_3,...,a_n\) 和一个数 \(k\),试找出这样的一个数 \(x\),使得数列中有 \(k\) 个数小于等于 \(x\ ... 
- 如何用uniapp+vue开发自定义相机插件——拍照+录像功能
			调用手机的相机功能并实现拍照和录像是很多APP与插件都必不可少的一个功能,今天智密科技就来分享一下如何基于uniapp + vue实现自定义相机界面,并且实现: 1: 自定义拍照 2: 自定义录像 3 ... 
- 钉钉提供的内网穿透之HTTP穿透
			此方法无需自行提供服务器和域名 官方地址:https://developers.dingtalk.com/document/resourcedownload/http-intranet-penetra ... 
- JS(JQuery) 省市区三级联动下拉选择
			引入 area.js /* * 全国三级城市联动 js版 */ function Dsy(){ this.Items = {}; } Dsy.prototype.add = function(id,i ... 
- 【LeetCode】225. Implement Stack using Queues 解题报告(Python)
			作者: 负雪明烛 id: fuxuemingzhu 个人博客: http://fuxuemingzhu.cn/ 目录 题目描述 题目大意 解题方法 日期 题目地址:https://leetcode.c ... 
