_00024 尼娜抹微笑伊拉克_云计算ClouderaManager以及CHD5.1.0群集部署安装文档V1.0
笔者博文:妳那伊抹微笑
itdog8 地址链接 : http://www.itdog8.com(个人链接)
博客地址:http://blog.csdn.net/u012185296
博文标题:_00024 妳那伊抹微笑_云计算之ClouderaManager以及CHD5.1.0集群部署安装文档V1.0
个性签名:世界上最遥远的距离不是天涯,也不是海角。而是我站在妳的面前。妳却感觉不到我的存在
技术方向:Flume+Kafka+Storm+Redis/Hbase+Hadoop+Hive+Mahout+Spark ... 云计算技术
转载声明:能够转载, 但必须以超链接形式标明文章原始出处和作者信息及版权声明,谢谢合作。
下载链接:http://download.csdn.net/detail/u012185296/7673041
qq交流群:214293307
(期待与你一起学习,共同进步)
# ClouderaManager以及CM5.1.0半离线集群部署安装
眼下 CM5.1.0 。CDH5.1.0 是最新版本号
# 前言
# CM安装前的准备
# 基本环境的配置
# ssh免password登录
前面已经介绍。这里不再介绍了
# 关闭防火墙
[root@a234-198 cm5.1.0]# service iptables stop
# 改动hosts文件(也是必须的)
必须严格依照下面这样的格式 ip aaa.bbb.ccc aaa
比如:116.255.234.198a234-198.hadoop.com a234-198
[root@a234-198 yum.repos.d]# vi /etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
# cdh5.1.0
116.255.234.196 a234-196.hadoop.com a234-196
116.255.234.197 a234-197.hadoop.com a234-197
116.255.234.198 a234-198.hadoop.com a234-198
116.255.224.226 a224-226.hadoop.com a224-226
116.255.224.227 a224-227.hadoop.com a224-227
116.255.224.229 a224-229.hadoop.com a224-229
# 改动主机名(必须的。所有主机所有须要改动,并且必须遵守类似这样的格式
a234-198.hadoop.com)
[root@a234-198 yum.repos.d]# vi/etc/sysconfig/network
NETWORKING=yes
HOSTNAME=a234-198.hadoop.com
[root@a234-198 yum.repos.d]# hostname
a234-198.hadoop.com
[root@a234-198 yum.repos.d]#
# 关闭selinux(SELINUX=xxx改动为disable)
[root@a234-198 yum.repos.d]# vi /etc/selinux/config
# This file controls the state of SELinux on thesystem.
# SELINUX= can take one of these three values:
# enforcing- SELinux security policy is enforced.
# permissive - SELinux prints warnings instead of enforcing.
# disabled- No SELinux policy is loaded.
SELINUX=disabled
# SELINUXTYPE= can take one of these two values:
# targeted- Targeted processes are protected,
# mls -Multi Level Security protection.
SELINUXTYPE=targeted
# yum仓库的配置(必须的。本地安装的时候可能会出现故障,反正配置上就对了,wget下载)
[root@a234-198 yum.repos.d]# pwd
/etc/yum.repos.d
[root@a234-198 yum.repos.d]# ll
total 12
-rw-r--r-- 1root root 210 Jan 29 2013rhel-debuginfo.repo
-rw-r--r--. 1 root root 529 May 31 2012 rhel-source.repo
-rw-r--r-- 1root root 529 Jan 29 2013rhel-source.repo.bak
[root@a234-198 yum.repos.d]#
wget-chttp://archive-primary.cloudera.com/cm5/redhat/6/x86_64/cm/cloudera-manager.repo
[root@a234-198 yum.repos.d]# catcloudera-manager.repo
[cloudera-manager]
# Packages for Cloudera Manager, Version 5, on RedHator CentOS 6 x86_64
name=Cloudera Manager
baseurl=http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5/
gpgkey =http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/RPM-GPG-KEY-cloudera
gpgcheck = 1
[root@a234-198 yum.repos.d]#
[root@a234-198 yum.repos.d]#
wget-chttp://archive-primary.cloudera.com/cdh5/redhat/6/x86_64/cdh/cloudera-cdh5.repo
[root@a234-198 yum.repos.d]# cat cloudera-cdh5.repo
[cloudera-cdh5]
# Packages for Cloudera's Distribution for Hadoop,Version 5, on RedHat or CentOS 6 x86_64
name=Cloudera's Distribution for Hadoop, Version 5
baseurl=http://archive.cloudera.com/cdh5/redhat/6/x86_64/cdh/5/
gpgkey =http://archive.cloudera.com/cdh5/redhat/6/x86_64/cdh/RPM-GPG-KEY-cloudera
gpgcheck = 1
[root@a234-198 yum.repos.d]#
[root@a234-198 yum.repos.d]# ll
total 20
-rw-r--r-- 1 root root 323 Oct 29 2013 cloudera-cdh5.repo
-rw-r--r-- 1 root root 289 Oct 29 2013 cloudera-manager.repo
-rw-r--r-- 1root root 210 Jan 29 2013rhel-debuginfo.repo
-rw-r--r--. 1 root root 529 May 31 2012 rhel-source.repo
-rw-r--r-- 1root root 529 Jan 29 2013rhel-source.repo.bak
# 执行ntpd服务
[root@a234-198 yum.repos.d]# service ntpd start
Starting ntpd: [ OK ]
[root@a234-198 yum.repos.d]#
# 基本上该做的都做了,不该做的也做了,接下来就听天由命吧。!
!
# cloudera-manager.repo中提取rpms
这里把这里的rpm包所有下载到本地去,比方饿这里下载到了/usr/local/adsit/yting/cloudera/cm5/cm5.1.0这个文件夹下
[root@a234-198 yum.repos.d]#
catcloudera-manager.repo
[cloudera-manager]
name = Cloudera Manager, Version 5.1.0
baseurl = http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5.1.0/
gpgkey = http://archive.cloudera.com/redhat/cdh/RPM-GPG-KEY-cloudera
gpgcheck = 1
[root@a234-198 yum.repos.d]#
到baseurl的地址把CM须要的全部rpm包下载到本地
[root@a234-198 cm5.1.0]# pwd
/usr/local/adsit/yting/cloudera/cm5/cm5.1.0
[root@a234-198 cm5.1.0]# ll
total 518600
-rw-r--r-- 1 root root 3881788 Jul 17 05:13cloudera-manager-agent-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 388561016 Jul 17 05:13cloudera-manager-daemons-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 8176 Jul 17 05:13 cloudera-manager-server-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 9880 Jul 17 05:13cloudera-manager-server-db-2-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 684608 Jul 17 05:13enterprise-debuginfo-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 137885675 Jul 17 05:13oracle-j2sdk1.7-1.7.0+update55-1.x86_64.rpm
[root@a234-198 cm5.1.0]#
# cloudera-cdh5.repo中提取rpms
# 下载cloudera-manager-installer.bin
[root@a234-198 cm5.1.0]# pwd
/usr/local/adsit/yting/cloudera/cm5/cm5.1.0
[root@a234-198 cm5.1.0]#
wget-c http://archive.cloudera.com/cm5/installer/latest/cloudera-manager-installer.bin
[root@a234-198 cm5.1.0]# ll
total 519100
-rw-r--r-- 1 root root 3881788 Jul 17 05:13cloudera-manager-agent-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 388561016Jul 17 05:13 cloudera-manager-daemons-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 510569 Jun 5 10:06 cloudera-manager-installer.bin
-rw-r--r-- 1 root root 8176 Jul 17 05:13cloudera-manager-server-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 9880 Jul 17 05:13cloudera-manager-server-db-2-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 684608 Jul 17 05:13enterprise-debuginfo-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 137885675 Jul 17 05:13oracle-j2sdk1.7-1.7.0+update55-1.x86_64.rpm
# 给cloudera-manager-installer.bin加入X权限
[root@a234-198 cm5.1.0]#
chmod+x cloudera-manager-installer.bin
[root@a234-198 cm5.1.0]# ll
total 519100
-rw-r--r-- 1 root root 3881788 Jul 17 05:13cloudera-manager-agent-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 388561016 Jul 17 05:13cloudera-manager-daemons-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rwxr-xr-x 1 root root 510569 Jun 5 10:06 cloudera-manager-installer.bin
-rw-r--r-- 1 root root 8176 Jul 17 05:13cloudera-manager-server-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 9880 Jul 17 05:13cloudera-manager-server-db-2-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 684608 Jul 17 05:13enterprise-debuginfo-5.1.0-1.cm510.p0.75.el6.x86_64.rpm
-rw-r--r-- 1 root root 137885675 Jul 17 05:13oracle-j2sdk1.7-1.7.0+update55-1.x86_64.rpm
[root@a234-198 cm5.1.0]#
到了这里,主要的准备工作已经做完,如今開始安装rpms,然后执行cloudera-manager-installer.bin这个文件即可了
# 到了这里,主要的准备工作已经做完,如今開始安装rpms,然后执行cloudera-manager-installer.bin这个文件即可了
# yum localinstall –nogpgcheck *.rpm
# cm5.1.0的rpms安装 yum localinstall –nogpgcheck *.rpm的rpms
先前下载的全部rpm包到相应的文件夹下运行该命令
[root@a234-198 cm5.1.0]# pwd
/usr/local/adsit/yting/cloudera/cm5/cm5.1.0
[root@a234-198 cm5.1.0]#
yumlocalinstall --nogpgcheck *.rpm
打印的信息太长了,饿就弄点实用的信息了
# cdh5.1.0的rpms安装yum localinstall --nogpgcheck --skip-broken *.rpm
这里须要一点时间。5分钟的样子,等一下吧!
[root@a234-198 cdh5.1.0]# yum localinstall--nogpgcheck --skip-broken *.rpm
# 5分钟过后就安装好了,OK。如今正式进入我们的CM5.1.0的安装了,仅仅要这些准备工作做好了,这个就灰常简单,仅仅要是个人都会了。就是动动鼠标点一下的问题了
# 执行 cloudera-manager-installer.bin
[root@a234-198 cm5.1.0]# pwd
/usr/local/adsit/yting/cloudera/cm5/cm5.1.0
[root@a234-198 cm5.1.0]#./cloudera-manager-installer.bin
# 以下就是图形界面了,相信仅仅要你的智商没有问题,那么应该就没有问题了。只是还是截点图吧,这样对于刚開始学习的人有个交代、、、
然后就100%了 、、、
成功安装 、、、
# 查看进程jps
[root@a234-198 cm5.1.0]# jps
13213 Jps
12697 Main (这个就是CM的界面管理程序了)
[root@a234-198cm5.1.0]# jps –l (查看下细节)
12697 com.cloudera.server.cmf.Main (就是这个,OK。接下来进入7180port就好)
13241 sun.tools.jps.Jps
[root@a234-198cm5.1.0]#
# 訪问server的7180port(账号password默认全是admin),进行CM的配置
# CM登录
# CM选择版本号
# CM指定主机
# CM选择存储库
# CM提供SSH登录凭据
这里须要把你的/root/.ssh/id_rs这个文件给下载下来
# CM群集安装。几分钟就好了(这里特别说明,假设你没有做我前面提到的那些步骤,可能这里一天都装不好!
!!)
这一步须要等一下下就好!
# CM成功安装
成功安装,点击继续 、、、
# CM 检查主机的正确性
# CM选择您要在群集上安装的CDH5服务
# CM自己定义角色分配
# CM数据库设置(使用默认的PostgreSQL数据库)
# CM服务成功安装
界面浏览
# 都有界面了。仅仅要智商没有问题,后面的都会弄了
# 结束感言
略微有一点麻烦,官网的文档也有点坑爹,最麻烦的地方就是装rpms了
写这个博文真TM累。上传图片手都点残了
假设你认为这篇博文不错,默默地留个言,顶一下吧,反正顶一下又不会怀孕 、、、
# Time2014-07-24 14:37:21
版权声明:本文博客原创文章。博客,未经同意,不得转载。
_00024 尼娜抹微笑伊拉克_云计算ClouderaManager以及CHD5.1.0群集部署安装文档V1.0的更多相关文章
- _00021 尼娜抹微笑伊拉克_谁的的最离奇的异常第二阶段 Jedis pool.returnResource(jedis)
笔者博文:妳那伊抹微笑 博客地址:http://blog.csdn.net/u012185296 博文标题:_00021 妳那伊抹微笑_谁的异常最诡异第二期之 Jedis pool.returnRes ...
- Linux系统管理_主题01 :初识Linux_1.6 用好帮助文档man
在 man 界面中,可以使用如下快捷键来进行操作: 上/下箭头 向上/下滚动一行 [Space] 向下翻一页 [Page Down] 向下翻一页 [Page Up] 向上翻一页 [ ...
- _00020 妳那伊抹微笑_谁的异常最诡异第一期之 SqlServer RSA premaster secret error
博文作者:妳那伊抹微笑 博客地址:http://blog.csdn.net/u012185296 博文标题:_00020 妳那伊抹微笑_谁的异常最诡异第一期之 SqlServer RSA premas ...
- HBase - 计数器 - 计数器的介绍以及使用 | 那伊抹微笑
博文作者:那伊抹微笑 csdn 博客地址:http://blog.csdn.net/u012185296 itdog8 地址链接 : http://www.itdog8.com/thread-215- ...
- HBase - Filter - 过滤器的介绍以及使用 | 那伊抹微笑
博文作者:那伊抹微笑 csdn 博客地址:http://blog.csdn.net/u012185296 itdog8 地址链接 : http://www.itdog8.com/thread-214- ...
- 微信开发_微信教程__微信通讯框架V1.0
做个广告先, PHP千人群(6848027) C++群 (1414577) 看雪汇编&反汇编群(15375777) 看雪汇编&反汇编2群(4915800) 转载不一定注明出处,只要推荐 ...
- 快速解决PDF文档加密不能打印问题_百度经验
快速解决PDF文档加密不能打印问题_百度经验 快速解决PDF文档加密不能打印问题 | 浏览:182 | 更新:2014-01-06 1 ...
- 『TensorFlow』SSD源码学习_其一:论文及开源项目文档介绍
一.论文介绍 读论文系列:Object Detection ECCV2016 SSD 一句话概括:SSD就是关于类别的多尺度RPN网络 基本思路: 基础网络后接多层feature map 多层feat ...
- 【云计算】docker三剑客如何支持分布式部署?
This blog will explain how to create multi-container application deployed on multiple hosts using Do ...
随机推荐
- 开发快很重要——如果只看法语或者产品结果C++似乎很强大,但是参与这个C++的开发过程,就会感觉到这种痛苦(Google也是这个看法)
开发快很重要——如果只看语法或者产品结果C++似乎很强大,但是参与这个C++的开发过程,就会感觉到这种痛苦,太慢了,太麻烦了,虽然在反复调试和优化之后,最后产品的结果可能还不错. Delphi的最大特 ...
- 放开chrome,微度新标签页 删除
来自VIc_:http://blog.csdn.net/Vic___ 本人只是提供方法建议,没有任何商业欲望. 欢迎转载 有一天,突然,我的标签栏,被改变了,这是怎么了,我的书签栏 我是一个镇定的人, ...
- 当webview遇到了Slidingmenu,webView出现卡白,解决方案
先介绍一下什么是SlidingMenu: Sliding Menu的是一种比较新的设置界面或配置界面效果,在主界面左滑或者右滑出现设置界面,能方便的进行各种操作.如Evernote.Google+.F ...
- Java 实现享元(Flyweight)模式
/** * 字母 * @author stone * */ public class Letter { private String name; public Letter(String name) ...
- ASP.NET过滤器的应用
在J2EE Web开发中有过滤器filter,该filter可以对指定的URL访问进行拦截,并执行过滤器的方法,根据实际应用情况,在过滤器中修改请求的代码.判断会话信息,也可以做权限控制,总之这个过滤 ...
- 修改Hadoop作业调度算法过程解析
最近几个星期一直在修改hadoop的计算能力调度算法,遇到了这样那样的问题. 我修改的版本是hadoop-0.20.2 第一步: 将hadoop的源码加载到eclipse中配置使用ant编译 第二步: ...
- 字符串处理-AC自动机
估计在OJ上刷过题的都会对AC自动机这个名词很感兴趣,同样,记得去年ACM暑期集训的时候,在最后讲到字符串部分,听说了这个算法的名字之后就对于它心向往之,AC正好是Accept的简称,字面意义上的理解 ...
- java项目打jar包的两种情况
链接地址:http://jingyan.baidu.com/article/6b97984d8a6ddc1ca2b0bfa0.html 本文介绍一下java项目打jar包时的两种情况各怎么操作 方 ...
- 【转载】django在eclipse环境下建web网站
一.创建一个项目如果这是你第一次使用Django,那么你必须进行一些初始设置.也就是通过自动生成代码来建立一个Django项目--一个Django项目的设置集,包含了数据库配置.Django详细选项设 ...
- SAP超时问题
其他常用的参数如下: login/system_client 登录时默认的Client号 login/password_expiration_time 密码有效期 login/fails_to_use ...