CM+CDH大数据平台
我这里搭建的是3节点,centos6.5的静态ip ,ssh免密码登录,防火墙关闭,时钟同步等等一些准备工作我这里就不多说了
我们可以进官网看看
https://www.cloudera.com/
我们进来看看
https://www.cloudera.com/documentation.html



我们先部署我们的本地yum源


安装完之后, 我们可以发现多了这么一个目录


下面我们把httpd服务启动一下

直接用我们的ip地址登录

我们在http://archive.cloudera.com/cm5/repo-as-tarball/5.8.0/下载cm的tar包
我们下载这个

下载好了

我们上传到cm1这个节点上

上传完了之后我们在html目录下创建目录

把这个包移动到这个路径下

我们进去解压一下这个tar包

我们直接在浏览器输入http://192.168.86.141/cm-5.8.0/

把压缩包干掉


我们使用下面的命令先来安装创建本地源的工具

yum install yum-utils createrepo



createrepo /var/www/html/cm-5.8.0
在浏览器里可以看到多了这个目录,本地yum仓库的目录

接下来我们修改本地源的地址



[myrepo]
name=myrepo
baseurl=http://192.168.86.141/cm-5.8.0
enabled =
gpgcheck =
保存退出后我们把这个源文件分发给另外两个节点

[root@cm1 yum.repos.d]# scp myrepo.repo root@cm2:/etc/yum.repos.d
myrepo.repo % .1KB/s :
[root@cm1 yum.repos.d]# scp myrepo.repo root@cm3:/etc/yum.repos.d
myrepo.repo % .1KB/s :
[root@cm1 yum.repos.d]#
我们到其他节点查看一下


我们先创建一个目录

下载http://archive.cloudera.com/cm5/installer/5.8.0/

上传


赋予权限

我们执行一下这个文件
./cloudera-manager-installer.bin --skip_repo_package=1


遇到这情况就检查防火墙是否关闭,vim /etc/sysconfig/selinux

如果CM安装失败,直接删除文件目录
rm -Rf /usr/share/cmf /var/lib/cloudera* /var/cache/yum/cloudera*

这种情况的话就要检查系统的jdk了,先把centos6.5的自带jdk卸载,安装1.7版本的jdk
当你看的这个界面的时候,就会弹出一个浏览器窗口

当然这个界面不会马上出来,因为服务启动需要点时间
我们可以查看一下服务启动状态


分别输入admin admin作用户名和密码,其实也可以不用默认弹出的浏览器,打开电脑安装的浏览器,输入地址http://192.168.86.141:7180/
登录进去之后

接下来我们需要检查我们系统是时间同步情况,因为这个对时钟同步的要求非常高



下载CDH的parcels包并配置到Cloudera Manager主服务器上
检查完之后我们下载 Parcels包
Parcels包下载地址: http://archive.cloudera.com/cdh5/parcels/

把这个两个文件下载

下载后我们把这两个文件上传到cm1节点上



接下来我们需要重启一下cm server这个服务

重启完之后我们需要再次打开http://192.168.86.141:7180/这个地址,这里需要一点时间去等等,启动需要时间的




输入主机名,我这里是3个节点都安装





因为我之前安装了jdk,这里我们就不选择安装了,如果之前没有安装的话可以选安装


这里输入的是root用户的密码


接下来等待安装

等待自己下载安装
经过漫长的等待


CM+CDH大数据平台的更多相关文章
- CM记录-CDH大数据平台实施经验总结2016(转载)
CDH大数据平台实施经验总结2016(转载) 2016年负责实施了一个生产环境的大数据平台,用的CDH平台+docker容器的方式,过了快半年了,现在把总结发出来. 1. 平台规划注意事项 1.1 业 ...
- CDH 大数据平台搭建
一.概述 Cloudera版本(Cloudera’s Distribution Including Apache Hadoop,简称“CDH”),基于Web的用户界面,支持大多数Hadoop组件,包括 ...
- CDH大数据平台搭建终极版
经过无数次的失败,终于将CDH安装到两台普通的笔记本电脑上,主要失败原因有以下几点: 不熟悉安装过程,官方给出的安装方法有三种,所以都尝试了一遍,浪费了大量时间,所以有时候方法多不见得是一件好事. 安 ...
- 大数据 -- Cloudera Manager(简称CM)+CDH构建大数据平台
一.Cloudera Manager介绍 Cloudera Manager(简称CM)是Cloudera公司开发的一款大数据集群安装部署利器,这款利器具有集群自动化安装.中心化管理.集群监控.报警等功 ...
- product of大数据平台搭建------CM 和CDH安装
一.安装说明 CM是由cloudera公司提供的大数据组件自动部署和监控管理工具,相应的和CDH是cloudera公司在开源的hadoop社区版的基础上做了商业化的封装的大数据平台. 采用离线安装模式 ...
- 朝花夕拾之--大数据平台CDH集群离线搭建
body { border: 1px solid #ddd; outline: 1300px solid #fff; margin: 16px auto; } body .markdown-body ...
- CDH构建大数据平台-使用自建的镜像地址安装Cloudera Manager
CDH构建大数据平台-使用自建的镜像地址安装Cloudera Manager 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 一.搭建CM私有仓库 详情请参考我的笔记: http ...
- CDH构建大数据平台-配置集群的Kerberos认证安全
CDH构建大数据平台-配置集群的Kerberos认证安全 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 当平台用户使用量少的时候我们可能不会在一集群安全功能的缺失,因为用户少,团 ...
- CDH构建大数据平台-Kerberos高可用部署【完结篇】
CDH构建大数据平台-Kerberos高可用部署[完结篇] 作者:尹正杰 版权声明:原创作品,谢绝转载!否则将追究法律责任. 一.安装Kerberos相关的软件包并同步配置文件 1>.实验环境 ...
随机推荐
- 5 个关于 API 中日期和时间设计规则
规则 #1 使用ISO-8601格式作为你的日期格式 ISO 8601 解决了很多问题,包括: 自然排序 - 简单和优雅,免去多余的工作即可实现排序 时区偏移 - 代表用户的地点和时区在日益增长的全球 ...
- java考试感受
开学不久,我们进行了一次java程序考试.在此之前,老师要求我们在假期自学java并提前发了一个考试样卷,要求用数组编写一个学生信息管理系统并能够实现一系列的功能.由于我早早的便完成了这道题.因此对这 ...
- linux下常见软件安装
读者还可以参考文档:https://download.csdn.net/download/qq_27799563/10482900 Mysql的安装过程: 解压MySQL安装包: tar -xvf M ...
- 集成学习之AdaBoost
AdaBoost 当做出重要决定时,大家可能会考虑吸取多个专家而不只是一个人的意见,机器学习也是如此,这就是集成学习的基本思想.使用集成方法时有多种形式:可以是不同算法的集成,也可以是同一算法在不同设 ...
- TypeScript 之 基础类型、高级类型
基础类型:https://m.runoob.com/manual/gitbook/TypeScript/_book/doc/handbook/Basic%20Types.html 高级类型:https ...
- ElasticSearch(二) 关于DSL
关于Lucene里面的查询评分,其实是基于一个公式:TF/ IDF(Term-Frequency/ Inverse Document Frequency),词频率/ 倒排文档频率,这个公式讲了一个故事 ...
- chmod修改权限
1.命令简介 chmod(Change mode) 用来将每个文件的模式更改为指定值.Linux/Unix 的档案调用权限分为三级 : 档案拥有者.群组.其他. u :目录或者文件的当前的用户 g : ...
- [VC6] 小谈如何解决VC6.0 open崩溃的问题(已解决)(转)
[昨天重装了系统,开始用VC6还是可以的,后来装了WPS,在用VC6里面的Open就崩溃了. 这个解决方法就这么几步:1.把FileTool.dll放到指定的AddIns目录.2. 注册这个dll到注 ...
- Hbase 简介+环境安装配置教程
HBase介绍 HBase是参考google的bigtable的一个开源产品,建立在hdfs之上的一个提供高可靠性.高性能.列存储.可伸缩.实时读写的数据库系统.是一种介于nosql和RDBMs之间的 ...
- Flume 概述+环境配置+监听Hive日志信息并写入到hdfs
Flume介绍Flume是Apache基金会组织的一个提供的高可用的,高可靠的,分布式的海量日志采集.聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据:同时,Flume提供 ...