CM5.11与CDH5.11安装使用说明
1.cdh5 支持jdk7和jdk8
2.cloudera只支持oracle发布的jdk
3.集群中所有主机的jdk版本必须一致
4.生态圈中用到的所有组件所依赖的jdk版本必须一致
5.cloudera manager的版本要不小于CDH的版本
6.CDH与CM5.11.x支持的操作系统版本:
centos 6.9 (with Known Issue), 6.8, 6.7, 6.6, 6.5, 6.4
ubuntu 16.04 LTS (Xenial) 14.04 LTS (Trusty) 12.04 LTS (Precise)\
7.支持的文件系统
ext3,ext4,但不支持部署完hdfs后将ext3升级为ext4,xfs
8.cdh集成了PostgreSQL数据库,同时支持mysql,MariaDB等操作系统原生支持的数据库
9.C5.11支持的数据库
MySQL 5.1,5.5,5.6,5.7
MariaDB 5.5,10.0
PostgreSQL 8.1,8.3,8.4,9.1,9.2,9.3,9.4,9.5
Oracle 11g R2,12c R1,12c R2
10.C5的JDK支持
仅支持oracle发布的64位的JDK,JDK7支持所有的C5版本,JDK8支持C5.3以上的版本。
不可以在不同的节点上运行不同版本的jdk,集群中的的所有节点要运行相同的jdk版本,凡时依赖jdk的服务必须采用完全相同的jdk.
JDK 7
JDK 7 updates that are supported and tested,JDK 7 Supported in all C5.x
1.7u55 Minimum required
1.7u67 Recommended(Cloudera Manager 中集成,自动安装)
1.7u75 Recommended
1.7u80 Recommended
JDK 8
Warning: JDK 1.8u40, JDK 1.8u45, and JDK 1.8u60 are excluded from support. Also, the Oozie Web Console returns 500 error when Oozie server runs on JDK 8u75 or higher.
JDK 8 updates that are supported and tested,JDK 8 Supported in C5.3 and Higher
1.8u31 Minimum required
1.8u74 Recommended
1.8u91 Recommended
1.8u102 Recommended
1.8u111 Recommended
1.8u121 Recommended
11.CM资源需求
硬盘:
cloudera manager Server占用磁盘空间
/var分区 5GB
/usr分区 500MB
最终空间占用的大小取决于你安装的程序包的多少
Cloudera Management Service占用情况
主机监控和服务监控数据库存放在/var分区,将占用20G的空间
从节点空间占用情况
一般要预留出三倍大小的要安装的程序包的空间
内存:
4G内存通常是够用的,如果用的是oracle的数据库这个数的内存是必须的,如果用的是其它的数据库,并且管理主机小于100台的话,2G内存也是够用的
python
支持python2.4及以上版本,但不兼容Python 3.0或更高版本
CDH5中的Hue需要python2.6或python2.7的支持
CM5.11与CDH5.11安装使用说明的更多相关文章
- ubuntu14.04, Cloudera Manager 5.11.1, cdh5.11.1 postgresql离线部署
最近一段时间团队接到的项目需要处理的数据量非常大,之前的处理方式难以满足现有需求.最近两周前前后后折腾了不少,在搭建了hadoop+hbase+hive+spark的一个集群后,由于感觉管理和监控太麻 ...
- CM5(5.11.0)和CDH5(5.11.0)离线安装
概述 文件下载 系统环境搭建 日志查看 Q&A 参考 概述 CDH (Cloudera's Distribution, including Apache Hadoop),是Hadoop众多分支 ...
- 安装CDH5.11.2集群
master 192.168.1.30 saver1 192.168.1.40 saver2 192.168.1.50 首先,时间同步 然后,ssh互通 接下来开始: 1.安装MySQL5.6. ...
- CDH5.11安装spark2.x详细步骤
简介: 在我的CDH5.11集群中,默认安装的spark是1.6版本,这里需要将其升级为spark2.x版本.经查阅官方文档,发现spark1.6和2.x是可以并行安装的,也就是说可以不用删除默认的1 ...
- 大数据平台搭建 - cdh5.11.1 - hue安装及集成其他组件
一.简介 hue是一个开源的apache hadoop ui系统,由cloudear desktop演化而来,最后cloudera公司将其贡献给了apache基金会的hadoop社区,它基于pytho ...
- c++11 gcc4.8.x安装
c++11 gcc4.8.x安装 2014年12月11日默北 要安装PHP-CPP,需要c++11,否则就会报错,错误信息如下所示: g++ -Wall -c -g -std=c++11 -fpi ...
- 11年Macbook Air 安装win10 经验
11年macbook air安装win10折腾了好久,安装成功经验记录下. 1.使用BootCamp v6.0.6133 2.启动时U盘里面有两个引导Window和EFI,选择Windows启动.EF ...
- Cloudera Manager 5和CDH5离线安装
CDH (Cloudera’s Distribution, including Apache Hadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的Apache Had ...
- CDH5上安装Hive,HBase,Impala,Spark等服务
Apache Hadoop的服务的部署比較繁琐.须要手工编辑配置文件.下载依赖包等.Cloudera Manager以GUI的方式的管理CDH集群,提供向导式的安装步骤.因为须要对Hive,HBase ...
随机推荐
- 一种借助POI粗略的标注城市也许重要的区域的方法
第一部分 很久以前,我住在村子里,因为村子小,所以对村子的一草一木都很熟悉,在熟悉的环境里就很有安全感. 后来我到了大城市,却发现城市太大了,一辈子都熟悉不完. 这个城市的绝大部分地方我都没有去过,就 ...
- P1618 三连击(升级版)(JAVA语言)
题目描述 将1,2,-,9共9个数分成三组,分别组成三个三位数,且使这三个三位数的比例是A:B:C,试求出所有满足条件的三个三位数,若无解,输出"No!!!". //感谢黄小U饮品 ...
- python3 list合并
1 t1=[x for x in range(5)] 2 t2=[x for x in range(5,10)] 3 4 #way1:通过方法extend(),直接修改列表,无返回值 5 # t1.e ...
- 一个C++引用库的头文件预编译陷阱
写在前面 老胡最近在工作中,有个场景需要使用一个第三方库,引用头文件,链接库,编译运行,一切都很正常,但是接下来就遇到了一个很诡异的问题,调用该库的中的一个对象方法为对象修改属性的时候,会影响到对象的 ...
- Trie、并查集、堆、Hash表学习过程以及遇到的问题
Trie.并查集.堆.Hash表: Trie 快速存储和查找字符串集合 字符类型统一,将单词在最后一个字母结束的位置上打上标记 练习题:Trie字符串统计 import java.util.*; pu ...
- 【分布式】SpringCloud(3)--Eureka服务注册与发现
1.Eureka概述 1.1.什么是Eureka Eureka是Netflix的一个子模块.基于REST的服务,用于定位服务,以实现云端中间层服务发现和故障转移. 只需要使用服务的标识符,就可以访问到 ...
- 发送请求时携带了参数,但是浏览器network没有显示的排错思路
发送请求时携带了参数,但是浏览器network没有显示的排错思路 不知道大家有没有遇到这样子的情况就是发送请求的时候明明携带了参数,但是浏览器的network中就是没有!请看下图和代码! 我发送请求用 ...
- 蒙特卡洛——使用CDF反函数生成非均匀随机数
均匀随机数生成 先来说说均匀随机数生成,这是非均匀随机数的生成基础. 例如,我们现在有drand()函数,可以随机生成[0,1]范围内的均匀随机数. 要求一个drand2()函数,能够生成[0 ...
- 关于C语言解决汉诺塔(hanoi)问题
C语言解决汉诺塔问题 汉诺塔是典型的递归调用问题: hanoi简介:印度教的主神梵天在创造世界的时候,在其中一根针上从下到上地穿好了由大到小的64片金片,这就是所谓的汉诺塔.不论白天黑夜,总有一个僧侣 ...
- Django中的CBV视图
Web 开发是一项无聊而且单调的工作,特别是在视图功能编写方面更为显著.为了减少这种痛苦,Django植入了视图类这一功能,该功能封装了视图开发常用的代码,无须编写大量代码即可快速完成数据视图的开发, ...