cdh6.2.1搭建安装
1、为CM安装mysql驱动
4台服务器
将mysql-connector-java-5.1.27-bin.jar拷贝到/usr/share/java路径下,并重命名
mv mysql-connector-java-5.1.27-bin.jar mysql-connector-java.jar
2、CM安装
yct40安装:cloudera-scm-server,cloudera-scm-agent
yct41 安装:cloudera-scm-agent
yct42 安装:cloudera-scm-agent
yct43 安装:cloudera-scm-agent
搭建本地yum源
将压缩包cloudera-repos.tar.gz拷贝到yct40中的一台节点,/home/download
解压到/var/www/html路径下
tar -zxvf cloudera-repos.tar.gz -C /var/www/html
cd /var/www/html/
python -m SimpleHTTPServer 8900
浏览器访问http://192.168.10.40:8900
vim /etc/yum.repos.d/cloudera-manager.repo
输入:
[cloudera-manager]
name=cloudera-manager
baseurl=http://yct40:8900/cloudera-repos/cm6/6.2.1/redhat7/yum/
enabled=1
gpgcheck=0
分发
xsync /etc/yum.repos.d/cloudera-manager.repo
yct40:
yum -y install cloudera-manager-daemons cloudera-manager-agent cloudera-manager-server
yct41:
yum -y install cloudera-manager-agent cloudera-manager-daemons
yct42:
yum -y install cloudera-manager-agent cloudera-manager-daemons
yct43:
yum -y install cloudera-manager-agent cloudera-manager-daemons
修改yct40上CM的配置文件(不用xsync同步)
vim /etc/cloudera-scm-agent/config.ini
server_host=yct40
server_port=7182
3、在mysql中建库
CREATE DATABASE scm DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
CREATE DATABASE amon DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
CREATE DATABASE hue DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
CREATE DATABASE hive DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
CREATE DATABASE sentry DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
CREATE DATABASE oozie DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;
为CM配置数据库(cm自带脚本)
/opt/cloudera/cm/schema/scm_prepare_database.sh mysql scm root ycT_big@!123!com
4、启动CM服务
yct40:
systemctl start cloudera-scm-server
systemctl start cloudera-scm-agent
yct41:
systemctl start cloudera-scm-agent
yct42:
systemctl start cloudera-scm-agent
yct43:
systemctl start cloudera-scm-agent
yct40上可通过tail查看日志,出现started jetty server即安装成功
tail -f /var/log/cloudera-scm-server/cloudera-scm-server.log
浏览器访问:http://192.168.10.40:7180
用户名和密码都是admin/admin
5、关闭CM服务
关闭工作节点
43:systemctl stop cloudera-scm-agent
42:systemctl stop cloudera-scm-agent
41:systemctl stop cloudera-scm-agent
40:systemctl stop cloudera-scm-agent
40:systemctl stop cloudera-scm-server
关闭服务节点
40:systemctl stop cloudera-scm-server
6、登录成功以后
欢迎页面
协议页面,选同意
选择免费
到达集群安装页面
给集群命名:yctcluder
选择物理节点:
添加本地parcel库
等待parcel的下载、分配、解压和激活
检查集群网络环境
选择要安装的CDH组件,选择自定义安装
选择需要安装的组件
各组件角色分配
数据库链接测试
各组件基本设置,使用默认
等待安装部署和启动
cdh6.2.1搭建安装的更多相关文章
- 史上最全Windows版本搭建安装React Native环境配置
史上最全Windows版本搭建安装React Native环境配置 配置过React Native 环境的都知道,在Windows React Native环境配置有很多坑要跳,为了帮助新手快速无误的 ...
- Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!) 一.JDK的安装 安装位置都在同一位置(/usr/tools/jdk1.8.0_73) jdk的安装在克隆三台机器的时候可以提前安装 ...
- Hadoop集群搭建安装过程(二)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(二)(配置SSH免密登录)(图文详解---尽情点击!!!) 一.配置ssh无密码访问 ®生成公钥密钥对 1.在每个节点上分别执行: ssh-keygen -t rsa(一 ...
- 史上最详细Windows版本搭建安装React Native环境配置 转载,比官网的靠谱亲测可用
史上最详细Windows版本搭建安装React Native环境配置 2016/01/29 | React Native技术文章 | Sky丶清| 95条评论 | 33530 views ...
- 【转】android 最新 NDK r8 在window下开发环境搭建 安装配置与使用 详细图文讲解,完整实际配置过程记录(原创)
原文网址:http://www.cnblogs.com/zdz8207/archive/2012/11/27/android-ndk-install.html android 最新 NDK r8 在w ...
- android 最新 NDK r8 在window下开发环境搭建 安装配置与使用 详细图文讲解,完整实际配置过程记录(原创)
android 最新 NDK r8 在window下开发环境搭建 安装配置与使用 详细图文讲解,完整实际配置过程记录(原创) 一直想搞NDK开发却一直给其他事情耽搁了,参考了些网上的资料今天终于把 ...
- Android NDK r8 Cygwin CDT 在window下开发环境搭建 安装配置与使用 具体图文解说
版权声明:本博客全部文章均为原创.欢迎交流.欢迎转载:转载请勿篡改内容,而且注明出处,谢谢! https://blog.csdn.net/waldmer/article/details/3272500 ...
- bay——vSphere Oracle12cR2的RAC搭建安装之配置共享存储 - 副本
vSphere Oracle12cR2的RAC搭建安装之配置共享存储 https://blog.csdn.net/yuzifen/article/details/82496503 一.第一台机器添加两 ...
- CDH6.1.0离线安装——笔记
一. 概述 该文档主要记录大数据平台的搭建CDH版的部署过程,以供后续部署环境提供技术参考. 1.1 主流大数据部署方法 目前主流的hadoop平台部署方法主要有以下三种: Apache hadoop ...
随机推荐
- php判断是否为数字
判断是否为数字 使用is_numeric函数,可以判断数字或者数字字符串 $variables = [ 0, 36, 3.6, .36, '36', 'a36', 044, //8进制 0x24, / ...
- anaconda一站式环境的搭建(anaconda、tensorflow、opencv)
搭建人工智能图像处理环境 Anaconda一站式开发环境搭建. 工欲善其事必先利其器,在我们学习之前,我们先要搭建一个属于我们自己的开发环境.我们开发的环境是有anaconda.testflow.op ...
- npm ERR! Unexpected end of JSON input while
rm -rf node_modules package-lock.json and npm cache clean --force solved it
- C++ 第二天 字符串
字符串 字符串是最常用的一种数据类型了,在python中声明字符串和声明其他类型的数据一样,都非常的简单.但是在c++中,对于字符串的操作,相对来说要稍微复杂一些. C++ 提供了以下两种类型的字符串 ...
- shell动态向sql传参
一直在想有什么好方法可以实现,用shell动态给sql传参,自己写了一个简单,有什么好方法,欢迎留言补充,下面代码纯手打,可能有疏忽之处,请大佬批评指正指正. 实现方法如下: 1.新建一个文件02.t ...
- Python raw_input() 函数
python raw_input() 用来获取控制台的输入.高佣联盟 www.cgewang.com raw_input() 将所有输入作为字符串看待,返回字符串类型. 注意:input() 和 ra ...
- Python os.tempnam() 方法
概述 os.tempnam() 方法用于返回唯一的路径名用于创建临时文件.高佣联盟 www.cgewang.com 语法 tempnam()方法语法格式如下: os.tempnam(dir, pref ...
- PHP 实例 - AJAX 与 XML-AJAX XML 实例
PHP 实例 - AJAX 与 XML AJAX 可用来与 XML 文件进行交互式通信. AJAX XML 实例 下面的实例将演示网页如何通过 AJAX 从 XML 文件读取信息: 实例 Sele ...
- Python List max()方法
描述 max() 方法返回列表元素中的最大值.高佣联盟 www.cgewang.com 语法 max()方法语法: max(list) 参数 list -- 要返回最大值的列表. 返回值 返回列表元素 ...
- CF EC 86 E Placing Rooks 组合数学
LINK:Placing Rooks 丢人现场.jpg 没看到题目中的条件 放n个rook 我以为可以无限放 自闭了好半天. 其实只用放n个.那么就容易很多了. 可以发现 不管怎么放 所有列/所有行 ...