CDH6.2的配置

访问node1： 192.168.56.11:7180

Username: admin

Password: admin#进入欢迎界面

Welcome--Accept License

选免费版

Add Cluster - Installation -- Cluster Basics

填集群名称

填写各节点的ip并搜索,

也支持10.1.1.[1-4]和host[1-3].example.com批量填写

在当前管理的主机中选择要加入集群的主机

parcel仓库的设置参考:https://www.cnblogs.com/hongfeng2019/p/11345057.html

install Parcels

点击主机检查

检查结果:这里是因为笔者公司用的openstack,没有重启权限,关闭透明大页设置后需重启.

集群设置:这里选Essentials

调整服务在各节点, 如datanode 4个节点,ZK3个节点, nodemanager4个

数据库连通性检测:

遇到的坑:

连接不上,把 scm | 195.189.142.%  drop掉就可以了

mysql> select user,host from mysql.user where user='scm';

+------+---------------+
| user | host |
+------+---------------+
| scm | % |
| scm | 195.189.142.% |
| scm | localhost |
+------+---------------+
3 rows in set (0.00 sec)

mysql> drop user scm@'195.189.142.%';

审核更改:

命令运行检查:

检查有时出错是网络问题,重新再运行一次就可以了.

最后,恭喜您,进入集群管理界面,修改密码

https://www.cndba.cn/dave/article/3260

测试:

先做一个1.txt文件, copy一段英文,传到htfs

hadoop jar /opt/cloudera/parcels/CDH-6.2.0-1.cdh6.2.0.p0.967373/jars/hadoop-mapreduce-examples-3.0.0-cdh6.2.0.jar wordcount /1.txt  /1.output