一.修改host文件 1) 用客户端工具(ssh client或者putty)连接到linux服务器.在root用户下输入命令 vi /etc/hosts,用vi编辑hosts文件,如下: #127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4 #::1 localhost localhost.localdomain localhost6 localhost6.localdomain6 192.1…

转自:http://blog.csdn.net/aichaoguy/article/details/11693269#!/bin/bash #check whether package 'expect' is installed. if rpm -q expect then echo "Good">/dev/null else echo "You Must install package \'expect\'"; exit 0 fi #开始产生exp文件 ca…

SSH 无密码授权访问slave集群机器 1. 安装SSH,所有集群机器,都要安装SSH环境介绍:  Master : CNT06BIG01 192.168.3.61 SLAVE 1: CNT06BIG02 192.168.3.62 SLAVE 2: CNT06BIG03 192.168.3.63 # yum install ssh 2. 分别在master/slave 1/slave 2机器上制作密钥和公钥,分别执行如下命令 制作密钥 # ssh-keygen -t dsa -P '' -f…

集群中时间不同步有可能会让大数据的应用程序运行混乱,造成不可预知的问题,比如Hbase.mongodb副本集等,Hbase当时间差别过大时就会挂掉,mongodb如果副本时间过快,会出现时间栈帧溢出提前出发选举等,所以在大数据集群中,ntp服务,应该作为一种基础的服务,以下在演示在CentOS 7.2集群上配置ntp服务的过程 首先检查系统中是否安装ntp包:rpm -q ntp 然后,执行命令在线安装ntp:yum -y install ntp 安装成功之后,再次执行rpm -q ntp 可以…

集群中时间不同步有可能会让大数据的应用程序运行混乱,造成不可预知的问题,比如Hbase,当时间差别过大时就会挂掉,所以在大数据集群中,ntp服务,应该作为一种基础的服务,以下在演示在CentOS 7.2集群上配置ntp服务的过程 首先检查系统中是否安装ntp包: rpm -q ntp 我这里是只是基础服务器操作系统,所以没有安装ntp服务 然后,执行命令在线安装ntp: yum -y install ntp 安装成功之后,再次执行 rpm -q ntp 可以看到对应的包: 这个时候可以使用命令查…

今天给大家总结一下hadoop集群之间免登陆的步骤 node1 ssh node4 1.在node1中生成密钥 [root@node1 ~]# ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 2.追加到本地文件夹 [root@node1 ~]# cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys 3.传输到需要免登陆的机器node4 [root@node1 ~]# scp ./id_dsa.pub root@node…

首先编写脚本生成集群服务器列表: hostsList.sh #!/bin/bash preIp="11.11.225." pwd="dyj2017" for i in `seq 2 80`; do echo -e $preIp$i $pwd >> hostsLists.txt done hostsLists.txt 11.11.225.2 dyj2017 11.11.225.3 dyj2017 11.11.225.4 dyj2017 .... 11.11…

1 查询阿里云局网ip 注意:需要配置同一地区同一可用区的机器 才是一个局网 2 配置好hosts文件 3 hostname确认也是正确的 4 生成公钥私钥 三台机器同样操作 ssh-keygen -t rsa 然后一路回车 5 远程拷贝公钥 每台机器都敲 ssh-copy-id root@hadoop001 ssh-copy-id root@hadoop002 ssh-copy-id root@hadoop003 每次操作根据提示 输入yes 以及 远程服务器密码 6 验证登陆 验证成功,这样…

[测试环境] 刚好重新做mgr就搞下吧,主要论文好长~想多做几遍再看~ master1 192.168.13.111 master2 192.168.13.112  master3  192.168.13.1113 [步骤] 1.生成密匙(三台均需要) [root@master1 ~]# ssh-keygen -t rsa #之后一路回车 [root@master2 ~]# ssh-keygen -t rsa [root@master3 ~]# ssh-keygen -t rsa 创建公共秘钥文…

一.以3个几点为例,分别为master.slave01.slave02 1.分别生成自己节点密钥对 master: 创建dsa免密代码:ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsaslave01: 创建dsa免密代码:ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsaslave02: 创建dsa免密代码:ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 2.分别将slave01.slave02上的公…