从Ubunt的安装到hadoop集群的搭建

一、相关基础配置

　　1、网络设置

　　　　a.调整VMnet8这块网卡网关

　　　　b.在VMware[编辑]->[虚拟网络编辑器]对VMnet8进线[NAT 设置]

　　　　c.调整[DHCP 设置]中的起始IP地址

查看图片示例

查看图片示例

二、VMware安装Ubuntu桌面版

　　这里我安装的版本为：ubuntu-16.10-desktop-amd64

　　1.Linux用户名为：ubuntu,密码：admin

　　　　a.后期会复制此虚拟机，将用户名和密码设置通用，方便后期使用

　　　　b.用户名密码全部为小写英文字母，方便后期登录管理

　　2.VMware虚拟机名称为：s180

　　　　a.虚拟机名称后数字为虚拟机IP，方便后期管理

三、Ubuntu基础配置

　　1.设置桌面自适应显示

　　　　a.关机

　　　　b.编辑虚拟机设置

　　　　c.显示器

　　　　d.指定监视器设置

　　　　e.任意监视器的最大分辨率-->设置实际物理显示器的最大分辨率

　　2.安装VMware Tools

　　　　a.虚拟机开机

　　　　b.VMware菜单栏[虚拟机]-->[安装VMware Tools]

　　　　c.将VMwareTools-10.1.6-5214329.tar.gz 复制到虚拟机桌面

　　　　d.右键[Extract Here]，将VMwareTools-10.1.6-5214329.tar.gz 释放在桌面。

　　　　e.打开命令行终端

　　　　f.$ cd ~/Desktop/vmware-tools-distrib/

　　　　g.$ sudo ./vmware-install.pl

　　　　h.输入密码：admin

　　　　i.一路回车，都按照默认设置

　　3.开启root用户

　　　　a.$ sudo passwd root

　　　　b.输入密码及确认密码：admin

　　　　c.看到passwd: password updated successfully表示成功

　　4.设置固定IP

　　　　（一）图形界面设置

　　　　　　a.单机右上角网络连接的上下图标，选择[Edit Connections...]

　　　　　　b.选择Ethernet下的默认网卡

　　　　　　　　我这里叫[Wired connection 1]，正常应该是[eth0]

　　　　　　　　Linux默认会连接第一块网卡，这里只调整第一块网卡。

　　　　　　d.选择[IPv4 Settings]

　　　　　　e.将[Method]设置为[Manual]

　　　　　　f.在Addresses中[Add]调整IP地址

　　　　　　　　根据VMware虚拟网关设置你相应的网段、DNS服务地址

　　　　　　g.保存，断开连接网络，重新连接网络

　　　　　　h.$ifconfig 检查IP设置

查看图片示例

　　　　（二）命令行设置固定IP

　　　　　　a.$ cd /etc/network/

　　　　　　b.$ sudo nano interfaces

　　　　　　　编辑修改配置文件，保存

　　　　　　c./etc/init.d/networking restart  重启网卡　　　　　　

　　5.修改Ubuntu软件源

　　　　a.检查是否能访问外网

　　　　b.$ cd /etc/apt

　　　　c.先备份$sudo mv sources.list sources.list.bak

　　　　d.编辑：$ sudo nano sources.list

　　　　　　这里使用的阿里的源，也可以配置其他的国内镜像源

deb http://mirrors.aliyun.com/ubuntu/ vivid main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ vivid-security main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ vivid-updates main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ vivid-proposed main restricted universe multiverse
deb http://mirrors.aliyun.com/ubuntu/ vivid-backports main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ vivid main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ vivid-security main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ vivid-updates main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ vivid-proposed main restricted universe multiverse
deb-src http://mirrors.aliyun.com/ubuntu/ vivid-backports main restricted universe multiverse

　　　　　e.保存

　　　　　f.运行：$sudo apt-get update

　　　　6.共享本地文件夹

　　　　　a.在VMware我的计算机列表页右击->[设置]->[选项]->[添加]--{--------}->[确定]

　　　　　b.重启ubuntu

　　　　　c.$cd /mnt/hgfs/

　　　　　　　进入检查一下

　　　　7.设置开机进入文本模式

　　　　　　$ sudo nano /etc/default/grub

　　　　　　　　GRUB_CMDLINE_LINUX_DEFAULT="text"

　　　　　　$ sudo update-grub

　　　　　　$ reboot

　　　　8.修改hostname

　　　　　　a.$ cd /etc/

　　　　　　b.切换到root用户

　　　　　　　　$ su root

　　　　　　c.修改主机名为s180(与IP对应)

　　　　　　　　　# echo s180 > hostname

　　　　9.修改本机host文件主机名与IP对应

　　　　　　a.进入 /etc 目录

　　　　　　b.修改 hosts

　　　　　　　　$ sudo nano hosts

　　修改为：

127.0.0.1       localhost
192.168.20.180  s180
192.168.20.181  s181
192.168.20.182  s182
192.168.20.183  s183
192.168.20.184  s184

四、ubuntu软件环境

　　1、安装jdk

　　　　a.下载jdk-8u141-linux-x64.tar.gz，放在共享文件夹中　　　

　　　　b.将安装文件复制到Downloads目录

　　　　　　$ cp jdk-8u141-linux-x64.tar.gz ~/Downloads/

　　　　c.进入Downloads目录

　　　　　　$ cd ~/Downloads/

　　　　d.解压jdk-8u141-linux-x64.tar.gz

　　　　　　$ tar -xzvf jdk-8u141-linux-x64.tar.gz

　　　　e.创建安装目录

　　　　　　$ mkdir /soft

　　　　f.改变文件夹权限

　　　　　　$ sudo chown ubuntu:ubuntu /soft

　　　　g.移动安装文件

　　　　　　$ mv ~/Downloads/jdk1.8.0_141/ soft/

　　　　h.进入bin目录

　　　　　　$ cd /soft/jdk1.8.0_141/bin/

　　　　i.验证安装

　　　　　　$ ./java -version
　　　　　　进入 /soft 目录，为jdk安装目录添加符号链接，

　　　　　　$ ln -s jdk1.8.0_141 jdk

　　　　g.进入etc目录

　　　　　　$ cd /etc

　　　　k.编辑environment配置文件

　　　　　　添加path变量:/soft/jkd/bin，意用“:”分割

　　　　　　添加JAVA_HOME变量：/soft/jdk

　　　　l.让环境变量即刻生效

　　　　　　$ source /etc/environment

　　　　　　echo $JAVA_HOME　　打印JAVA_HOME变量

　　2、安装Hadoop

　　　　a.复制安装文件

　　　　　　$ cp /mnt/hgfs/LinuxSoft/hadoop-2.7.3.tar.gz ~/Downloads/

　　　　b.解压、移动

　　　　　　$ tar -xzvf hadoop-2.7.3-src.tar.gz

　　　　　　$ mv hadoop-2.7.3 /soft/

　　　　c.建立hadoop链接

　　　　　　$ ln -s hadoop-2.7.3/  hadoop

　　　　d.配置hadoop环境变量

　　　　　　$ sudo nano /etc/environment

　　　　　　HADOOP_HOME=/soft/hadoop

　　　　　　path变量再添加：“:/soft/hadoop/bin:/soft/hadoop/sbin”

　　　　e.让环境变量即刻生效

　　　　　　$ source /etc/environment

　　　　　　echo $HADOOP_HOME　　打印HADOOP_HOME变量

　　　　至此，/etc/environment文件内容为：

JAVA_HOME=/soft/jdk
HADOOP_HOME=/soft/hadoop
PATH="/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games:/usr/local/games:/soft/jdk/bin:/soft/hadoop/bin:/soft/hadoop/sbin"

　　　　f.reboot  重启ubuntu

　　　　j.验证hadoop安装

　　　　　　$ hadoop version

　　　　　　打印出hadoop的安装版本，则说明安装完成

五、克隆ubuntu clent机器

　　1.用s180再克隆四台虚拟机

　　2.命名分别为s181、s182、s183、s184

　　3.分别将对应IP和主机名修改

　　4.分别用主机名ping s181、s182、s183、s184，测试是否联通

六、安装ssh