基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》
用到的安装包有:
apache-hive-1.2.1-bin.tar.gz
mysql-connector-java-5.1.49.tar.gz
百度网盘链接:
链接:https://pan.baidu.com/s/1VU9rBPm9c_LE3llqvp8qZw
提取码:zjhz
前提条件 :搭建好Hadoop集群
建议:初学者初步安装看多看一下文中的建议。
一.MySQL安装
前提:必须卸载干净MySQL
- 首先用命令更新系统
Centos 的安装命令
sudo yum update
Ubantu的安装命令
apt-get update
2.下载相应 rpm 包:
wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm
3.升级安装
rpm -ivh mysql-community-release-el7-5.noarch.rpm
4.用插件安装mysql-server和mysql-client
Centos中的yum插件
yum install mysql-server mysql-client
5.Ubantu的安装命令
apt-get install mysql-server mysql-client
6.启动MySQL服务
service mysql restart
7.MySQL查看服务是否启动
ps –ef|grep mysql
8.登录MySQL(默认密码是为空的,输入密码时回车就好)
mysql –u root –p
9.修改MySQL的密码(建议:密码和我的一样,后面还有hive-site.xml配置)
mysql> use mysql;
mysql> UPDATE user SET password=password("1234") WHERE user='root';
mysql> exit;
注意:如果Mysql的版本是5.7及以上的话update语句如下:
mysql> update user set authentication_string=passworD("1234") where user='root';
10.退出重启服务并登录
service mysql restart
mysql> use mysql
select User, Host from user;
分别执行一下命令
mysql> update user set User=”roots” where Host=”127.0.0.1”;
mysql> update user set Host="%" where User="roots";
mysql> update user set User="root" where Host="%";
二、HIve安装配置
安装过程:

1.上传(Xshell)到root目录下rz命令上传
以下命令时在文件所在目录下执行按顺序执行
我的文件安排时将hive安装在/usr/local下
tar -zxvf apache-hive-1.2.1-bin.tar.gz
mv apache-hive-1.2.1-bin hive
cd mysql-connector-java-5.1.49
mv mysql-connector-java-5.1.49.tar.gz /usr/local/hive/lib/(该步骤就是上次mysqljar包)
建议:该操作是将hive文件解压然后放在指定的目录下(我是放在/usr/local下),建议小白和我安装位置相同,以为后面要配置hive-site.xml中的参数。
2. 配置项
cd /usr/local/hive/conf
cp hive-default.xml.template hive-site.xml
vim hive-site.xml
查找(注意一定要在编辑模式查找(按esc键),不要在插入模式查找)
/javax.jdo.option.ConnectionURL


更改value值
jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true
注意:这一步时mysql版本是5.7或5.7以上的版本的需要操作,其他版本不要操作
/javax.jdo.option.ConnectionDriverName
改jc

这步是要配置的
/javax.jdo.option.ConnectionUserName
Value 改为root

操作这步的意思是用root用户去登录hive
/javax.jdo.option.ConnectionPassword
改value的值为为1234(这是我前面设置的密码,你们也要对应你们的密码)
对应前面

分别查找
/${system:java.io.tmpdir}改为对应hive的目录(我的目录是/usr/local/hive)
文件中所用${system:java.io.tmpdir}改为/usr/local/hive
/${system:user.name}
文件中所用${system:user.name}改为${user.name}
到这里hive-site.xml就配置完成了
接下来配置hive-env.sh
cp hive-env.sh.template hive-en.sh
修改下面HADOOP_HOME并把注释去掉(就是去掉前面#)
改如下图(目录是对应得Hadoop安装路径)

到此就配置完成hive-env.sh文件了,hive的配置文件也就是配置完成了
3.复制Hadoop配置文件到hive目录下的conf目录下
cd etc/hadoop(这是我Hadoop安装路径)
cp core-site.xml /usr/local/hive/conf/
cp hdfs-site.xml /usr/local/hive/conf/
4.启动hive
service mysql restart 启动mysql服务
start-all.sh 启动集群
cd /usr/local/hive/bin 进入hive/bin目录下
./hive 启动hive
基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》的更多相关文章
- 大数据 --> Hadoop集群搭建
Hadoop集群搭建 1.修改/etc/hosts文件 在每台linux机器上,sudo vim /etc/hosts 编写hosts文件.将主机名和ip地址的映射填写进去.编辑完后,结果如下: 2. ...
- Hadoop集群搭建-02安装配置Zookeeper
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!) 一.JDK的安装 安装位置都在同一位置(/usr/tools/jdk1.8.0_73) jdk的安装在克隆三台机器的时候可以提前安装 ...
- Hadoop集群搭建安装过程(二)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(二)(配置SSH免密登录)(图文详解---尽情点击!!!) 一.配置ssh无密码访问 ®生成公钥密钥对 1.在每个节点上分别执行: ssh-keygen -t rsa(一 ...
- Hadoop集群搭建安装过程(一)(图文详解---尽情点击!!!)
Hadoop集群搭建(一)(上篇中讲到了Linux虚拟机的安装) 一.安装所需插件(以hadoop2.6.4为例,如果需要可以到官方网站进行下载:http://hadoop.apache.org) h ...
- Hadoop集群搭建-05安装配置YARN
Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hadoop集群搭建-01前期准备 先保证集群5台虚 ...
- Hadoop集群搭建-04安装配置HDFS
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Hadoop集群搭建-03编译安装hadoop
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Linux环境下Hadoop集群搭建
Linux环境下Hadoop集群搭建 前言: 最近来到了武汉大学,在这里开始了我的研究生生涯.昨天通过学长们的耐心培训,了解了Hadoop,Hdfs,Hive,Hbase,MangoDB等等相关的知识 ...
随机推荐
- 【故障公告】阿里云 RDS SQL Server 数据库实例 CPU 100% 引发全站故障
非常抱歉,今天 8:48 开始,我们使用的阿里云 RDS SQL Server 数据库实例突然出现 CPU 100% 问题,引发全站故障,由此给您带来麻烦,请您谅解. 发现故障后立即进行主备切换,和 ...
- [BFS]最优乘车
最优乘车 题目描述 HH 城是一个旅游胜地,每年都有成千上万的人前来观光.为方便游客,巴士公司在各个旅游景点及宾馆,饭店等地都设置了巴士站并开通了一些单程巴上线路.每条单程巴士线路从某个巴士站出发,依 ...
- 从wav到Ogg Opus 以及使用java解码OPUS
PCM 自然界中的声音非常复杂,波形极其复杂,通常我们采用的是脉冲代码调制编码,即PCM编码.PCM通过抽样.量化.编码三个步骤将连续变化的模拟信号转换为数字编码. 采样率 采样频率,也称为采样速度或 ...
- oo第四单元总结及总课程回顾
一.第四单元架构设计 1.第一次作业 第一次作业要求实现的只有对类图的分析.为了直观地搭建出一个类图,我新建了Manager类来处理UmlElement以及搭建树.但由于未能做好时间管理,因此第一次作 ...
- kernel base
基础知识 学习网址:ctfwiki 安全客 Kernel:又称核心 维基百科:在计算机科学中是一个用来管理软件发出的数据I/O(输入与输出)要求的电脑程序,将这些要求转译为数据处理的指令并交由中央处理 ...
- 解决CentOS虚拟机无法显示本地IP问题
1 问题描述 CentOS虚拟机无法显示本地ip,如图: 2 尝试过的方法 参考过此处的解决方法,把网卡配置中的ONBOOT修改为YES: 但是原来的网卡配置也是YES,所以修改的方法没有用,尝试了一 ...
- CLion 2020.1.2 激活
1 下载 官网. 2 运行 解压安装并运行,选择Evaluate. 3 激活 来这里下载jar补丁,拖进去即可.
- 线程stop和Interrupt
一:stop终止线程 举例子: public class ThreadStop { public static int i; public static int j; public static vo ...
- Unix ls UVA - 400
The computer company you work for is introducing a brand new computer line and is developing a new ...
- 在kubernetes上部署zookeeper,kafka集群
本文采用网上镜像:mirrorgooglecontainers/kubernetes-zookeeper:1.0-3.4.10 准备共享存储:nfs,glusterfs,seaweed或其他,并在no ...