基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》
用到的安装包有:
apache-hive-1.2.1-bin.tar.gz
mysql-connector-java-5.1.49.tar.gz
百度网盘链接:
链接:https://pan.baidu.com/s/1VU9rBPm9c_LE3llqvp8qZw
提取码:zjhz
前提条件 :搭建好Hadoop集群
建议:初学者初步安装看多看一下文中的建议。
一.MySQL安装
前提:必须卸载干净MySQL
- 首先用命令更新系统
Centos 的安装命令
sudo yum update
Ubantu的安装命令
apt-get update
2.下载相应 rpm 包:
wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm
3.升级安装
rpm -ivh mysql-community-release-el7-5.noarch.rpm
4.用插件安装mysql-server和mysql-client
Centos中的yum插件
yum install mysql-server mysql-client
5.Ubantu的安装命令
apt-get install mysql-server mysql-client
6.启动MySQL服务
service mysql restart
7.MySQL查看服务是否启动
ps –ef|grep mysql
8.登录MySQL(默认密码是为空的,输入密码时回车就好)
mysql –u root –p
9.修改MySQL的密码(建议:密码和我的一样,后面还有hive-site.xml配置)
mysql> use mysql;
mysql> UPDATE user SET password=password("1234") WHERE user='root';
mysql> exit;
注意:如果Mysql的版本是5.7及以上的话update语句如下:
mysql> update user set authentication_string=passworD("1234") where user='root';
10.退出重启服务并登录
service mysql restart
mysql> use mysql
select User, Host from user;
分别执行一下命令
mysql> update user set User=”roots” where Host=”127.0.0.1”;
mysql> update user set Host="%" where User="roots";
mysql> update user set User="root" where Host="%";
二、HIve安装配置
安装过程:

1.上传(Xshell)到root目录下rz命令上传
以下命令时在文件所在目录下执行按顺序执行
我的文件安排时将hive安装在/usr/local下
tar -zxvf apache-hive-1.2.1-bin.tar.gz
mv apache-hive-1.2.1-bin hive
cd mysql-connector-java-5.1.49
mv mysql-connector-java-5.1.49.tar.gz /usr/local/hive/lib/(该步骤就是上次mysqljar包)
建议:该操作是将hive文件解压然后放在指定的目录下(我是放在/usr/local下),建议小白和我安装位置相同,以为后面要配置hive-site.xml中的参数。
2. 配置项
cd /usr/local/hive/conf
cp hive-default.xml.template hive-site.xml
vim hive-site.xml
查找(注意一定要在编辑模式查找(按esc键),不要在插入模式查找)
/javax.jdo.option.ConnectionURL


更改value值
jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true
注意:这一步时mysql版本是5.7或5.7以上的版本的需要操作,其他版本不要操作
/javax.jdo.option.ConnectionDriverName
改jc

这步是要配置的
/javax.jdo.option.ConnectionUserName
Value 改为root

操作这步的意思是用root用户去登录hive
/javax.jdo.option.ConnectionPassword
改value的值为为1234(这是我前面设置的密码,你们也要对应你们的密码)
对应前面

分别查找
/${system:java.io.tmpdir}改为对应hive的目录(我的目录是/usr/local/hive)
文件中所用${system:java.io.tmpdir}改为/usr/local/hive
/${system:user.name}
文件中所用${system:user.name}改为${user.name}
到这里hive-site.xml就配置完成了
接下来配置hive-env.sh
cp hive-env.sh.template hive-en.sh
修改下面HADOOP_HOME并把注释去掉(就是去掉前面#)
改如下图(目录是对应得Hadoop安装路径)

到此就配置完成hive-env.sh文件了,hive的配置文件也就是配置完成了
3.复制Hadoop配置文件到hive目录下的conf目录下
cd etc/hadoop(这是我Hadoop安装路径)
cp core-site.xml /usr/local/hive/conf/
cp hdfs-site.xml /usr/local/hive/conf/
4.启动hive
service mysql restart 启动mysql服务
start-all.sh 启动集群
cd /usr/local/hive/bin 进入hive/bin目录下
./hive 启动hive
基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》的更多相关文章
- 大数据 --> Hadoop集群搭建
Hadoop集群搭建 1.修改/etc/hosts文件 在每台linux机器上,sudo vim /etc/hosts 编写hosts文件.将主机名和ip地址的映射填写进去.编辑完后,结果如下: 2. ...
- Hadoop集群搭建-02安装配置Zookeeper
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!) 一.JDK的安装 安装位置都在同一位置(/usr/tools/jdk1.8.0_73) jdk的安装在克隆三台机器的时候可以提前安装 ...
- Hadoop集群搭建安装过程(二)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(二)(配置SSH免密登录)(图文详解---尽情点击!!!) 一.配置ssh无密码访问 ®生成公钥密钥对 1.在每个节点上分别执行: ssh-keygen -t rsa(一 ...
- Hadoop集群搭建安装过程(一)(图文详解---尽情点击!!!)
Hadoop集群搭建(一)(上篇中讲到了Linux虚拟机的安装) 一.安装所需插件(以hadoop2.6.4为例,如果需要可以到官方网站进行下载:http://hadoop.apache.org) h ...
- Hadoop集群搭建-05安装配置YARN
Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hadoop集群搭建-01前期准备 先保证集群5台虚 ...
- Hadoop集群搭建-04安装配置HDFS
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Hadoop集群搭建-03编译安装hadoop
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Linux环境下Hadoop集群搭建
Linux环境下Hadoop集群搭建 前言: 最近来到了武汉大学,在这里开始了我的研究生生涯.昨天通过学长们的耐心培训,了解了Hadoop,Hdfs,Hive,Hbase,MangoDB等等相关的知识 ...
随机推荐
- Elasticsearch索引模板-转载
转载地址:https://dongbo0737.github.io/2017/06/13/elasticsearch-template/#similar_posts Elasticsearch索引模板 ...
- [树状数组]数星星 Stars
数 星 星 S t a r s 数星星 Stars 数星星Stars 题目描述 天空中有一些星星,这些星星都在不同的位置,每个星星有个坐标.如果一个星星的左下方(包含正左和正下)有 k k k 颗星星 ...
- 2018年block3学习计划
还是要给自己制定一个block的计划,希望自己的技术能有更进一步的提升 1. 算法/数学 随着学习的进一步深入,愈发认识到了算法的重要性,这个block给自己定下的计划就是 1)把introducti ...
- JavaWeb 补充(Servlet)
Servlet: server applet 概念: 运行在服务器端的小程序 * Servlet就是一个接口,定义了Java类被浏览器访问到(tomcat识别)的规则. * 将来我们自 ...
- 【笔记】《Redis设计与实现》chapter2 简单动态字符串
------------恢复内容开始------------ 2.1 SDS的定义 struct sdshdr{ // 记录buf数组中已使用字节的数量 // 等于SDS所保存字符串的长度(不含'\0 ...
- JAVAEE_Servlet_17_关于乱码问题
关于乱码问题 * 数据传递过程中的乱码 解释:数据传递过程中的乱码是指: 将数据从浏览器发送给服务器的时候,服务器接收到的数据是乱码的. - ISO-8859-1 是国际标准码,不支持中文编码,它兼容 ...
- JDBC_05_ResorceBundle(资源绑定器) 绑定配置文件
ResorceBundle(资源绑定器) 绑定配置文件 jdbc.proprtise 需要在src目录下新建一个文件夹然后将jdbc.proprtise放在文件中然后右键该文件夹选择 Rebuild ...
- Jenkins 自动触发执行的配置
1. 两种触发方式 2. jenkins 和 github 同步配置 ngrok 安装 webhook 配置 1. 两种触发条件 Jenkins 中建立的任务是可以设置自动触发,更进一步的实现自动化. ...
- 1149 Dangerous Goods Packaging
When shipping goods with containers, we have to be careful not to pack some incompatible goods into ...
- 一文抽丝剥茧带你掌握复杂Gremlin查询的调试方法
摘要:Gremlin是图数据库查询使用最普遍的基础查询语言.Gremlin的图灵完备性,使其能够编写非常复杂的查询语句.对于复杂的问题,我们该如何编写一个复杂的查询?以及我们该如何理解已有的复杂查询? ...