基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》
用到的安装包有:
apache-hive-1.2.1-bin.tar.gz
mysql-connector-java-5.1.49.tar.gz
百度网盘链接:
链接:https://pan.baidu.com/s/1VU9rBPm9c_LE3llqvp8qZw
提取码:zjhz
前提条件 :搭建好Hadoop集群
建议:初学者初步安装看多看一下文中的建议。
一.MySQL安装
前提:必须卸载干净MySQL
- 首先用命令更新系统
Centos 的安装命令
sudo yum update
Ubantu的安装命令
apt-get update
2.下载相应 rpm 包:
wget http://repo.mysql.com/mysql-community-release-el7-5.noarch.rpm
3.升级安装
rpm -ivh mysql-community-release-el7-5.noarch.rpm
4.用插件安装mysql-server和mysql-client
Centos中的yum插件
yum install mysql-server mysql-client
5.Ubantu的安装命令
apt-get install mysql-server mysql-client
6.启动MySQL服务
service mysql restart
7.MySQL查看服务是否启动
ps –ef|grep mysql
8.登录MySQL(默认密码是为空的,输入密码时回车就好)
mysql –u root –p
9.修改MySQL的密码(建议:密码和我的一样,后面还有hive-site.xml配置)
mysql> use mysql;
mysql> UPDATE user SET password=password("1234") WHERE user='root';
mysql> exit;
注意:如果Mysql的版本是5.7及以上的话update语句如下:
mysql> update user set authentication_string=passworD("1234") where user='root';
10.退出重启服务并登录
service mysql restart
mysql> use mysql
select User, Host from user;
分别执行一下命令
mysql> update user set User=”roots” where Host=”127.0.0.1”;
mysql> update user set Host="%" where User="roots";
mysql> update user set User="root" where Host="%";
二、HIve安装配置
安装过程:

1.上传(Xshell)到root目录下rz命令上传
以下命令时在文件所在目录下执行按顺序执行
我的文件安排时将hive安装在/usr/local下
tar -zxvf apache-hive-1.2.1-bin.tar.gz
mv apache-hive-1.2.1-bin hive
cd mysql-connector-java-5.1.49
mv mysql-connector-java-5.1.49.tar.gz /usr/local/hive/lib/(该步骤就是上次mysqljar包)
建议:该操作是将hive文件解压然后放在指定的目录下(我是放在/usr/local下),建议小白和我安装位置相同,以为后面要配置hive-site.xml中的参数。
2. 配置项
cd /usr/local/hive/conf
cp hive-default.xml.template hive-site.xml
vim hive-site.xml
查找(注意一定要在编辑模式查找(按esc键),不要在插入模式查找)
/javax.jdo.option.ConnectionURL


更改value值
jdbc:mysql://master:3306/hive?createDatabaseIfNotExist=true
注意:这一步时mysql版本是5.7或5.7以上的版本的需要操作,其他版本不要操作
/javax.jdo.option.ConnectionDriverName
改jc

这步是要配置的
/javax.jdo.option.ConnectionUserName
Value 改为root

操作这步的意思是用root用户去登录hive
/javax.jdo.option.ConnectionPassword
改value的值为为1234(这是我前面设置的密码,你们也要对应你们的密码)
对应前面

分别查找
/${system:java.io.tmpdir}改为对应hive的目录(我的目录是/usr/local/hive)
文件中所用${system:java.io.tmpdir}改为/usr/local/hive
/${system:user.name}
文件中所用${system:user.name}改为${user.name}
到这里hive-site.xml就配置完成了
接下来配置hive-env.sh
cp hive-env.sh.template hive-en.sh
修改下面HADOOP_HOME并把注释去掉(就是去掉前面#)
改如下图(目录是对应得Hadoop安装路径)

到此就配置完成hive-env.sh文件了,hive的配置文件也就是配置完成了
3.复制Hadoop配置文件到hive目录下的conf目录下
cd etc/hadoop(这是我Hadoop安装路径)
cp core-site.xml /usr/local/hive/conf/
cp hdfs-site.xml /usr/local/hive/conf/
4.启动hive
service mysql restart 启动mysql服务
start-all.sh 启动集群
cd /usr/local/hive/bin 进入hive/bin目录下
./hive 启动hive
基于Hadoop集群搭建Hive安装与配置(yum插件安装MySQL)---linux系统《小白篇》的更多相关文章
- 大数据 --> Hadoop集群搭建
Hadoop集群搭建 1.修改/etc/hosts文件 在每台linux机器上,sudo vim /etc/hosts 编写hosts文件.将主机名和ip地址的映射填写进去.编辑完后,结果如下: 2. ...
- Hadoop集群搭建-02安装配置Zookeeper
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(三)(图文详解---尽情点击!!!) 一.JDK的安装 安装位置都在同一位置(/usr/tools/jdk1.8.0_73) jdk的安装在克隆三台机器的时候可以提前安装 ...
- Hadoop集群搭建安装过程(二)(图文详解---尽情点击!!!)
Hadoop集群搭建安装过程(二)(配置SSH免密登录)(图文详解---尽情点击!!!) 一.配置ssh无密码访问 ®生成公钥密钥对 1.在每个节点上分别执行: ssh-keygen -t rsa(一 ...
- Hadoop集群搭建安装过程(一)(图文详解---尽情点击!!!)
Hadoop集群搭建(一)(上篇中讲到了Linux虚拟机的安装) 一.安装所需插件(以hadoop2.6.4为例,如果需要可以到官方网站进行下载:http://hadoop.apache.org) h ...
- Hadoop集群搭建-05安装配置YARN
Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hadoop集群搭建-01前期准备 先保证集群5台虚 ...
- Hadoop集群搭建-04安装配置HDFS
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Hadoop集群搭建-03编译安装hadoop
Hadoop集群搭建-05安装配置YARN Hadoop集群搭建-04安装配置HDFS Hadoop集群搭建-03编译安装hadoop Hadoop集群搭建-02安装配置Zookeeper Hado ...
- Linux环境下Hadoop集群搭建
Linux环境下Hadoop集群搭建 前言: 最近来到了武汉大学,在这里开始了我的研究生生涯.昨天通过学长们的耐心培训,了解了Hadoop,Hdfs,Hive,Hbase,MangoDB等等相关的知识 ...
随机推荐
- 【故障公告】阿里云 RDS SQL Server 数据库实例 CPU 100% 引发全站故障
非常抱歉,今天 8:48 开始,我们使用的阿里云 RDS SQL Server 数据库实例突然出现 CPU 100% 问题,引发全站故障,由此给您带来麻烦,请您谅解. 发现故障后立即进行主备切换,和 ...
- Android Studio 之创建自定义控件
•前言 常用控件和布局的继承结构,如下图所示: 可以看到,我们所用的所有的控件都是直接或者间接的继承自View的: 所用的所有布局都是直接或者间接继承自ViewGroup的: View 是 Andro ...
- CentOS7 搭建 K8S 环境
前期准备 环境规划 K8S 与Docker兼容问题 k8s v1.18.0 => Docker v18.x k8s v1.19.0 => Docker v19.x 软件 版本 Linux操 ...
- Leedcode算法专题训练(二分查找)
二分查找实现 非常详细的解释,简单但是细节很重要 https://www.cnblogs.com/kyoner/p/11080078.html 正常实现 Input : [1,2,3,4,5] key ...
- 跟我一起学Go系列:从写测试用例开始仗剑走天涯
从入门到深入 Go 我们已经走了很长的路,当你想启动多个测试类的时候你是不是想启动多个 main 方法,但是 Go 限制了在同一个 package 下只能有一个 main,所以这条路你是走不通的.那我 ...
- IDEA下 Scala 安装 使用
Scala 安装 使用 1.安装Scala插件 Setting--->Plugins--->搜索Scala--->install--->安装完成 或者线上安装不成功/网速太慢, ...
- [ERROR]: gitstatus failed to initialize.
1 问题描述 Manjaro升级后,zsh的主题p10k出现的问题. Your git prompt may disappear or become slow. Run the following c ...
- Salesforce学习之路(五)role hierarchy & sharing
1. Role Hierarchy 在私有或者混合模型中,如果在organization-wide defaults设置某个对象为Private,那么对象的记录只有拥有者可以查看.但是,role hi ...
- Day09_43_Set集合_HashSet_02(HashCode方法 与 equals方法 )
HashSet - 向Hash表中添加元素的过程? 1. 先调用将要被存储的值key的HashCode方法得出Hash值,如果该Hash值在现有Hash表中不存在,那么直接加入元素. 2. 如果该Ha ...
- Redis 与 Python 交互
1. Python 库安装 2. 交互代码范例 3. Redis 操作封装 4. 应用范例:用户登录 1. Python 库安装 联网安装 pip install redis 使用源码安装 到中文官网 ...