docker安装hive笔记

前两篇文章介绍了docker的基本命令如何安装hadoop 那么大家会比较了解docker的基本语法的安装过程.那么咱们今天来一起安装一下hive. 安装 1.下载gitHub,地址:https://github.com/prasanthj/docker-hive-on-tez.如果背墙了,可以选择下载zip.进入目录之后就能看见如下内容: @~/git/github/docker-hive-on-tez-master $ ls Dockerfile datagen.py hive-log4j.…

docker 安装Hive

转自:https://www.cnblogs.com/upupfeng/p/13452385.html#%E9%83%A8%E7%BD%B2hive 使用docker快速搭建hive环境记录一下使用docker快速搭建部署hive环境目录写在前面步骤安装docker 安装docker 安装docker-compose 配置docker国内镜像源(可选) 安装git & 配置github 部署Hive docker-hive 开始部署使用Hive命令行收尾工作安装vi.lrzs…

docker安装小笔记

作者:邓聪聪 yum update Docker 要求 CentOS 系统的内核版本高于 3.10 ,查看本页面的前提条件来验证你的CentOS 版本是否支持 Docker docker卸载旧版本(如果安装过旧版本的话)rpm -qa|grep dockeryum remove docker docker-common docker-selinux docker-engineyum erase docker-common-<FQPN> 安装需要的软件包, yum-util 提供yum-conf…

docker 安装 jenkins 笔记

前提: 已安装好 docker-ce,可运行 docker 命令命令: sudo docker pull jenkins mkdir -p ~/dockers/jenkins cd ~/dockers sudo docker run --name jenkins01 -p 8081:8080 -p 50000:50000 -v ${PWD}/jenkins:/var/jenkins_home jenkins:latest 报错 : touch: Can not write to /var/je…

docker安装mysql笔记

首先查找镜像 docker search mysql 拉取镜像 : docker pull mysql 拉取成功后,查看本地镜像: docker images 可以看到本地有两个镜像(redis是我之前拉取的镜像,可以忽略.),有了镜像之后,我们就可以创建容器了. docker run -d -p : --name mysql1 mysql -d : 后台运行容器: -p :将容器中端口映射到本地: --name :容器命名: 启动容器后 ,连接数据库失败,查看运行中的容器: docker…

2. Docker - 安装

一.Docker介绍 1. Docker是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的Linux机器上, 也可以实现虚拟化. 容器时完全使用沙箱机制,互相之间不会有任何接口. 2. 启动非常快,秒级实现. 3. 资源利用率很高,一台机器可以跑上千个docker容器. 4. 更快的交付和部署,一次创建和配置后,可以在任意地方运行. 5. 内核级别的虚拟化,不需要额外的hypevisor支持,会有更高的性能和效率. 6. 易迁移,平台依赖性不…

HADOOP docker(四):安装hive

1.hive简介2.安装hive2.1 环境准备2.1.1 下载安装包2.1.2 设置hive用户的环境变量2.1.3 hive服务端配置文件2.1.4 hive客户端配置文件2.1.4 分发hive配置文件2.2 启动hive2.2.1 初始化数据库2.2.2 创建HDFS目录2.2.3 启动hive3.总结 getting start: https://cwiki.apache.org/confluence/display/Hive/GettingStarted hive wiki: htt…

【Linux】【自学笔记】Linux下面docker安装mysql

写在前面: 捣腾继续,之前把一个SpringBoot的程序安装在docker上面,参考链接:https://www.cnblogs.com/aki-stones/p/2019-11-01-note.html 最近有看Nginx的一些东西准备安装下Nginx,但是还在学习,不怎么熟悉.突然想到之前的Linux机器上面安装了mysql,是不是可以把mysql安装在docker上面. 环境: 虚拟机VMware(联网的情况下) Java IDEA 2019.2.3 CentOS 7 64位安装步骤:…

MongoDB学习笔记二：使用Docker安装MongoDB

目录 Docker安装MongoDB Docker给MongoDB设置用户密码 NoSQL Manager for MongoDB连接为admin赋权限上一个笔记介绍了Windows下安装MongoDB和MongoDB的基本使用,这一节来介绍怎么在Docker里面安装 Docker安装MongoDB 最重要的就是启动这一步,前面的可以看我的Docker笔记,启动如下 docker run --name mongo -p 27017:27017 -d mongo:latest --auth 以…

Docker笔记——Docker安装及制作镜像

1 Docker安装本文中Docker运行环境为Ubuntu 14.04.1 LTS 3.13.0-32-generic x64参考:https://docs.docker.com/v1.11/engine/installation/linux/ubuntulinux/ 1.1 更新并安装apt-transport-https ca-certificates apt-get update && apt-get install apt-transport-https ca-certifica…

微服务分布式电商项目学习笔记（三）---- docker介绍安装以及使用docker安装软件（2020/7/10）

其实在介绍docker的使用和安装之前应该还要介绍虚拟机的安装与配置,以及虚拟网络的配置,但是我使用的是vmware,而视频课使用的是vagrant,这一块我简看的,因此没有过多的介绍,至于vmware的安装配置和虚拟网络的配置我倒是可以给大家推荐两篇博客: VMware 安装 Centos7 超详细过程:https://www.runoob.com/w3cnote/vmware-install-centos7.html VMware虚拟机下Centos7 桥接方式网络配置完整步骤:https:…

DOCKER 安装步骤-最靠谱的笔记

一.系统环境规划服务器名项目名称 docker 操作系统 CentOS Linux release 7.1.1503 (Core) Docker 版本 17.03.2-ce 二.Docker 简介 Docker 容器可以简单的理解为是一个轻量级的虚拟机,容器和容器之间是相互隔离的.虚拟机和虚拟机之间是操作系统上的隔离,而容器和容器之间是进程上的隔离. 使用Docker 可以给我们带来很大的方便,比如:可以在一台主机上创建多个容器,当做多个节点来使用:在一台机器上安装多个MySQL 实例,…

Docker 安装部署

Docker学习笔记一.Ubuntu Docker 安装 (1).获取最新版本Docker安装包 lyn@lyn:/data/docker$ sudo wget -qO- https://get.docker.com/ | sh 当要以非root用户可以直接运行docker时,需要执行 sudo usermod -aG docker lyn 命令,然后重新登陆 (2).启动docker 后台服务 lyn@lyn:~$ sudo service docker start 二. Docker 容器…

Mac 下 docker安装

http://www.th7.cn/system/mac/201405/56653.shtml Mac 下 docker安装以及处理错误Cannot connect to the Docker daemon. Is 'docker -d' running on this host? 和 dial unix /var/run/docker.sock: no such file or directory 云主机可以选择系统镜像快速创建主机,这比虚拟机更便捷了,我们本地也可以这么做了,因为有了Do…

docker安装hadoop集群

docker安装hadoop集群?图啥呢?不图啥,就是图好玩.本篇博客主要是来教大家如何搭建一个docker的hadoop集群.不要问为什么我要做这么无聊的事情,答案你也许知道,因为没有女票....... 好了,不多说这些没有必要的东西了,首先,我们来安装docker. 一.docker的安装 sudo yum install -y docker-io sudo wget https://get.docker.com/builds/Linux/x86_64/docker-latest -O /…

Docker安装准备

第一次写作下笔记: 以centos6.5安装yum优先级插件 yum install yum-priorities 1.epel简介: https://fedoraproject.org/wiki/EPEL/zh-cn rpm -Uvh http://mirrors.ustc.edu.cn/fedora/epel/6/x86_64/epel-release-6-8.noarch.rpm rpm -Uvh http://rpms.famillecollet.com/enterprise/remi-…

Docker+Hadoop+Hive+Presto 使用Docker部署Hadoop环境和Presto

Background 一. 什么是Presto Presto通过使用分布式查询,可以快速高效的完成海量数据的查询.如果你需要处理TB或者PB级别的数据,那么你可能更希望借助于Hadoop和HDFS来完成这些数据的处理.作为Hive和Pig(Hive和Pig都是通过MapReduce的管道流来完成HDFS数据的查询)的替代者,Presto不仅可以访问HDFS,也可以操作不同的数据源,包括:RDBMS和其他的数据源(例如:Cassandra). Presto被设计为数据仓库和数据分析产品:数据分析.…

【转】docker安装PostgreSQL

原文:https://blog.csdn.net/liuyueyi1995/article/details/61204205 你先确认这两件事:1)执行 docker exec -it dream.php bash,到 php 存放目录看看,如果看不到你的文件,目录映射多半有问题:2)确认 fastcgi_param 设置的路径,先配成绝对路径(如上文)试试. --------------------------------------------------------------------…

Docker小白使用笔记

本文来自网易云社区. 本人DBA一枚,但因为工作的关系,接手的机器越来越多,要部署的东西也从MySQL扩展到其他千奇百怪的各种应用服务,因此需要使用自动化部署的场景也越来越多.早就听运维部的其他大大们说过Docker可以方便的打包镜像.自动化部署,但是最近才抽出时间来学习下.这篇文章就以一个docker小白的身份,介绍下Docker是什么,可以做什么,以及使用入门ABC. 1. Docker是什么 a) Docker 可以理解成一个超轻量级的虚拟机,专业的说法叫应用容器,它是在L…

调度系统Airflow1.10.4调研与介绍和docker安装

Airflow1.10.4介绍与安装现在是9102年,8月中旬.airflow当前版本是1.10.4. 随着公司调度任务增大,原有的,基于crontab和mysql的任务调度方案已经不太合适了,需要寻找一个可以支持分布式扩容的调度系统解决方案. 最初瞄准azkaban来着,想着基于这个的二次开发.对比功能和社区热度之后,Airflow比较符合我们寻找的调度系统. 什么是Airflow Airflow是一个以编程方式创作,安排和监控工作流程的平台.对比crontab来看,它是一个可以定时调度任务…

Docker安装Redis及Warning解决方法

虚拟机环境:VirtualBox 操作系统:CentOS 7 宿主机: Microsoft Windows 10 家庭中文版 Docker简介 Docker是一个轻量级容器技术.Docker直接运行在Linux上,而不是运行在虚拟机上,实现了虚拟机技术的资源格式,性能高于虚拟机技术. 1)工作流程: Docker支持将软件编译成一个镜像,在这个镜像里做好软件的各种配置,然后发布这个镜像,使用者可以运行这个镜像,运行中的镜像被称为容器. 2)核心概念: 镜像(Image):Docker镜像用于创建…

docker安装gitlab并部署CICD

摘要本文主要实现了在docker下安装gitlab,将gitlab绑定在宿主机的180端口,将gitlab的clone的URL添加指定端口号:部署了CI/CD,并公布了测试项目. 安装docker[1] 删除旧版本的docker(如果未安装则忽略) sudo apt-get remove docker docker-engine docker.io containerd runc 安装依赖 sudo apt-get update sudo apt-get install \ apt-trans…

Linux 系统基于 Hadoop 安装 Hive

[注意]安装hive前提是要先安装hadoop集群,并且hive只需要在hadoop的namenode节点集群里安装即可(在所有的namenode上安装),可以不在datanode节点的机器上安装. 一.安装和配置Hive 1. 下载Hive Hive的官方下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/hive/hive-2.3.7/apache-hive-2.3.7-bin.tar.gz 2. 安装Hive 将hive的二进制包上传到服务器中…

[RabbitMQ]01. 在 Win10 下通过 Docker 安装

目录 win10家庭版 win10专业版和企业版 1. 开启Hyper-v 2. 安装Toolbox工具 3. 运行安装文件 4. 启动docker 5. 安装rabbitmq 6. 网页访问rabbitmq Docker 命令方式安装容器操作 RabbitMQ的用户角色 none management policymaker monitoring administrator RabbitMQ 命令行方式创建用户并设置角色 RabbitMQ 权限控制为用户赋权: 查看权限: win10家庭版…

安装Hive(独立模式使用mysql连接)

安装Hive(独立模式使用mysql连接) 1.默认安装了java+hadoop 2.下载对应hadoop版本的安装包 3.解压安装包 tar zxvf apache-hive-1.2.1-bin.tar.gz 4.安装mysql yum -y install mysql-server mysql mysqldev //需要以root身份运行另外可能需要配置yum源 mysql常用命令: service mysqld start/stop chkconfig mysqld on //加入开机…

docker入门-学习笔记

docker可以类比成window下的VMware或者virtualbox软件.docker有两个基本的概念:容器(container)和镜像(image),分别对应为VMware中的系统镜像和系统镜像中运行的软件.docker的强大之处在于VMware只能运行几个个虚拟机的设备上docker可以同时运行几十个甚至上百个虚拟机.接下来,让我们开始docker的初体验. docker的github地址是:https://github.com/docker/docker 官方网站是:https://…