docker安装hadoop
docker为hadoop的云化带来了极大便利,安装和应用也会更快更方便.进入正题:
docker search hadoop
将会看到如下结果:
INDEX NAME DESCRIPTION STARS OFFICIAL AUTOMATED
docker.io docker.io/sequenceiq/hadoop-docker An easy way to try Hadoop [OK]
docker.io docker.io/sequenceiq/hadoop-ubuntu An easy way to try Hadoop on Ubuntu [OK]
docker.io docker.io/ruo91/hadoop Apache hadoop .x - Pseudo-Distributed Mode [OK]
docker.io docker.io/uhopper/hadoop Base Hadoop image with dynamic configurati... [OK]
docker.io docker.io/gelog/hadoop WORK IN PROGRESS. NOT PRODUCTION READY [OK]
docker.io docker.io/uhopper/hadoop-resourcemanager Hadoop resourcemanager [OK]
docker.io docker.io/dockmob/hadoop Docker images for Apache Hadoop (YARN, HDF... [OK]
docker.io docker.io/lewuathe/hadoop-master Multiple node hadoop cluster on Docker. [OK]
docker.io docker.io/uhopper/hadoop-datanode Hadoop datanode [OK]
docker.io docker.io/uhopper/hadoop-namenode Hadoop namenode [OK]
docker.io docker.io/uhopper/hadoop-nodemanager Hadoop nodemanager [OK]
docker.io docker.io/falkonry/hadoop Docker config for hadoop image [OK]
docker.io docker.io/ading1977/hadoop Docker image for multi-node hadoop cluster. [OK]
我们当然选择星最多的.选择第一个:
docker pull sequenceiq/hadoop-docker
然后等待下载.
下载完毕之后启动docker镜像:
docker run -it --name hadoop sequenceiq/hadoop-docker /etc/bootstrap.sh -bash
测试运行:
cd $HADOOP_PREFIX
# run the mapreduce
bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7..jar grep input output 'dfs[a-z.]+' # check the output
bin/hdfs dfs -cat output/*
我下载的时候最新的还是这个2.7版本.后来的小伙伴也不一定是2.7呦.可以进入share目录去看一下提供的测试jar包是什么版本然后运行,然后查看输出结果
docker安装hadoop的更多相关文章
- docker安装hadoop集群
docker安装hadoop集群?图啥呢?不图啥,就是图好玩.本篇博客主要是来教大家如何搭建一个docker的hadoop集群.不要问 为什么我要做这么无聊的事情,答案你也许知道,因为没有女票.... ...
- docker 安装hadoop
上一篇文章介绍了一些docker的基本命令,这篇文章来安装一个HADOOP 一.下载hadoop镜像 @~/git/github/docker-ambari (master)$ docker pull ...
- Docker 安装Hadoop集群
资源准备:jdk1.8及hadoop2.7.3 链接:https://pan.baidu.com/s/1x8t1t2iY46jKkvNUBHZlGQ 提取码:g1gm 复制这段内容后打开百度网盘手机A ...
- Docker 安装Hadoop HDFS命令行操作
网上拉取Docker模板,使用singlarities/hadoop镜像 [root@localhost /]# docker pull singularities/hadoop 查看: [root@ ...
- Docker 构建Hadoop环境
参考如下文章: Docker安装Hadoop Docker在本地搭建Hadoop分布式集群 Docker快速搭建Hadoop测试环境 从0开始用docker搭建 hadoop分布式环境 Docker- ...
- HADOOP docker(一):安装hadoop实验集群(略操蛋)
一.环境准备 1.1.机器规划 主机名 别名 IP 角色 9321a27a2b91 hadoop1 172.17.0.10 NN1 ZK RM 7c3a3c9cd595 hadoo ...
- docker安装单机hadoop
安装环境 centos7. docker -ce(这个安装参考我的另外一篇博客 首先关闭防火墙 systemctl stop firewalld.service #停止firewall systemc ...
- Docker部署Hadoop集群
Docker部署Hadoop集群 2016-09-27 杜亦舒 前几天写了文章"Hadoop 集群搭建"之后,一个朋友留言说希望介绍下如何使用Docker部署,这个建议很好,Doc ...
- 使用docker安装部署Spark集群来训练CNN(含Python实例)
使用docker安装部署Spark集群来训练CNN(含Python实例) http://blog.csdn.net/cyh_24/article/details/49683221 实验室有4台神服务器 ...
随机推荐
- sql 将表B中不存在表A的数据 插入到表A中
insert into tableA select * from tableB b where not exists(select 1 from tableA a where a.id = b.id) ...
- JQuery 多选按钮checkbox
JQuery 多选按钮checkbox 在需要全选和选择部分的时候我们就需要多选在这里主要介绍了具体的实现 JQuery $(function () { //全选或全不选 $("#allbo ...
- Spring的后置处理器BeanPostProcessor
一.BeanPostProcessor接口的作用 如果我们需要在Spring容器完成Bean的实例化.配置和其他的初始化前后添加一些自己的逻辑处理,我们就可以定义一个或者多个BeanPostProce ...
- .net core 时间戳转换
/// <summary> /// 时间戳和日期的转化 /// </summary> public class DateTimeUtility { /// <summar ...
- JVM调优总结-调优方法
JVM调优工具 Jconsole,jProfile,VisualVM Jconsole : jdk自带,功能简单,但是可以在系统有一定负荷的情况下使用.对垃圾回收算法有很详细的跟踪 JProfiler ...
- 关于Adobe CC 系列软件反复弹出 Adobe 软件许可问题
最近装了falsh cc2014 版本,并结合网络提供资源破解(可参考:http://www.cnblogs.com/-yan/p/4450196.html) 但是,使用超过二十四小时后(时间为估计值 ...
- requirejs 一个拆分js项目的类库
http://www.requirejs.cn/ http://requirejs.org/docs/start.html
- postfix日志分析pflogsumm
1.pflogsumm功能:统计接收.投递.转发.延时.反弹.拒绝.保留.丢弃的邮件统计发件人和收件人 统计发送和接受方主机/域名 统计SMTPD连接数...... 2.安装# yum install ...
- 笨方法学python--字符串和文本
1print 变量 abc = False joke_string = "Isn't that joke so funny?! %r" print joke_string %abc ...
- css3的box-sizing
给了两个并排带边框的div百分比宽度,假如不用box-sizing,边框的宽度会在行内显示.用box-sizing:border-box,可以去除边框的占位. 浏览器支持IE9以上及火狐.谷歌.Ope ...