4.hadoop的安装与配置
1.下载hadoop-2.6.2.tar.gz。
2.复制hadoop-2.6.2.tar.gz到/usr/local/目录下。
3解压
#tar -zxvf hadoop-2.6.2.tar.gz
#mv hadoop-2.6.2 hadoop

5.修改环境变量
export HADOOP_HOME=/usr/local/hadoop
export PATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH

6.hadoop目录结构

7.配置文件修改
(1).hadoop 环境变量脚本文件hadoop-env.sh

(2).yarn 环境变量脚本文件yarn-env.sh

(3).hadoop 核心配置文件core-site.xml

(4).hdfs 配置文件hdfs-site.xml

(5).配置文件yarn-site.xml

(6).创建和配置mapred-site.xml
默认情况下,/usr/local/hadoop/etc/hadoop/文件夹下有mapred.xml.template文件,我们要复制该文件,
并命名为mapred.xml,该文件用于指定MapReduce使用的框架。
复制并重命名
cp mapred-site.xml.template mapred-site.xml
8.格式化文件系统
hdfs namenode –format

9.启动Hadoop
sbin/start-dfs.sh

10.如何执行这些程序呢?如下,用 wordcount 程序说明

4.hadoop的安装与配置的更多相关文章
- hadoop的安装和配置(三)完全分布式模式
		
博主会用三篇文章为大家详细说明hadoop的三种模式: 本地模式 伪分布模式 完全分布模式 完全分布式模式: 前面已经说了本地模式和伪分布模式,这两种在hadoop的应用中并不用于实际,因为几乎没人会 ...
 - hadoop的安装和配置(二)伪分布模式
		
博主会用三篇文章为大家详细的说明hadoop的三种模式: 本地模式 伪分布模式 完全分布模式 伪分布式模式: 这篇为大家带来hadoop的伪分布模式: 从最简单的方面来说,伪分布模式就是在本地模式上修 ...
 - Ubuntu下伪分布式模式Hadoop的安装及配置
		
1.Hadoop运行模式Hadoop有三种运行模式,分别如下:单机(非分布式)模式伪分布式(用不同进程模仿分布式运行中的各类节点)模式完全分布式模式注:前两种可以在单机运行,最后一种用于真实的集群环境 ...
 - Hadoop(2)-CentOS下的jdk和hadoop的安装与配置
		
准备工作 下载jdk8和hadoop2.7.2 使用sftp的方式传到hadoop100上的/opt/software目录中 配置环境 如果安装虚拟机时选择了open java,请先卸载 rpm -q ...
 - Linux中Hadoop的安装与配置
		
一.准备 1,配通网络 ping www.baidu.com 之前安装虚拟机时配过 2,关闭防火墙 systemctl stop firewalld systemctl disable firewal ...
 - ubuntu在虚拟机下的安装 ~~~  Hadoop的安装及配置   ~~~   Hdfs中eclipse的安装
		
前言 Hadoop是基于Java语言开发的,具有很好跨平台的特性.Hadoop的所要求系统环境适用于Windows,Linux,Mac系统,我们推荐选择使用Linux或Mac系统.而Linux系统则 ...
 - Hadoop单机版安装,配置,运行
		
Hadoop是最近非常流行的东东啦,但是乍一看都觉得是集群的东东,其实在单机版上安装Hadoop也是可以的,并且安装好以后可以很方便的进行程序的调试,调试好程序以后再丢到集群中,放心的算吧,呵呵.. ...
 - hadoop的安装和配置(一)本地模式
		
博主会用三篇文章来为大家详细的说明hadoop的三种模式: 本地模式 伪分布模式 完全分布模式 本地模式: 思路走向 |--------------------| | ①:配置Java环境 | | ...
 - Ubuntu16.04 下 hadoop的安装与配置(伪分布式环境)
		
一.准备 1.1创建hadoop用户 $ sudo useradd -m hadoop -s /bin/bash #创建hadoop用户,并使用/bin/bash作为shell $ sudo pass ...
 - Mac Hadoop的安装与配置
		
这里介绍Hadoop在mac下的安装与配置. 安装及配置Hadoop 首先安装Hadoop $ brew install Hadoop 配置ssh免密码登录 用dsa密钥认证来生成一对公钥和私钥: $ ...
 
随机推荐
- Jquyer相册
			
点击图片然后弹出相册列表,效果如下: html代码: <!DOCTYPE html> <html xmlns="http://www.w3.org/1999/xhtml&q ...
 - Razor---服务器端标记语言
			
Razor 是一种允许您向网页中嵌入基于服务器的代码(Visual Basic 和 C#)的标记语法<ul> @for (int i = 0; i < 10; i++) { < ...
 - 二维前缀和好题hdu6514
			
#include<bits/stdc++.h> #define rep(i,a,b) for(int i=a;i<=b;i++) using namespace std; ]; )* ...
 - ansible的lookup
			
lookup路径: /usr/lib/python2.7/site-packages/ansible/plugins/lookup 所有的lookup插件列表cartesian.py dnstxt.p ...
 - CodeForces - 833B The Bakery
			
题解: 线段树经典应用 首先暴力$f[i][j]$表示考虑前i位分成j段的最大值 转移$f[k][j-1]+cost(k+1,i)$枚举k转移 不同数的经典套路就是从它到它前驱这一段 于是维护每个数前 ...
 - 程序猿最浪漫的表白,肯定会得到你的她——Jason niu    原文来自GitHub,本人已部分修改
			
程序猿最浪漫的表白,肯定会得到你的她——Jason niu 原文来自GitHub,主页本人已部分修改,感谢程序猿大神wuxia2001和hackerzhou的开源,感谢这两位大神! 视频结果展示 ...
 - 20172328 2018-2019《Java软件结构与数据结构》第五周学习总结
			
20172328 2018-2019<Java软件结构与数据结构>第五周学习总结 概述 Generalization 本周学习了第九章:排序与查找,主要包括线性查找和二分查找算法和几种排序 ...
 - python使用urllib2 http 下载参数的try catch
			
import urllib2 req = urllib2.Request('http://blog.csdn.net/cqcre')try: urllib2.urlopen(req)except ur ...
 - python学习:格式化输出
			
格式化输出 代码如下: name = input("Name:") age = input("Age:") job = input("Job:&quo ...
 - 转 MYSQL   SELECT ... FOR UPDATE and SELECT ... LOCK IN SHARE MODE Locking Reads
			
原文: http://dev.mysql.com/doc/refman/5.0/en/innodb-locking-reads.html In some circumstances, a consis ...