第一步:下载eclipse-jee-kepler-SR2-linux-gtk-x86_64.tar.gz 注意:如果电脑是64位,就下载linux下的64位eclipse,不要下载32位的eclipse,不然会无法启动eclipse 第二步:下载最新版本的hadoop插件 重命名:将下载的插件重命名为"hadoop-eclipse-plugin-1.1.1.jar" 将hadoop-eclipse-plugin-1.1.1.jar复制到eclipse/plugins目录下,重启ecli…
在前面一篇文章中介绍了如果在完全分布式的环境下搭建Hadoop0.20.2,现在就再利用这个环境完成开发. 首先用hadoop这个用户登录linux系统(hadoop用户在前面一篇文章中创建的),然后下载eclipse的tar.gz包到/home/hadoop/这个目录下,直接解压缩,于是就会存在/home/hadoop/eclipse这个目录.在开发之前需要将hadoop0.20.2目录下面的一个jar复制到eclipse下面去.(注:在上一篇文章中我将hadoop0.20.2文件夹修改成了h…
正在实习的公司项目是使用Maven+SVN管理的,所以转到Ubuntu下也要靠自己搭环境,自己动手,丰衣足食.步骤有点简略,但还是能理解的. 一.安装JDK7 打开终端(Ctrl+Alt+T),输入 -jdk ,即可安装openjdk 二.安装Eclipse 在终端输入 sudo apt-get install eclipse ,即可安装eclipse.安装完毕后,Java的IDE开发环境就已经搭建完成啦 三.安装SVN 打开Eclipse,选择help--install new softwar…
一.准备运行所需Jar包 1)avro-1.7.4.jar 2)commons-cli-1.2.jar 3)commons-codec-1.4.jar 4)commons-collections-3.2.1.jar 5)commons-compress-1.4.1.jar 6)commons-configuration-1.6.jar 7)commons-io-2.4.jar 8)commons-lang-2.6.jar 9)commons-logging-1.2.jar 10)commons-…
按此文章<Hadoop集群(第7期)_Eclipse开发环境设置>进行MapReduce开发环境搭建的过程中遇到一些问题,饶了一些弯路,解决办法记录在此: 文档目的: 记录windows环境下Eclipse开发MapReduce程序遇到的四个问题及解决办法: 问题一:程序运行时报JobTracker is in safe mode: security.UserGroupInformation: PriviledgedActionException as:hadoop cause:org.apa…
Linux环境下使用eclipse开发C++动态链接库程序 Linux中也有类似windows中DLL的变成方法,只不过名称不同而已.在Linux中,动态链接叫做Standard Object,生成的动态链接文件为*.so.详细请参考相关文档. 开发环境:Eclipse 3.4.2 G++:4.3.2 1. 创建动态链接库 (1)在Eclipse中创建新的C++工程 File->New->Project->C++->C++ Project,选择Shared Library. (2)…
最近把工作环境转移到了Ubuntu Kylin下,发现在这下面Java环境还是很方便的.然而也经历了一些摸索的过程,故作文以记之. 一/开发前准备 安装系统/配置软件源,这部分内容没什么需要注意的.OS版本:ubuntu kylin 14.04 二/安装JDK 在ubuntu软件中心并没有找到SUN官方的JDK,只有OPENJDK.其实它们是兼容的,只是OPENJDK比前者的版本会有滞后.现在是2015年8月30日,OPENJDK目前只能支持到JDK7,而官方JDK已经到了8.如果你必须要安装官…
需要统一的参数: 当配置好eclipse中hadoop的程序后,几个参数需要统一一下: hadoop安装目录下/etc/core_site.xml中 fs.default.name的端口号一定要与hadoop locations中的相应参数保持一致; 当运行主函数时,往往都需要输入参数:input和output,这里的路径是Hadoop自己的文件系统hdfs中的路径,在本地文件夹中无法中找到,应该为:hdfs://localhost:8020/user/input  hdfs://localho…
描述:在Windows下使用Eclipse进行Hadoop的程序编写,然后Run on hadoop 后,出现如下错误: 11/10/28 16:05:53 INFO mapred.JobClient: Running job: job_201110281103_000311/10/28 16:05:54 INFO mapred.JobClient: map 0% reduce 0%11/10/28 16:06:05 INFO mapred.JobClient: Task Id : attemp…
目的: 学习使用hdfs 的java命令操作 相关: 进化: [b0010] windows 下 eclipse 开发 hdfs程序样例 (二) [b0011] windows 下 eclipse 开发 hdfs程序样例 (三) 环境: hadoop2.6.4 伪分布式 win7 + eclipse Version: Luna Service Release 1 (4.4.1) 1. 新建项目 1.1 新建java项目  Hadoop_伪分布式 1.2 导入hadoop 2.6.4 的jar包…