一. 自己搭建开发环境 今天自己搭建了一套Centos5.3 + Hadoop2.2 + Hbase0.96.1.1的开发环境,Win7 Eclipse调试MapReduce成功.可能是版本比较高的原因,出了问题,网上找不到完整解决方案,只能靠自己. 二. Hadoop安装 这个就不啰嗦了,网上大把文章.我下载的是hadoop-2.2.0.tar.gz. http://www.cnblogs.com/xia520pi/archive/2012/05/16/2503949.html 很详细的介绍了…

windows 下eclipse开发storm 用本地模式,直接run as 运行topology解决了可以什么都不用下,直接把storm-starter的源码下下来,1.在eclipse创建一个java 工程(不用创建maven工程,当然,会maven的用maven创建更加方便)2.把storm-starter下的src下的源码都copy到新建的java工程3.把storm-starter需要的jar包引入新建的java工程(这些java可以通过下载storm0.9.0,解压以后里面有个lib…

一.前言 环境: 系统:centos6.5 hadoop版本:Apache hadoop2.7.3(Windows和centos都是同一个) eclipse版本:4.2.0(juno版本,windows) ant版本:ant 1.7.1(windows) java版本:1.8.0_05(windows) 我是在虚拟机中安装的系统,具体的安装和配置参考:Hadoop单机伪分布部署. 二.制作插件 1. 下载hadoop2x-eclipse-plugin-master.zip 在github下载:h…

Hadoop的安装和配置可以参考我之前的文章:在Win7虚拟机下搭建Hadoop2.6.0伪分布式环境. 本篇介绍如何在Hadoop2.6.0基础上搭建spark1.4.0单机环境. 1. 软件准备 scala-2.11.7.tgz spark-1.4.0-bin-hadoop2.6.tgz 都可以从官网下载. 2. scala安装和配置 scala-2.11.7.tgz解压缩即可.我解压缩到目录/home/vm/tools/scala,之后配置~/.bash_profile环境变量. #sca…

eclipse调试solr 现在solr的源码包,我这里是4.10.2, 编译, ant ivy-bootstrap ant eclipse 导入elipse,将solr/example/solr/下的文件拷贝到solr/下 删除其他的collection run with jetty 修改端口为一个没被占用的端口,我这里用9966 启动日志 Configuration: C:\Users\bogon\AppData\Local\Temp\eclipseJettyPlugin.config.so…

1 eclipse中hadoop环境部署概览 eclipse 中部署hadoop包括两大部分:hdfs环境部署和mapreduce任务执行环境部署.一般hdfs环境部署比较简单,部署后就 可以在eclipse中像操作windows目录一样操作hdfs文件.而mapreduce任务执行环境的部署就比较复杂一点,不同版本对环境的要求度 高低不同就导致部署的复杂度大相径庭.例如hadoop1包括以前的版本部署就比较简单,可在windows和Linux执行部署运行,而hadoop2 及以上版本对环境要求…

小米2在Eclipse 调试,要注意下列步骤.1.连接线,打开设置:USB线连接小米2,在设置-->开发者选项->USB 调是打开.如果这一步,就业在Eclipse中真机调试,下面的步骤不要看了.如果不行,请继续:2.检查驱动:检查小米2驱动是否安装成功,如果win7下,安装驱动 稍稍和WinXP不一样.论坛里有相关的帖子:http://itbbs.pconline.com.cn/mobile/15569102.html3.如果还是不确定是否安装成功,请下载最新的 驱动安装精灵2012, 官方…

近几年大数据越来越火热.由于工作需要以及个人兴趣,最近开始学习大数据相关技术.学习过程中的一些经验教训希望能通过博文沉淀下来,与网友分享讨论,作为个人备忘. 第一篇,在win7虚拟机下搭建hadoop2.6.0伪分布式环境. 1. 所需要的软件 使用Vmware 11.0搭建虚拟机,安装Ubuntu 14.04.2系统. Jdk 1.7.0_80 Hadoop 2.6.0 2. 安装vmware和ubuntu 略 3. 在ubuntu中安装JDK 将jdk解压缩到目录:/home/vm/tool…

小米2在Eclipse 调试,要注意下列步骤.1.连接线,打开设置:USB线连接小米2,在设置-->开发者选项->USB 调是打开.如果这一步,就业在Eclipse中真机调试,下面的步骤不要看了.如果不行,请继续:2.检查驱动:检查小米2驱动是否安装成功,如果win7下,安装驱动 稍稍和WinXP不一样.论坛里有相关的帖子:http://itbbs.pconline.com.cn/mobile/15569102.html3.如果还是不确定是否安装成功,请下载最新的 驱动安装精灵2012, 官方…

问题描述 使用Eclipse调试代码的时候,打了断点,经常出现Source not found,网上找了半天,大部分提示点击Edit Source Lookup Path,添加被调试的工程,然而往往没啥效果,一闪而过,淡淡的忧伤... 一种可能的解决办法 一种可能原因是编译的class不是最新的. 解决办法:Eclipse选择Project菜单,点击clean...,清理下工程,使之重新构建,然后打断点调试,竟然好了.…