strom的使用01
1.strom的安装和测试
1.1 搭建zookeeper集群
参考hadoop2.0初识1.3中的1.4配置zookeeper集群和自动故障转移
1.2 安装storm依赖的软件
sudo yum install gcc-c++
sudo yum install uuid-devel
sudo yum install libuuid-devel
sudo yum install libtool
sudo yum install git
1.2.1 安装zeromq
tar -zxf zeromq-3.2.5.tar.gz -C /opt/app/
cd /opt/app/zeromq-3.2.5/
./configure
make
sudo make install
1.2.2 安装jzmq
git clone https://github.com/nathanmarz/jzmq.git
cd /opt/softwares/jzmq/
./autogen.sh
./configure
make
sudo make install
1.3 安装storm
1.3.1 解压storm安装包
tar -zxf apache-storm-1.0.2.tar.gz -C /opt/app/
1.3.2 配置java环境变量,修改/opt/app/storm-1.0.2/conf/storm-env.sh文件
1.3.3 配置storm配置文件,修改/opt/app/storm-1.0.2/conf/storm.yaml文件
1.3.4 将storm分发到其他两个节点
scp -r storm-1.0.2/ beifeng@hadoop-senior02.ibeifeng.com:/opt/app/
scp -r storm-1.0.2/ beifeng@hadoop-senior03.ibeifeng.com:/opt/app/
1.3.4 启动strom,并挂载到后台进行中
1.3.4.1 启动nimbus
[beifeng@hadoop-senior storm-1.0.2]$ nohup bin/storm nimbus &
1.3.4.2 启动ui
[beifeng@hadoop-senior storm-1.0.2]$ nohup bin/storm ui &
1.3.4.3 启动supervisor(在另两台节点上启动)
[beifeng@hadoop-senior02 storm-1.0.2]$ nohup bin/storm supervisor &
[beifeng@hadoop-senior03 storm-1.0.2]$ nohup bin/storm supervisor &
1.3.5 查看是否启动成功
方法一:通过查看日志文件
方法二:通过浏览器查看
strom的使用01的更多相关文章
- Flume+Kafka+Strom基于伪分布式环境的结合使用
目录: 一.Flume.Kafka.Storm是什么,如何安装? 二.Flume.Kafka.Storm如何结合使用? 1) 原理是什么? 2) Flume和Kafka的整合 3) Kafka和St ...
- 01.SQLServer性能优化之----强大的文件组----分盘存储
汇总篇:http://www.cnblogs.com/dunitian/p/4822808.html#tsql 文章内容皆自己的理解,如有不足之处欢迎指正~谢谢 前天有学弟问逆天:“逆天,有没有一种方 ...
- 用Kotlin创建第一个Android项目(KAD 01)
原文标题:Create your first Android project using Kotlin (KAD 01) 作者:Antonio Leiva 时间:Nov 21, 2016 原文链接:h ...
- Java企业实训 - 01 - Java前奏
前言: 虽然个人专攻.NET方向,不过由于个人是干教育行业的,方方面面的东西,不能说都必须精通,但肯定多少都会涉及到. 一个菜鸟学员,从啥都不会,经过一步步学习,最后到企业上手掌管一个模块甚至一个项目 ...
- Node.js 教程 01 - 简介、安装及配置
系列目录: Node.js 教程 01 - 简介.安装及配置 Node.js 教程 02 - 经典的Hello World Node.js 教程 03 - 创建HTTP服务器 Node.js 教程 0 ...
- 0042 MySQL学习笔记-入门--01
基本概念: 数据库DB(database): 数据的仓库,数据的集合,是数据的一种结构化的存储 数据库管理系统DBMS(database management system): 管理数据库的一套软件 ...
- Android快乐贪吃蛇游戏实战项目开发教程-01项目概述与目录
一.项目简介 贪吃蛇是一个很经典的游戏,也很适合用来学习.本教程将和大家一起做一个Android版的贪吃蛇游戏. 我已经将做好的案例上传到了应用宝,无病毒.无广告,大家可以放心下载下来把玩一下.应用宝 ...
- ArtifactTransferException: Failure to transfer org.apache.openejb:javaee-api:jar:5.0-1
最近在myeclipse上创建maven类型的web项目的时候,出现了一个错误. ArtifactTransferException: Failure to transfer org.apache.o ...
- Python学习--01入门
Python学习--01入门 Python是一种解释型.面向对象.动态数据类型的高级程序设计语言.和PHP一样,它是后端开发语言. 如果有C语言.PHP语言.JAVA语言等其中一种语言的基础,学习Py ...
随机推荐
- ActiveMQ简介
ActiveMQ 1.ActiveMQ是什么ActiveMQ是Apache推出的一款开源的完全支持JMS1.1和J2EE1.4规范的JMS Provider实现的消息中间件(Message Orien ...
- web app上传图片
很就很久以前,web app上传图片需要通过cordova插件,那时候好像还叫phonegap. 后来一个html标签就可以了 <input type="file" clas ...
- node的错误处理
当node程序出现错误的时候,首先是要捕捉到错误,然后处理错误,不能让进程挂掉,最后是将错误写进日志. 1.在app.js最开始写,用process对象,监听uncaughtException事件pr ...
- oracle中的使用总结一
1.ORA-12560: TNS: 协议适配器错误 造成ORA-12560: TNS: 协议适配器错误的问题的原因有三个: 1.监听服务没有起起来.windows平台个一如下操作:开始---程序--- ...
- 使用mybatis-generator自动生成映射配置
使用mybatis时,编写实体类与数据库的映射是一项繁琐的工作,很容易出错,而mybatis-generator工具很好地解决了这个问题. 一.工具下载与配置 下载地址:① https://gith ...
- cs
cs <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.o ...
- cygwin E437
这个简单错误居然查到了 报错E437: terminal capability "cm" required 执行:# export TERM=xterm
- 基本C语言滤波算法
11种软件滤波方法的示例程序 假定从8位AD中读取数据(如果是更高位的AD可定义数据类型为int),子程序为get_ad(); 1.限副滤波 /* A值可根据实际情况调整 value为有效值,new ...
- Babel下的ES6兼容性与规范
前端开发 Babel下的ES6兼容性与规范 ES6标准发布后,前端人员也开发渐渐了解到了es6,但是由于兼容性的问题,仍然没有得到广泛的推广,不过业界也用了一些折中性的方案来解决兼容性和开发体系问 ...
- Lunix 命令
awk '{a[$1]+=1;if(a[$1]==1){print $0}}' awk -F ',' '{print $1, $6}' IS.csv | sort -k1n -k2n | awk ...