strom的使用01
1.strom的安装和测试
1.1 搭建zookeeper集群
参考hadoop2.0初识1.3中的1.4配置zookeeper集群和自动故障转移
1.2 安装storm依赖的软件
sudo yum install gcc-c++
sudo yum install uuid-devel
sudo yum install libuuid-devel
sudo yum install libtool
sudo yum install git
1.2.1 安装zeromq
tar -zxf zeromq-3.2.5.tar.gz -C /opt/app/
cd /opt/app/zeromq-3.2.5/
./configure
make
sudo make install
1.2.2 安装jzmq
git clone https://github.com/nathanmarz/jzmq.git
cd /opt/softwares/jzmq/
./autogen.sh
./configure
make
sudo make install
1.3 安装storm
1.3.1 解压storm安装包
tar -zxf apache-storm-1.0.2.tar.gz -C /opt/app/
1.3.2 配置java环境变量,修改/opt/app/storm-1.0.2/conf/storm-env.sh文件
1.3.3 配置storm配置文件,修改/opt/app/storm-1.0.2/conf/storm.yaml文件
1.3.4 将storm分发到其他两个节点
scp -r storm-1.0.2/ beifeng@hadoop-senior02.ibeifeng.com:/opt/app/
scp -r storm-1.0.2/ beifeng@hadoop-senior03.ibeifeng.com:/opt/app/
1.3.4 启动strom,并挂载到后台进行中
1.3.4.1 启动nimbus
[beifeng@hadoop-senior storm-1.0.2]$ nohup bin/storm nimbus &
1.3.4.2 启动ui
[beifeng@hadoop-senior storm-1.0.2]$ nohup bin/storm ui &
1.3.4.3 启动supervisor(在另两台节点上启动)
[beifeng@hadoop-senior02 storm-1.0.2]$ nohup bin/storm supervisor &
[beifeng@hadoop-senior03 storm-1.0.2]$ nohup bin/storm supervisor &
1.3.5 查看是否启动成功
方法一:通过查看日志文件
方法二:通过浏览器查看
strom的使用01的更多相关文章
- Flume+Kafka+Strom基于伪分布式环境的结合使用
目录: 一.Flume.Kafka.Storm是什么,如何安装? 二.Flume.Kafka.Storm如何结合使用? 1) 原理是什么? 2) Flume和Kafka的整合 3) Kafka和St ...
- 01.SQLServer性能优化之----强大的文件组----分盘存储
汇总篇:http://www.cnblogs.com/dunitian/p/4822808.html#tsql 文章内容皆自己的理解,如有不足之处欢迎指正~谢谢 前天有学弟问逆天:“逆天,有没有一种方 ...
- 用Kotlin创建第一个Android项目(KAD 01)
原文标题:Create your first Android project using Kotlin (KAD 01) 作者:Antonio Leiva 时间:Nov 21, 2016 原文链接:h ...
- Java企业实训 - 01 - Java前奏
前言: 虽然个人专攻.NET方向,不过由于个人是干教育行业的,方方面面的东西,不能说都必须精通,但肯定多少都会涉及到. 一个菜鸟学员,从啥都不会,经过一步步学习,最后到企业上手掌管一个模块甚至一个项目 ...
- Node.js 教程 01 - 简介、安装及配置
系列目录: Node.js 教程 01 - 简介.安装及配置 Node.js 教程 02 - 经典的Hello World Node.js 教程 03 - 创建HTTP服务器 Node.js 教程 0 ...
- 0042 MySQL学习笔记-入门--01
基本概念: 数据库DB(database): 数据的仓库,数据的集合,是数据的一种结构化的存储 数据库管理系统DBMS(database management system): 管理数据库的一套软件 ...
- Android快乐贪吃蛇游戏实战项目开发教程-01项目概述与目录
一.项目简介 贪吃蛇是一个很经典的游戏,也很适合用来学习.本教程将和大家一起做一个Android版的贪吃蛇游戏. 我已经将做好的案例上传到了应用宝,无病毒.无广告,大家可以放心下载下来把玩一下.应用宝 ...
- ArtifactTransferException: Failure to transfer org.apache.openejb:javaee-api:jar:5.0-1
最近在myeclipse上创建maven类型的web项目的时候,出现了一个错误. ArtifactTransferException: Failure to transfer org.apache.o ...
- Python学习--01入门
Python学习--01入门 Python是一种解释型.面向对象.动态数据类型的高级程序设计语言.和PHP一样,它是后端开发语言. 如果有C语言.PHP语言.JAVA语言等其中一种语言的基础,学习Py ...
随机推荐
- :active 为什么在ios上失效
:active是针对鼠标,而手机上是没有鼠标,而是touchstart,所以早成了ios上不兼容 解决方法是: window.onload = function(){ document.body.ad ...
- kafka集群搭建和使用Java写kafka生产者消费者
1 kafka集群搭建 1.zookeeper集群 搭建在110, 111,112 2.kafka使用3个节点110, 111,112 修改配置文件config/server.properties ...
- Spring操作指南-AOP基本示例(基于注解)
- Syntax highlighting in fenced code blocks
Python @requires_authorization def somefunc(param1='', param2=0): r'''A docstring''' if param1 > ...
- Elasticsearch之client源码简要分析
问题 让我们带着问题去学习,效率会更高 1 es集群只配置一个节点,client是否能够自动发现集群中的所有节点?是如何发现的? 2 es client如何做到负载均衡? 3 一个es node ...
- WPF中弹出文件夹浏览对话框
附一个共享目录正则表达式判断: bool result= System.Text.RegularExpressions.Regex.IsMatch("\\pc-test\share" ...
- Java被忽略的基本知识(四)
Java IO(不是一般的重要) 54.IO中的流:字节流(InputStream.OutputStream).字符流(Reader.Writer).转换流(InputStreamReader.Out ...
- __PUBLIC__ 路径更改
config.php 'TMPL_PARSE_STRING' => array( '__PUBLIC__' => __ROOT__ . '/' . APP_NAME . '/Tpl/Pub ...
- 使用C#创建快捷方式
在Windows中创建快捷方式很简单,直接用右键点击文件或文件夹,选择创建快捷方式即可.如果想用C#代码的方式创建,就没有那么方便了,因为.NET框架没有提供直接创建快捷方式的方法. 首先我们看一下快 ...
- Git远程操作详解
Git是目前最流行的版本管理系统,学会Git几乎成了开发者的必备技能. Git有很多优势,其中之一就是远程操作非常简便.本文详细介绍5个Git命令,它们的概念和用法,理解了这些内容,你就会完全掌握Gi ...