【Storm一】Storm安装部署
storm安装部署
解压storm安装包
$ tar -zxvf apache-storm-1.1.0.tar.gz -C /usr/local/src
修改解压后的apache-storm-1.1.0.tar.gz文件名称为storm-1.1.0
$ mv apache-storm-1.1.0 storm-1.1.0
在/usr/local/src/storm-1.1.0/目录下创建data文件夹
$ mkdir data
修改配置文件
- storm.yaml
设置Zookeeper的主机名称
storm.zookeeper.servers:
- "master"
- "slave1"
- "slave2"设置主节点的主机名称
nimbus.seeds: ["master"]设置Storm的数据存储路径
storm.local.dir: "/usr/local/src/data"设置Worker的端口号
supervisor.slots.ports:
- 6700
- 6701
- 6702
- 6703
配置环境变量
export STORM_HOME=/usr/local/src/storm-1.1.0
export PATH=$PATH:$STORM_HOME/bin
变量环境生效:source ~/.bashrc
分发配置好的Storm安装包
$ scp storm-1.1.0.tar.gz slave2:/usr/local/src/
启动集群
后台启动 nimbus
[root@master storm-1.1.0]$ bin/storm nimbus &
[root@slave1 storm-1.1.0]$ bin/storm nimbus &
[root@slave2 storm-1.1.0]$ bin/storm nimbus &
后台启动 supervisor
[root@master storm-1.1.0]$ bin/storm supervisor &
[root@master storm-1.1.0]$ bin/storm supervisor &
[root@master storm-1.1.0]$ bin/storm supervisor &
启动 Storm ui
[root@master storm-1.1.0]$ bin/storm ui &
通过浏览器查看集群状态,访问storm webUI
【Storm一】Storm安装部署的更多相关文章
- Storm介绍及安装部署
本节内容: Apache Storm是什么 Apache Storm核心概念 Storm原理架构 Storm集群安装部署 启动storm ui.Nimbus和Supervisor 一.Apache S ...
- Storm集群安装部署步骤【详细版】
作者: 大圆那些事 | 文章可以转载,请以超链接形式标明文章原始出处和作者信息 网址: http://www.cnblogs.com/panfeng412/archive/2012/11/30/how ...
- Storm入门教程 第三章Storm集群安装部署步骤、storm开发环境
一. Storm集群组件 Storm集群中包含两类节点:主控节点(Master Node)和工作节点(Work Node).其分别对应的角色如下: 主控节点(Master Node)上运行一个被称为N ...
- Storm集群安装部署步骤
本文以Twitter Storm官方Wiki为基础,详细描述如何快速搭建一个Storm集群,其中,项目实践中遇到的问题及经验总结,在相应章节以"注意事项"的形式给出. 1. Sto ...
- storm集群安装部署
安装步骤: 搭建Zookeeper集群: 安装Storm依赖库: 下载并解压Storm发布版本: 修改storm.yaml配置文件: 启动Storm各个后台进程. 1. 搭建Zookeeper集群 这 ...
- Storm集群安装详解
storm有两种操作模式: 本地模式和远程模式. 本地模式:你可以在你的本地机器上开发测试你的topology, 一切都在你的本地机器上模拟出来; 远端模式:你提交的topology会在一个集群的机器 ...
- Storm 安装部署
环境要求JDK 1.6+java -versionPython 2.6.6+python -V ZooKeeper3.4.5+storm 0.9.4+ 单机模式上传解压 $ .tar.gz $ cd ...
- twitter storm学习 - 安装部署问题汇总
已经碰到的或者将来碰到的关于安装部署方面的问题以及解决方法,先挖个坑 1.提交的topology在admin界面上看emitted始终都是0,查看日志发现有如下错误: worker [ERROR] E ...
- Redis安装,mongodb安装,hbase安装,cassandra安装,mysql安装,zookeeper安装,kafka安装,storm安装大数据软件安装部署百科全书
伟大的程序员版权所有,转载请注明:http://www.lenggirl.com/bigdata/server-sofeware-install.html 一.安装mongodb 官网下载包mongo ...
随机推荐
- 如何有效防止API的重放攻击(转自阿里云)
API重放攻击(Replay Attacks)又称重播攻击.回放攻击,这种攻击会不断恶意或欺诈性地重复一个有效的API请求.攻击者利用网络监听或者其他方式盗取API请求,进行一定的处理后,再把它重新发 ...
- 学习笔记---Javascript事件Event、IE浏览器下的拖拽效果
学习笔记---Javascript事件Event.IE浏览器下的拖拽效果 1. 关于event常用属性有returnValue(是否允许事件处理继续进行, false为停止继续操作).srcE ...
- Oracle物化视图详解
现实工作中会有多个数据源同步到一个数据库完成数据分析的场景,这些数据可以不是实时同步的,我们一般通过定时任务抽取数据到统计分析库给应用使用. 一般的同步方式可以通过时间戳做全量和增量数据同步(存在原数 ...
- Eclipse 中 SVN 提交过滤
- QT的QPropertyAnimation讲解
m_pAnimation->setEasingCurve(QEasingCurve::Linear); //直线风格 m_pAnimation->setLoopCount(-1); //无 ...
- linux下查看磁盘文件系统
df -Th fdisk -l parted -l lsblk -f blkid
- July 18th 2017 Week 29th Tuesday
My heart is stronger now that you are in it. 我的心里有了你,从此变得更强大. You will no longer feel lonely if ther ...
- PHP面向对象(OOP)编程入门教程链接
PHP官方学习OOP: http://php.net/manual/zh/oop5.intro.php 从其他博主学习:(以下链接来源: http://blog.snsgou.com/post-41. ...
- 代码大全读书笔记 Part 1
简单的看了前言,印象最深的还是这本书崇尚"绝不注水"的原则.现实生活中,不仅仅有注水牛肉,瘦肉精的猪肉,很多书籍也是东拼西凑来的内容,不注水的厚书,是十分令人期待的. 第一章:欢迎 ...
- Yii 验证和消息
setFlash(), getFlash()可以完成验证成功后提示 <?php # 成功信息提示 Yii::app()->user->setFlash('success', &quo ...