azkaban安装步骤
安装包
azkaban-executor-server-2.5.0.tar.gz
azkaban-sql-script-2.5.0.tar.gz
azkaban-web-server-2.5.0.tar.gz
mkdir -p /usr/local/azkaban
cd /usr/local/azkaban
上传(必须保证mysql是好用的)
启动mysql -uroot -proot
select databases();
tar xzvf xxxxx
(一个一个来)
———————————————————————————
mv azkaban-2.5.0/ sql
mv azkaban-web-2.5.0 server
mv azkaban-executor-2.5.0/ executor
———————————————————————————
进入 vi /etc/profile
export AZKABAN_WEB_HOME=/usr/local/azkaban/server
export AZKABAN_EXE_HOME=/usr/local/azkaban/executor
:$AZKABAN_WEB_HOME/bin:$AZKABAN_EXE_HOME/bin
source /etc/profile
————————————————————————————
进入 mysql -uroot -proot
创建 create database azkaban;
使用 use azkaban;
导进数据 source /usr/local/azkaban/sql/create-all-sql-2.5.0.sql
————————————————————————————
在azkaban下6.生成azkaban的keystore文件(必须有java)
keytool -keystore keystore -alias jetty -genkey -keyalg RSA
请输入输入密钥存储库密码:oracle
再次输入:oracle
你的姓名是什么:wangkunhua
您的组织单位的名称是什么?jili
您的组织单位的名称是什么?jili
你的城市或地区叫什么名字? 北京
你的城市或地区叫什么名字? 北京
这个单位的国家代码是什么?CH
yes
输入<jetty>的密钥密码oracle
(返回与密钥库密码相同的密码):oracle
ls 生成了一个keystore
将生成的文件复制到 server目录下和server/web server/bin下
cp keystore server/web/
cp keystore server/bin/
用以下方式进入
vi azkaban.properties
#Azkaban Personalization Settings
azkaban.name=Test
azkaban.label=My Local Azkaban
azkaban.color=#FF3601
azkaban.default.servlet.path=/index
web.resource.dir=web/
default.timezone.id=Asia/Shanghai
#Azkaban UserManager class
user.manager.class=azkaban.user.XmlUserManager
user.manager.xml.file=/usr/local/azkaban/server/conf/azkaban-users.xml
#Loader for projects
executor.global.properties=conf/global.properties
azkaban.project.dir=projects
database.type=mysql
mysql.port=3306
mysql.host=localhost 192.168.16.100
mysql.database=azkaban
mysql.user=azkaban root
mysql.password=azkaban root
mysql.numconnections=100
# Velocity dev mode
velocity.dev.mode=false
# Azkaban Jetty server properties.
jetty.maxThreads=25
jetty.ssl.port=8443
jetty.port=8081
jetty.keystore=keystore
jetty.password=password oracle
jetty.keypassword=password oracle
jetty.truststore=keystore
jetty.trustpassword=password oracle
# Azkaban Executor settings
executor.port=12321
# mail settings
mail.sender=
mail.host=
job.failure.email=
job.success.email=
lockdown.create.projects=false
cache.directory=cache
————————————————————————————————————————————
<user username="admin" password="admin" roles="admin,metrics" />
————————————————————————————————————————————
azkaban-web-start.sh
报错
执行jps kill -9 删除数字
cd ../conf/
vi azkaban.properties
cd ../conf/
azkaban-web-start.sh
抱着个错误的话
在azkaban下
cp keystore /usr/local/azkaban/server/conf/keystore
完成
进入https://192.168.16.100:8443/没反应
cd /usr/local/azkaban/server/conf/
vi azkaban.properties
必须用绝对路径
/usr/local/azkaban/server/web/
kill -9 删除数字
启动
azkaban-web-start.sh
admin
admin
8.executor配置
cd /usr/local/azkaban/executor/conf
vi azkaban.properties
#Azkaban
default.timezone.id=America/Los_Angeles
# Azkaban JobTypes Plugins
azkaban.jobtype.plugin.dir=plugins/jobtypes
#Loader for projects
executor.global.properties=conf/global.properties
azkaban.project.dir=projects
database.type=mysql
mysql.port=3306
mysql.host=localhost
mysql.database=azkaban2
mysql.user=azkaban
mysql.password=azkaban
mysql.numconnections=100
# Azkaban Executor settings
executor.maxThreads=50
executor.port=12321
executor.flow.threads=30
————————————————————————————
在cd /usr/local/azkaban/executor/conf/下
rm -rf azkaban.properties.swp
在cd /usr/local/azkaban/executor/conf/下
修改名字
mv azkaban.properties azkaban.properties.bak
vi azkaban.properties
在同一个机器上
启动azkaban-web-start.sh
克隆窗口
启动 azkaban-executor-start.sh
要跟文件相同
vi first.sh
type=command
command=sh /root/first.sh
#!/bin/bash
mkdir -p /var/wangxiaojia
echo "HELLO WORLD!!!" > /var/wangxiaojia.txt
可以定时 ,调度
cd /var/
cd wangxiaojia/
cat wangixaojia.txt
创建压缩包
可以修改里面的
一共2种模型,一种是串式的,结构简单,缺点不能差一级。
另外一个是一级损坏了,会告诉你修补那个命令
yum install tree
装tree命令
azkaban安装步骤的更多相关文章
- azkaban安装使用
本文记录azkaban的安装和 一些报错处理(文章末尾). AzKaban组成 MySQL数据库,azkaban-server (web端),azkaban-executor (执行job) 1.下载 ...
- 大数据技术之_13_Azkaban学习_Azkaban(阿兹卡班)介绍 + Azkaban 安装部署 + Azkaban 实战
一 概述1.1 为什么需要工作流调度系统1.2 常见工作流调度系统1.3 各种调度工具特性对比1.4 Azkaban 与 Oozie 对比二 Azkaban(阿兹卡班) 介绍三 Azkaban 安装部 ...
- Azkaban安装配置
描述: azkaban主要用于离线计算任务的调度 说明: 此处Azkaban选择版本为:3.52.0,部署方式为Cluster模式,即支持多Executor计算节点,目前默认安装方式选择在同一台机器上 ...
- azkaban(安装配置加实战)
为什么需要工作流调度系统 一个完整的数据分析系统通常都是由大量任务单元组成:shell 脚本程序,java 程序,mapreduce 程序.hive 脚本等 各任务单元之间存在时间先后及前后依赖关 ...
- 如何搭建SVN服务器,详细安装步骤。
SVN服务器端安装 下载: VisualSVN是一款图形化svn服务器.官网 http://www.visualsvn.com/server/ 下载地址: http://www.visualsvn.c ...
- arcgis10.2.2桌面版具体的安装步骤过程
先声明一下,这里的截图虽说是ArcGIS10.1版本的,但是安装步骤是对的,本人用ArcGIS10.2.2软件测试成功安装上 一.ArcGIS许可证管理器安装 1.在软件包文件夹license man ...
- LoadRunner 11 安装步骤
loadrunner 安装步骤: LoadRunner11下载: 在网上可以搜索到,在这个就不提供了. LoadRunner11原理: 破解方法和以前版本相同,我用的是LR8.0的破解文件,同样实用 ...
- MySQL安装步骤
MySQL安装步骤 1. 下载MySQL Community Server 5.6.21,注意选择系统类型(32位/64位) 2. 解压MySQL压缩包 将以下载的MySQL压缩包解压到自定义目录下. ...
- Java开发工具安装步骤内容如下
Java开发工具安装步骤内容如下 安装 开发工具 STS 链接下载网址 eclipse 链接下载网址 JDK安装 jdk链接下载地址 Marven环境 marven链接下载地址 Tomcat tomc ...
随机推荐
- VirtualbBox:UEFI环境下安装VirtualBox
造冰箱的大熊猫@cnblogs 2018/12/18 1.问题 在一台新计算机上安装VirtualBox,启动虚拟机时出现“Kernel driver not installed (rc=-1908) ...
- C Vus the Cossack and Strings ( 异或 思维)
题意 : 给你两个只包含 0 和 1 的字符串 a, b,定义函数 f ( A, B ) 为 字符串A和字符串B 比较 存在多少个位置 i 使得 A[ i ] != B[ i ] ,例如 f(0011 ...
- TTTTTTTTTTTTT CDOJ 1136 邱老师玩游戏 树形dp
邱老师玩游戏 Time Limit: 3000/1000MS (Java/Others) Memory Limit: 65535/65535KB (Java/Others) Submit St ...
- 『HGOI 20190917』Lefkaritika 题解 (DP)
题目概述 一个$n \times m$的整点集.其中$q$个点被m被设置为不能访问. 问这个点集中含有多少个不同的正方形,满足不包含任何一个不能访问的点. 对于$50\%$的数据满足$1 \leq n ...
- Java集合框架系列大纲
###Java集合框架之简述 Java集合框架之Collection Java集合框架之Iterator Java集合框架之HashSet Java集合框架之TreeSet Java集合框架之Link ...
- TypeScript----接口和泛型
接口 TypeScript的核心原则之一是对值所具有的结构进行类型检查.它有时被称做“鸭式辨型法”或“结构性子类型化”.在TypeScript里,接口的作用就是为这些类型命名和为你的代码或第三方代码定 ...
- [CSP-S模拟测试]:Drink(模拟)
题目传送门(内部题10) 输入格式 输入第一行三个数$N,M,Q$分别表示棋盘的行数.列数和操作个数.接下来$N$行每行$M$个数表示一开始棋盘上宝物的价值.接下来$Q$行每行$3$个数$x,y,c$ ...
- OkHttp3 拦截器源码分析
OkHttp 拦截器流程源码分析 在这篇博客 OkHttp3 拦截器(Interceptor) ,我们已经介绍了拦截器的作用,拦截器是 OkHttp 提供的对 Http 请求和响应进行统一处理的强大机 ...
- TCP输入 之 快速路径和慢速路径
概述 快速路径:用于处理预期的,理想情况下的数据段,在这种情况下,不会对一些边缘情形进行检测,进而达到快速处理的目的: 慢速路径:用于处理那些非预期的,非理想情况下的数据段,即不满足快速路径的情况下数 ...
- TCP输入 之 tcp_prequeue
在未开启tcp_low_latency的情况下,软中断将skb送上来,加入到prequeue中,然后 在未启用tcp_low_latency且有用户进程在读取数据的情况下,skb入队到prequeue ...