azkaban的executor的分布式(集群)部署
来源:互联网 发布:php 获取图片拍摄地点 编辑:程序博客网 时间:2024/06/18 09:02
最近在做azkaban的二次开发被azkaban的executor的分布式部署虐了一会儿,遇到问题时在网上也找不到解决方法,于是搞好之后决定写下了大体的做法:
azkaban本身是默认不支持分布式的executor的要想让其支持分布式的执行器首先得现在web服务器的配置文件azkaban.properties下面增添一行
azkaban.use.multiple.executors=true
这是最基本的配置了
然后当你的执行器开启之后要在数据库中手动把executor表里的所有要用的执行器的active字段置为1,这表示它们是可用的
最后很重要也是如果出错很难追溯的一点,你部署执行器的机器(我是在Linux下部署的)的/etc/hosts和/etc/hostname里一定要写好对应的关系,web-server部署的机器的/etc/hosts里得有所有执行器部署在的机器的ip和主机名映射,这样它才能找得到所有的执行器~
阅读全文
0 0
- azkaban的executor的分布式(集群)部署
- Azkaban的安装与部署
- 部署一个伪分布式的Hadoop集群
- Azkaban 3.0 分布式安装部署文档
- zookeeper集群部署(分布式)
- Azkaban3.x集群部署(multiple executor mode)
- Azkaban3.x集群部署(multiple executor mode)
- Azkaban3.x集群部署(multiple executor mode)
- activiti5.10解决分布式集群部署的主键问题
- shell半自动化部署standalone的spark分布式集群
- Activiti解决分布式集群部署的主键问题
- azkaban的安装部署、使用与常见问题解决
- Hadoop集群安装部署---从单节点的伪分布式扩展为多节点分布式
- hadoop2.5.1集群部署(完全分布式)
- HBase集群安装部署(完全分布式)
- Zookeeper分布式集群部署
- Zookeeper分布式集群部署
- yarn分布式集群部署
- 判别分析|R语言
- 剑指offer-05-顺时针打印数组
- js将多个方法添加到window对象上的多种方法
- Java集合(一)总体框架
- 从0到1搭建一个项目管理平台<禅道>
- azkaban的executor的分布式(集群)部署
- HTML5的 input:file上传类型控制
- 时间戳转成日期,解决总是日期总是1970年的问题
- 【剑指offer】题12:打印1到最大的n位数
- Wildfly 配置web项目 并开启https双向认证
- Web Service工作原理及实例
- javasript自己封装的数组方法
- centos 7对外开启80端口
- d3.js 实现svg 缩放 平移 旋转