记录-安装使用Azkaban遇到的坑

Azkaban官方文档，配置相关信息可以参考，一下我遇到坑的要点：

记录-安装使用Azkaban3.x(3.25)遇到的坑

记录-安装使用Azkaban3x325遇到的坑
Azkaban项目的名称文件夹不能为中文

任务执行状态status一直为Preparing

内存检查

其他

备注

1. Azkaban项目的名称文件夹不能为中文

这个没什么好说的，在创建项目和flow，job等避免使用中文。

2. 任务执行状态status一直为:Preparing

可能原因：

1. 在准备执行flow时，没有指定 useExecutor。

2. 并且多个执行服务器上的内存小于6G或者CPU使用率超过了95%。

3. 当指定了useExecutor时，并且设置了内存不检查则可以执行的，小心不要写错了单词哦，也不可以吧这个int类型的留空或者字符串

java.lang.NumberFormatException

。

4. 查看这个问题的原因，处理解决完上面的三个步骤

还要把MySQL中active_executing_flows表的update_time=’0’ 数据删除。

并且execution_flows表中executor_id=null的也需要删除。

3. 内存检查

如果如图部分不进行设置为false时，会因为检查内存不足内存而报错。这一项只需在执行服务器上配置$AZKABAN_EXEC_HOME/plugins/jobtypes/commonprivate.properties

4. 其他

Azkaban在azkaban.use.multiple.executors=true时，需要配置在Azkaban的web下conf/azkaban.properties。

# single execute Azkaban Executor settings
# executor.port=12321
# 多执行器配置
azkaban.use.multiple.executors=true
# 选择器及选择权重分配
azkaban.executorselector.filters=StaticRemainingFlowSize,MinimumFreeMemory,CpuStatus
#azkaban.executorselector.comparator.NumberOfAssignedFlowComparator=1
azkaban.executorselector.comparator.Memory=2
#azkaban.executorselector.comparator.LastDispatched=1
azkaban.executorselector.comparator.CpuUsage=1

azkaban.activeexecutor.refresh.milisecinterval=10000
azkaban.queueprocessing.enabled=true
azkaban.activeexecutor.refresh.flowinterval=10
azkaban.executorinfo.refresh.maxThreads=10

选择器及选择权重分配,部分表示可以设置为不同的，这几项是Azkaban在自主选择executor执行器的权重，对比服务器和重要性，合理设置，这里设置并没有明确界定。

备注：

有问题欢迎大家批评指正，欢迎讨论1.

http://write.blog.csdn.net/mdeditor#!postId=78502621 ↩