azkaban_assistant

azkaban_assistant copied to clipboard

你是怎么有时间开发这些。你是怎么学技术的。来自不知名的程序猿~

Reyoo

执行的shell脚本里面会起一个python进程，这个进程不会被job监控到吗？

3

python exe_job.py 执行一个shell a.sh a.sh的内容为spark-submit --master yarn b.py ps -ef | grep python 会有exe_job.py 和 b.py kill job只会杀掉exe_job.py进程。b.py进程不会被杀掉。导致yarn的任务仍然在运行。 也不能真正监控到yarn上的这个任务。 请问一下有解决方案吗？

450734533

在任务配置界面中新增的job没有同步到azkaban的Job中

1

我在任务配置中新增了个job，没有同步到az的Job中，日志如下 2017-08-03 10:15:51,701 - job_to_update.py[line:71] - INFO - to update job [] 2017-08-03 10:15:51,702 - web.py[line:1514] - INFO - 200 POST /job_to_update (172.29.30.105) 9.29ms 2017-08-03 10:15:51,748 - web.py[line:1514] - INFO...

wuchenlv1988

请教几个问题

2

目前我们在自己做一个数据平台的调度系统，对于一天任务量在几千个的系统来说，azkaban配置太麻烦了，感谢你开源了azkaban_assistant（https://github.com/cocofree/azkaban_assistant），有几个疑问像你请教下，谢谢。 1、azkaban都是用project来管理项目的，那我们az助手是如何通过任务交给az来调度的？ 2、az助手的任务和project是什么关系？ 3、远程执行脚本是如何和实现az的集群模式，在多个exec执行器间调度？

zvrr

现在azkaban安装成功了，但是任务配置没法跨项目依赖，有没有什么群交流下呢，看了使用文档也没弄出来

838279033

任务陪置：500错误

1

Hi 你好，非常感谢你能够开源你的小助手。 我在使用你小助手的时候发现了一个问题。 在点击任务配置的时候， 会出现如下错误： 500: Internal Server Error 不知道你是否遇到过这样的情况。

ltliuta

Hi,楼主，最近也在使用azkaban，不知你这个更新是否支持最版本呢？如需要同步的话，应该如何更新？

elkan1788

启动schedule报错

1

[root@dev-cdh04 webapp]# cat schedule_web.log Traceback (most recent call last): File "router/schedule_router.py", line 69, in server.bind(options.port) File "/usr/lib/python2.6/site-packages/tornado/tcpserver.py", line 158, in bind backlog=backlog) File "/usr/lib/python2.6/site-packages/tornado/netutil.py", line 69, in bind_sockets sock =...

wuchenlv1988

可配置成集群？

9

可以配置成集群？ web/executor/scheduler应该怎样配置呢？比如3台机器ABC;

jet2007

软件使用文档

3

 目前在下面这个页面配置完成后提交，无任何显示，日志也无报错 

540444923