<div dir="ltr"><div class="gmail_default" style="font-family:tahoma,sans-serif">systemd is a complete different tool, which was not designed for this kinda purpose.</div><div class="gmail_default" style="font-family:tahoma,sans-serif">(maybe in the future it will grow to be something like that ;-) )</div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><div class="gmail_default" style="">I'm looking for something a bit more sophisticated then "go to this machine" and "run this script" and "expect this result"</div><div class="gmail_default" style="">i
 like to define execution time limits (finish in 3 minute) and maybe 
some grace time (can go up to 5 minute) and have the orchestrator 
monitor the process and have a nice dashboard where i can see every 
thing from above (this is why Airflow was looked so appealing, but the installation process and the documentation are still lagging behind).</div><br></div><div class="gmail_default" style="font-family:tahoma,sans-serif"><br clear="all"></div><div><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><span style="font-family:tahoma,sans-serif">--<br>Rabin</span></div></div></div><br></div><br><div class="gmail_quote"><div dir="ltr">On Tue, 19 Jun 2018 at 12:26, Dimid Duchovny <<a href="mailto:dimidd@gmail.com">dimidd@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div>Hi Rabin,</div><div><br><br></div><div>I'm far from being a <span id="m_-3941664152779239333:76q.1">linux</span> expert, but isn't dependency between services handled by <span id="m_-3941664152779239333:76q.2">systemd</span>?<br></div><div>E.g. <a href="https://wiki" target="_blank">https://wiki</a>.<span id="m_-3941664152779239333:76q.3">archlinux</span>.org/index.<span id="m_-3941664152779239333:76q.4">php</span>/<span id="m_-3941664152779239333:76q.5">Systemd</span>/Timers</div><div><br></div><div>HTH<br></div></div><div class="gmail_extra"><br><div class="gmail_quote">2018-06-19 12:12 GMT+03:00 Moish <span dir="ltr"><<a href="mailto:moish@mln.co.il" target="_blank">moish@mln.co.il</a>></span>:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div>Try GNUbatch. <br>
<br><br><div class="gmail_quote"><div><div class="m_-3941664152779239333h5">On June 19, 2018 9:42:35 AM GMT+03:00, Omer Zak <<a href="mailto:w1@zak.co.il" target="_blank">w1@zak.co.il</a>> wrote:</div></div><blockquote class="gmail_quote" style="margin:0pt 0pt 0pt 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<pre class="m_-3941664152779239333m_2292630541637901980k9mail"><div><div class="m_-3941664152779239333h5">For dependency management, you may want to use 'make' or modern<br>equivalents ('ant', 'gradle', etc.).<br>For controlling remote nodes, 'ansible' may be able to do the work.<br><br>--- Omer Zak<br><br><br>On Tue, 2018-06-19 at 09:06 +0300, Rabin Yasharzadehe wrote:<br><blockquote class="gmail_quote" style="margin:0pt 0pt 1ex 0.8ex;border-left:1px solid #729fcf;padding-left:1ex"> Hi all, <br> <br> I need some advice, currently I have a huge cron file which schedules<br> tasks one after anther, and each task is position precisely (with<br> some room for error) to start after it predecessor.<br> <br> So if one job start at 00:00 and it will go and fetch some files and<br> it takes 3minutes<br> the next job will be after start right after at ~00:05 <br> and so on <br> <br> the problem is that if one job fails, all other jobs which are depend<br> on him will fail as well, and then I get a shitload of alerts, and<br> the worst part is that if i have to manually start a batch process I<br> need to go to each machine and manually start each job in the right<br> order,<br> <br> I was looking to resolve this problem with a tool which can manage<br> this "pipe line" <br> and I cam across several tools like Luigi and (apache-)AirFlow, I<br> started with Luigi but It didn't look<br> right for the job, and then I tried airflow, but was not able to make<br> it to work, the jobs queue never executed. =(<br> <br> Has any one have experience with airflow, or other tool like it which<br> they can recommend ? <br> My needs are to be able to execute my CURRENT shell/python/php<br> scripts and build the dependency between them, and I perfer the<br> option for remote exec so that I will have central <br> place to manage and monitor all work flow whichs are executed on<br> several nodes.<br></blockquote>-- <br>More proof the End of the World has started. Just saw this online:<br>I think it's beginning! Ten minutes ago there was a group of people<br>waiting at the bus stop outside my house. Now, they're all gone!<br>My own blog is at <a href="https://tddpirate.zak.co.il/" target="_blank">https://tddpirate.zak.co.il/</a><br><br>My opinions, as expressed in this E-mail message, are mine alone.<br>They do not represent the official policy of any organization with which<br>I may be affiliated in any way.<br>WARNING TO SPAMMERS:  at <a href="https://www.zak.co.il/spamwarning.html" target="_blank">https://www.zak.co.il/spamwarning.html</a><br><br><hr><br></div></div><span>Linux-il mailing list<br><a href="mailto:Linux-il@cs.huji.ac.il" target="_blank">Linux-il@cs.huji.ac.il</a><br><a href="http://mailman.cs.huji.ac.il/mailman/listinfo/linux-il" target="_blank">http://mailman.cs.huji.ac.il/mailman/listinfo/linux-il</a><br></span></pre></blockquote></div></div><br>_______________________________________________<br>
Linux-il mailing list<br>
<a href="mailto:Linux-il@cs.huji.ac.il" target="_blank">Linux-il@cs.huji.ac.il</a><br>
<a href="http://mailman.cs.huji.ac.il/mailman/listinfo/linux-il" rel="noreferrer" target="_blank">http://mailman.cs.huji.ac.il/mailman/listinfo/linux-il</a><br>
<br></blockquote></div><br></div>
_______________________________________________<br>
Linux-il mailing list<br>
<a href="mailto:Linux-il@cs.huji.ac.il" target="_blank">Linux-il@cs.huji.ac.il</a><br>
<a href="http://mailman.cs.huji.ac.il/mailman/listinfo/linux-il" rel="noreferrer" target="_blank">http://mailman.cs.huji.ac.il/mailman/listinfo/linux-il</a><br>
</blockquote></div>