Mesos Executer für Apache Airflow

Apache Airflow ist eine Plattform, um Programmabläufe zu steuern und den workflow zu überwachen. Leider wurde die Unterstützung von Mesos, mangels Feedback aus der Community, beendet. Da in unseren Augen jedoch die Nutzung von Airflow gerade mit der Hochscalierbaren Mesos Umgebung einen grossen Vorteil gegenüber anderen Umgebungen hat, haben wir uns entschlossen den MesosExecutor neu zu entwickeln und der Community zur Verfügung zu stellen.

Ob dieser den Weg in das offiziele Airflow Release schaft, ist abzuwarten.

Airflow Task scheduled in Mesos

Detail Ansicht des Airflow Tasks in der Airflow WebUI

Wenn auch Sie Interesse an der Nutzung und/oder der Weiterentwicklung des MesosExecuter haben, dann freuen wir uns über eine Kontaktaufnahme.