Mesos-Compose Framework für Apache Mesos



Mit Mesos-Compose biete ich eine Alternative zu Mesosphere Marathon an. Hierbei ist das Ziel, docker-compose files in MesosTasks zu übersetzten.

Ziel ist es die Arbeitsweise mit Mesos näher an den Workflow der Entwickler anzupassen. Es ist unstrittig, dass der Großteil der Entwickler im Microservice Umfeld sich mit der docker-compose Syntax auskennen und den Workload ggfs in einer lokalen Docker Umgebung testen. Die gleiche docker-compose.yaml kann mit Hilfe der Mesos CLI an das mesos-compose Framework geschickt werden. Das Framework scheduled daraufhin die entsprechenden Container in Apache Mesos.

Features

Folgende features stellt das mesos-compose framework zur Verfügung

  • Long und Shortrunning Jobs
  • Constraints um zu kontrollieren, auf welchem node der Job laufen soll
  • Unterstützung der Container Engine Docker als auch Mesos UCR
  • Bridge, Host und User Network
  • Capabilities
  • CPU und Memory resource Limits
  • Hashicorb Vault um Passwörter und Zertifikate aus dem Secretstore zu entnehmen

Compose File

Als Docker-Compose Syntax wird die Version 3.9 unterstützt. Dabei sind bislang folgende Parameter umgesetzt:

version: '3.9'
services:
  app:
    image: alpine:latest
    command: "sleep 1000"
    volumes:
      - "12345test:/tmp"
    environment:
      - MYSQL_HOST=test
    labels:
      biz.aventer.mesos_compose.container_type: "DOCKER"
      traefik.enable: "true"
      traefik.http.routers.test.entrypoints: "web"
      traefik.http.routers.test.service: "mc:test:app:80"
      traefik.http.routers.test.rule: "HostRegexp(`example.com`, `{subdomain:[a-z]+}.example.com`)"
    network_mode: "BRIDGE"
    network: default
    networks:
      default:
        aliases:
          - "test.example.de"
    pull_policy: always
    ports:
      - "8080:80"
    cap_add:
      - SYS_ADMIN
    cap_drop:
      - NET_ADMIN
    deploy:
      placement:
        constraints:
          - "node.hostname==localhost"
      replicas: 1
      resources:
        limits:
          cpus: "0.01"
          memory: "50"

networks:
  default:
    external: true
    name: weave

volumes:
  12345test:
    driver: local

Die Docker Labels nutzen wir sowohl für die Konfiguration von traefik (falls vorhanden), aber auch des mesos-compose Frameworks.