Planificadores y ejecutores de Apache Mesos por ejemplo

Para añadir a la excelente respuesta de js84,

• Ubicación del Scheduler: A muchos usuarios les gusta lanzar los schedulers a través de otro framework como Marathon para asegurarse de que si el scheduler o su nodo muere, entonces se puede reiniciar en otro lugar.
• Funcionalidad del planificador : Después de registrarse con Mesos, su planificador comenzará a recibir ofertas de recursos en la devolución de llamada resourceOffers(), en la que su planificador debería iniciar (al menos) una tarea en un subconjunto (o todos) de los recursos que se ofrecen. Probablemente también querrá implementar la devolución de llamada statusUpdate() para manejar la finalización/falla de la tarea. Tenga en cuenta que es posible que ni siquiera necesite implementar su propio planificador si un marco existente como Marathon/Chronos/Aurora/Kubernetes podría ser suficiente.
• Funcionalidad del ejecutor: Normalmente no necesita crear un ejecutor personalizado si solo desea iniciar un proceso linux o un contenedor docker y saber cuándo se completa. Puedes usar el valor predeterminado mesos-executor (especificando un CommandInfo directamente en TaskInfo, en lugar de incrustado dentro de un ExecutorInfo). Si, sin embargo, desea construir un ejecutor personalizado, como mínimo necesita implementar launchTask(), e idealmente también killTask().
• Tarea de ejemplo: Una tarea de ejemplo podría ser un simple comando de linux como sleep 1000 o echo "Hello World", o un contenedor docker (a través de ContainerInfo) como image : 'mysql'. O bien, si utiliza un ejecutor personalizado, entonces el ejecutor define qué es una tarea y cómo ejecutarla, por lo que una tarea podría ejecutarse como otra hilo en el proceso del ejecutor, o simplemente convertirse en un elemento en una cola en un ejecutor de un solo subproceso.
• Executor pinning: El ejecutor se distribuye a través de URI CommandInfo, al igual que cualquier binario de tarea, por lo que no es necesario preinstalarlo en los nodos. Mesos lo buscará y lo ejecutará por ti.

Schedulers: son una estrategia para aceptar o rechazar la oferta. Schedulers podemos escribir los nuestros o podemos usar algunos ya existentes como chronos. En scheduler debemos evaluar los recursos disponibles y luego aceptar o rechazar.

Funcionalidad del Scheduler: El ejemplo podría ser como supongamos que u tiene una tarea que necesita 8 cpu para ejecutarse, pero la oferta de mesos puede ser 6 cpu que no servirán para la necesidad en este caso u puede rechazar.

Funcionalidad de ejecutor : El ejecutor maneja la información relacionada con el estado de tu tarea. Conjunto de API que necesita implementar como cuál es el estado de la tarea asignada en mesos slave. Cuál es el número de CPU actualmente disponibles en mesos slave donde se está ejecutando executor.

Ejemplo Concreto para ejecutor : chronos

Ser instalado y ejecutado dinámicamente / sobre la marcha : Estos no son posibles, es necesario configurar previamente los ejecutores. Sin embargo, puede replicar los ejecutores utilizando autoscaling.