Utilice las plantillas de pods de Kubernetes con EMR en EKS para simplificar la ejecución de las cargas de trabajo de Spark y controlar los costos

Utilice las plantillas de pods de Kubernetes con EMR en EKS para simplificar la ejecución de las cargas de trabajo de Spark y controlar los costos

Hoy lanzamos la compatibilidad de EMR en EKS con las plantillas de pods para facilitar la ejecución de trabajos de Spark en clústeres compartidos de EKS. Un pod es un grupo de uno o más contenedores, con recursos de almacenamiento y red compartidos, y una especificación de cómo ejecutar los contenedores. Las plantillas de pods son especificaciones que determinan cómo se ejecuta cada pod. Los clientes con frecuencia consolidan varias aplicaciones en un clúster de EKS compartido para mejorar la utilización y ahorrar costos. Sin embargo, es posible que cada aplicación tenga requisitos diferentes. Por ejemplo, es posible que desee ejecutar cargas de trabajo de rendimiento intensivo, como trabajos de entrenamiento de modelos de ML, en instancias basadas en SSD para obtener un mayor rendimiento, o cargas de trabajo ad-hoc en instancias de spot para reducir los costos. También puede programar un contenedor de registro separado para reenviar los registros a la aplicación de monitoreo existente. Con este lanzamiento, puede utilizar las plantillas de pods con EMR en EKS para configurar cómo ejecutar trabajos de Spark en clústeres compartidos de EKS.

About The Author

No Comments

Leave a Reply