RSS AWS Big Data Blog
Folgen
Apache YuniKorn Batch Scheduler für Amazon EMR auf EKS bereitstellen
Dieser Beitrag befasst sich mit den Grundlagen der Kubernetes-Planung, untersucht die Einschränkungen des Standard-Kube-Schedulers für Batch-Workloads und zeigt, wie YuniKorn diese Herausforderungen bewältigt. Wir besprechen, wie YuniKorn als benutzerdefinierter Scheduler für Amazon EMR auf EKS bereitgestellt wird, seine Integration mit Job-Einreichungen, die Konfiguration von Warteschlangen und Platzierungsregeln sowie die Einrichtung von Ressourcenkontingenten. Außerdem demonstrieren wir diese Funktionen anhand praktischer Spark-Job-Beispiele.