AWS Glue объявляет об автомати... Заметка

AWS Glue объявляет об автоматическом обновлении версий для заданий Apache Spark

AWS Glue представляет автоматическое обновление версий — возможность, которая поддерживает ваши задания Apache Spark в актуальном состоянии на последнем времени выполнения AWS Glue без ручного согласования. Поддержание актуальности поддерживаемых сред выполнения обеспечивает ваши задания последними исправлениями безопасности, улучшениями производительности и поддержкой развивающихся форматов таблиц, таких как Apache Iceberg. Автоматические обновления включают несколько уровней проверки, включая оценку совместимости заданий с обновленной средой выполнения, получение вашего согласия перед выполнением заданий на новой версии и проверку выполненных обновленных заданий на соответствие установленному профилю вывода каждого задания, чтобы ваши задания обновлялись с правильными ограничениями.Установив для версии задания значение "Авто", обновления, которые когда-то требовали недель планирования и выполнения, теперь происходят автоматически. Команды платформы могут стандартизировать версии сред выполнения для больших парков без необходимости отслеживать отдельных владельцев заданий, а бизнес-подразделения без центральной команды по обновлениям могут поддерживать свои задания в актуальном состоянии без усилий. Каждое задание проверяется на соответствие установленному профилю вывода, объему данных, задержке и формату перед обновлением, поэтому вы можете продвигаться с уверенностью. Задания, требующие изменений кода, продолжают безопасно работать на текущей версии, а AWS Glue предоставляет анализ обновлений с конкретными исправлениями, которые вы можете применить напрямую или с помощью агента обновления Apache Spark.Автоматические обновления для AWS Glue доступны во всех коммерческих регионах AWS.Чтобы начать, выберите "Авто" в качестве версии AWS Glue при создании или обновлении задания Apache Spark с помощью AWS Glue Studio или AWS CLI, API и SDK. В качестве альтернативы вы можете обновить несколько заданий одновременно, используя навык AWS Glue для управления вашими заданиями. Чтобы узнать больше, посетите документацию AWS Glue.