Amazon EMR на EC2 объявляет о двух значительных улучшениях для управления: встроенном детальном контроле доступа (FGAC) в Apache Spark через AWS Lake Formation и поддержке представлений каталога данных AWS Glue. Эти функции позволяют организациям повысить безопасность данных, упростить управление доступом и расширить возможности обмена данными в своих аналитических средах. Нативная реализация FGAC в Apache Spark позволяет клиентам определять детализированные политики доступа в AWS Lake Formation и последовательно применять их в кластерах EMR. Это снижает риски безопасности и административные расходы, обеспечивая при этом единый подход к управлению данными. Теперь клиенты могут использовать знакомые отчеты Lake Formation для управления доступом к заданиям Spark и интерактивным сеансам в EMR на EC2 по аналогии с другими аналитическими сервисами AWS. Представления каталога данных AWS Glue позволяют клиентам создавать, управлять и запрашивать многоядерные представления SQL в регионах, аккаунтах и организациях AWS. Эта функция позволяет администраторам создавать представления из заданий Spark, которые можно запрашивать из нескольких модулей, контролируя при этом доступ к данным с помощью разрешений Lake Formation. Эти разрешения включают в себя именованные предоставленные ресурсы, фильтры данных и теги, при этом все запросы доступа автоматически регистрируются в AWS CloudTrail для комплексного аудита. Встроенные функции представления FGAC и Glue Data Catalog в Apache Spark доступны в Amazon EMR версии 7.10 во всех регионах AWS, где доступна EMR на EC2. Дополнительные сведения см. в статьях Использование AWS Lake Formation с Amazon EMR и Работа с представлениями каталога данных AWS Glue в документации Amazon EMR.