AWS объявляет о выходе Amazon EMR S3A — нового коннектора для Amazon S3, оптимизирующего производительность задач Apache Hadoop, Apache Spark и Apache Hive в Amazon EMR. Этот новый коннектор улучшает архитектуру open-source S3A за счёт специфических оптимизаций AWS, помогая организациям обрабатывать большие объемы данных более эффективно. Благодаря прямой интеграционной поддержке S3 Express One Zone, S3 Glacier и AWS Outposts, EMR S3A помогает клиентам использовать различные варианты хранения данных в AWS для оптимизации как скорости доступа к данным, так и стоимости хранения в своих задачах EMR. Кроме того, коннектор EMR S3A предоставляет расширенные функции безопасности и производительности, выходящие за рамки возможностей open-source S3A. Ключевые улучшения включают встроенную поддержку мелкозернистого контроля доступа в Apache Spark, улучшенный обработчик учетных данных S3A, MagicCommitter V2 для оптимизированной записи файлов и ускоренный перечень префиксов S3 для столбцовых форматов файлов. Эти улучшения доступны начиная с версии EMR 7.10 и сохраняют совместимость с существующими приложениями.Коннектор Amazon EMR S3A доступен во всех регионах AWS, где доступен Amazon EMR, и поставляется предварительно настроенным в версии Amazon EMR 7.10 и выше. Для получения дополнительной информации о Amazon EMR S3A см. документацию Amazon EMR.