Amazon EMR, S3A를 기본 커넥터로 발표
AWS, Amazon EMR을 위한 새로운 Amazon S3 커넥터인 Amazon EMR S3A 발표AWS는 Amazon EMR에서 Apache Hadoop, Apache Spark, Apache Hive 워크로드의 성능을 최적화하는 새로운 Amazon S3 커넥터인 Amazon EMR S3A를 발표했습니다. 이 새로운 커넥터는 AWS 특정 최적화를 통해 오픈 소스 S3A 아키텍처를 개선하여 조직이 대규모 데이터를 보다 효율적으로 처리하도록 지원합니다. S3 Express One Zone, S3 Glacier 및 AWS Outposts에 대한 직접적인 통합 지원을 통해 EMR S3A는 고객이 AWS의 다양한 스토리지 옵션을 활용하여 EMR 워크로드에서 데이터 액세스 속도와 스토리지 비용을 모두 최적화할 수 있도록 돕습니다. 또한 EMR S3A 커넥터는 오픈 소스 S3A를 뛰어넘는 고급 보안 기능과 성능 기능을 제공합니다. 주요 개선 사항으로는 Apache Spark 내장 세분화된 액세스 제어 지원, 향상된 S3A 자격 증명 해결사, 최적화된 파일 쓰기를 위한 MagicCommitter V2, 칼럼 형식 파일에 대한 가속화된 S3 접두사 목록 등이 있습니다. 이러한 개선 사항은 EMR 릴리스 7.10부터 사용할 수 있으며 기존 애플리케이션과의 호환성을 유지합니다.Amazon EMR S3A 커넥터는 Amazon EMR을 사용할 수 있는 모든 AWS 리전에서 사용할 수 있으며 Amazon EMR 릴리스 버전 7.10 이상으로 사전 구성되어 제공됩니다. Amazon EMR S3A에 대한 자세한 내용은 Amazon EMR 설명서를 참조하십시오.