EMR Spark 작업에서 AWS KMS 복호화 API... 노트

EMR Spark 작업에서 AWS KMS 복호화 API 비용 절감

Amazon EMR 및 Apache Spark를 사용하여 Amazon S3에서 암호화된 데이터를 처리하면 객체 수가 증가함에 따라 AWS KMS 복호화 API 비용이 증가할 수 있습니다. 이 게시물에서는 암호화를 손상시키지 않고 해당 비용을 절감하는 세 가지 기법을 보여줍니다. 파일 형식 최적화(Apache Iceberg 포함), 데이터 집계, AWS Glue Data Catalog 파티션 인덱스 사용입니다.
CdXz5zHNQW_pgr6jxxEBR.png