降低 EMR Spark 作业中 AWS KMS 解密 AP... 笔记

降低 EMR Spark 作业中 AWS KMS 解密 API 的成本

在 Amazon S3 中使用 Amazon EMR 和 Apache Spark 处理加密数据时,随着对象数量的增加,AWS KMS 解密 API 成本可能显著上升。本文介绍了三种在不降低加密安全性的前提下降低此类成本的技术:优化文件格式(包括 Apache Iceberg)、数据聚合,以及使用 AWS Glue 数据目录的分区索引。
CdXz5zHNQW_pgr6jxxEBR.png