EMR Spark ジョブにおける AWS KMS decrypt API コストの削減
Amazon S3 で Amazon EMR および Apache Spark を使用して暗号化されたデータを処理すると、オブジェクト数が増加するにつれて AWS KMS 復号 API のコストが増大する可能性があります。この記事では、暗号化を損なうことなく、それらのコストを削減する 3 つのテクニックを紹介します。ファイル形式の最適化 (Apache Iceberg を含む)、データの集計、および AWS Glue Data Catalog パーティションインデックスの使用です。