AWS Glue 6.0 の Spark リアルタイムモード... ノート

AWS Glue 6.0 の Spark リアルタイムモードでリアルタイムイベントパイプラインを構築する

AWS Glue 6.0 を使用すると、単一のプラットフォームでリアルタイム、ニアリアルタイム、バッチのデータパイプラインを構築できます。金融市場リスクの例を使用して、Spark Real-Time Mode でサブ秒レイテンシで高リスク取引をフラグ付けする方法、Apache Iceberg v3 Variant 列で異種価格ベクトルを格納する方法、ArrowネイティブUDFでバッチ分析を実行する方法を学びます。
CdXz5zHNQW_Nem5Nna3Vx.png