Amazon SageMaker は OpenLineage コミュニティにカスタム トランスポートを貢献し、追加のリネージュ機能を提供します

AWSは、Amazon SageMakerがOpenLineageコミュニティにカスタムトランスポート『AmazonDataZoneTransport』を寄稿し、自動化されたリンケージ機能を強化したことを発表しました。これらのリンケージ強化には、AWS Glue、Amazon Redshift、ツールからの自動化されたリンケージキャプチャーなどのソースからの自動化改善が含まれており、データサイエンティストやエンジニアがデータやモデルとの作業効率を高めることができます。OpenLineageコミュニティへの新しいカスタムトランスポート寄稿により、ビルダーは、OpenLineageプラグインと一緒にトランスポートをダウンロードし、OpenLineage対応システムからキャプチャーされたリンケージイベントを増強および自動化することができます。これにより、顧客は、SageMaker Unified Studioドメインにリンケージイベントを送信し、データワークフローのデータガバナンスとトレースABILITYを強化することができます。Amazon SageMakerは、また、様々なソースからの自動化されたリンケージ機能を強化しました。これらの改善には、AWS Glue、Amazon Redshift、vETLプロセスやノートブックなどのツールからの自動化されたリンケージキャプチャーのサポート改善が含まれています。また、SageMakerは、Amazon Redshiftに対するSQLリンケージサポートを強化し、新機能としてストアドプロシージャやマテリアライズドビューのサポートを追加しました。これらの機能は、複雑なデータ操作の自動リンケージキャプチャーを提供し、データ変換や依存関係のより包括的なビューを提供します。この機能は、Amazon SageMakerが利用可能なすべてのAWSリージョンで利用できます。カスタムトランスポート寄稿や強化されたリンケージ機能の詳細については、Amazon SageMakerページを参照してください。これらの新機能を使用してリンケージを開始する方法の詳細については、ユーザードキュメントを参照してください。