Каталог Amazon SageMaker теперь экспортирует метаданные активов в виде набора данных, доступного для запросов.

Каталог Amazon SageMaker теперь экспортирует метаданные активов в виде таблицы Apache Iceberg через таблицы Amazon S3. Это позволяет командам по работе с данными запрашивать инвентарь каталога и отвечать на такие вопросы, как "Сколько активов было зарегистрировано в прошлом месяце?", "Какие активы классифицируются как конфиденциальные?" или "В каких активах отсутствуют бизнес-описания?" с использованием стандартного SQL без создания пользовательской инфраструктуры ETL для отчетности. Эта возможность автоматически преобразует метаданные активов каталога в таблицу, доступную для запросов из Amazon Athena, ноутбуков SageMaker Unified Studio, агентов ИИ и других инструментов аналитики и бизнес-аналитики. Экспортированная таблица включает технические метаданные (например, resource_id, resource_type), бизнес-метаданные (например, asset_name, business_description), сведения о владельцах и метки времени. Данные разделены по snapshot_date для запросов по времени и автоматически отображаются в SageMaker Unified Studio в разделе aws-sagemaker-catalog. Эта возможность доступна во всех регионах AWS, где поддерживается каталог SageMaker, без дополнительной платы. Вы платите только за базовые сервисы, включая хранилище таблиц S3 и запросы Amazon Athena. Вы можете контролировать затраты на хранение, устанавливая политики хранения для экспортированных таблиц, чтобы автоматически удалять записи старше указанного вами периода. Чтобы начать работу, активируйте экспорт набора данных с помощью AWS CLI, затем получите доступ к таблице активов через таблицы S3 или вкладку "Данные" SageMaker Unified Studio в течение 24 часов. Выполняйте запросы с помощью Amazon Athena, ноутбуков Studio или подключайте внешние инструменты бизнес-аналитики через конечную точку REST-каталога Iceberg таблиц S3. Инструкции см. в руководстве пользователя Amazon SageMaker.