Amazon CloudWatch GenAI observability теперь поддерживает оценки Amazon AgentCore

Amazon CloudWatch теперь позволяет автоматизировать оценку качества AI-агентов с помощью AgentCore Evaluations. Эта новая возможность помогает разработчикам непрерывно отслеживать и улучшать производительность агентов на основе реальных взаимодействий, позволяя командам выявлять и устранять проблемы с качеством до того, как они повлияют на клиентов. AgentCore Evaluations поставляется с 13 встроенными оценщиками, охватывающими основные параметры качества, такие как полезность, выбор инструментов и точность ответов, а также поддерживает пользовательские системы оценки на основе моделей. Вы можете получить доступ к унифицированным показателям качества и телеметрии агентов на панелях CloudWatch, с возможностями сквозной трассировки для сопоставления показателей оценки с запросами и журналами. Функция легко интегрируется с существующими возможностями CloudWatch, включая Application Signals, Alarms, Sensitive Data Protection и Logs Insights. Эта возможность избавляет команды от необходимости создавать и поддерживать пользовательскую инфраструктуру оценки, ускоряя развертывание высококачественных AI-агентов. Разработчики могут отслеживать весь свой парк агентов через раздел AgentCore в консоли наблюдения CloudWatch GenAI. AgentCore Evaluations теперь доступен в US East (N. Virginia), US West (Oregon), Europe (Frankfurt) и Asia Pacific (Sydney). Чтобы начать работу, посетите документацию и ознакомьтесь с информацией о ценах. Стандартные цены CloudWatch применяются для базовых телеметрических данных.