Представляем Amazon Nova 2 Sonic для разговорного ИИ в реальном времени

Сегодня Amazon объявляет о доступности Amazon Nova 2 Sonic, нашей модели преобразования речи в речь для естественного, разговорного ИИ в реальном времени, которая обеспечивает лучшее в отрасли качество и цену для голосового разговорного ИИ. Она предлагает лучшее в своем классе потоковое понимание речи с устойчивостью к фоновому шуму и стилям речи пользователей, эффективную обработку диалогов и генерацию речи с выразительными голосами, которые могут говорить на нескольких языках (Polyglot voices). Она обладает превосходными рассуждениями, следованием инструкциям и точностью вызова инструментов по сравнению с предыдущей моделью. Nova 2 Sonic основана на возможностях, представленных в оригинальной модели Nova Sonic, с новыми функциями, включая расширенную языковую поддержку (португальский и хинди), полиглотные голоса, которые позволяют модели говорить на разных языках с нативной выразительностью, используя один и тот же голос, и управление очередностью реплик, позволяющее разработчикам устанавливать низкую, среднюю или высокую чувствительность к паузам. Модель также добавляет кросс-модальное взаимодействие, позволяя пользователям плавно переключаться между голосом и текстом в одной и той же сессии, асинхронный вызов инструментов для поддержки многоэтапных задач, не прерывая ход разговора, и контекстное окно на один миллион токенов для продолжительных взаимодействий. Разработчики могут интегрировать Nova Sonic 2 непосредственно в голосовые системы реального времени, используя двунаправленный потоковый API Amazon Bedrock. Nova Sonic 2 теперь также легко интегрируется с Amazon Connect и другими ведущими поставщиками телефонии, включая Vonage, Twilio и AudioCodes, а также с платформами с открытым исходным кодом, такими как LiveKit и Pipecat. Amazon Nova 2 Sonic доступна в Amazon Bedrock в следующих регионах AWS: Восток США (Северная Вирджиния), Запад США (Орегон), Азиатско-Тихоокеанский регион (Токио) и Европа (Стокгольм). Чтобы узнать больше, прочитайте блог новостей AWS и Руководство пользователя Amazon Nova Sonic. Чтобы начать работу с Nova Sonic 2 в Amazon Bedrock, посетите консоль Amazon Bedrock.