Настройка Amazon Nova в Amazon SageMaker AI с помощью Direct Preference Optimization

На саммите AWS в Нью-Йорке мы представили комплексный пакет возможностей для настройки моделей основы Amazon Nova. Доступные в виде готовых рецептов в Amazon SageMaker AI, вы можете использовать их для адаптации Nova Micro, Nova Lite и Nova Pro на протяжении всего цикла обучения модели, включая предварительное обучение, надзорное тонкое настройку и выравнивание. В этом посте мы представляем упрощенный подход к настройке Nova Micro в задачах обучения SageMaker.