InfoQ на русском
Подписаться
JioHotstar тестирует базы знаний для ИИ-агентов по написанию кода
JioHotstar оценил 6 подходов к извлечению кода для ИИ-агентов, использующих SWE, CodeScale Bench и внутреннюю систему ответов на вопросы. Структурный поиск показал хорошие результаты на конкретных задачах, в то время как семантический поиск помог с неоднозначными требованиями. Полученные результаты подчеркивают компромиссы в точности, использовании токенов и проектировании инструментов, подчеркивая необходимость соответствия инструментов извлечения типам задач. Автор: Лила Кумили.