RSS Etsy Engineering | Code as Craft
Подписаться
Понимание огромного ассортимента Etsy с помощью Больших Языковых Моделей
Рынок Etsy, в котором представлены миллионы уникальных, ручных изделий от различных продавцов, сталкивается с проблемами в организации неструктурированных данных. Традиционные методы извлечения атрибутов продукции испытывали трудности с разнообразным ассортиментом и ограниченными структурированными данными. Большие языковые модели (LLM) предоставили новую возможность преобразовать неструктурированную информацию о продукции в структурированные данные. Etsy разработала масштабируемый конвейер с использованием LLM, сосредоточившись на инженерии контекста для улучшения точности извлечения атрибутов. Этот конвейер использует данные, предоставленные продавцами, примеры экспертов и таксономию Etsy. Оценка вывода LLM включает в себя генерацию "серебряных меток" и использование экспертов в области для обеспечения качества. Процесс вывода извлекает атрибуты, использует LiteLLM для регионального маршрутизации и использует Pydantic для проверки данных. Надежные системы мониторинга отслеживают состояние конвейера и метрики производительности модели. Применение атрибутов, сгенерированных LLM, к фильтрам поиска повысило вовлеченность покупателей и коэффициенты конверсии. Etsy планирует расширить использование LLM для дальнейшего улучшения опыта покупок и продаж. Конечной целью является обеспечение того, чтобы потребности покупателей и продавцов удовлетворялись с максимальной эффективностью.