Представляем интерактивную сег... Заметка
RSS Блог Google AI

Представляем интерактивную сегментацию на устройстве в Snapseed

Выборочные корректировки изображений улучшают фотографии, позволяя проводить целенаправленные улучшения. Ранее изолировать объекты для редактирования было сложно, особенно на мобильных устройствах с неточными сенсорными элементами управления и ограниченной вычислительной мощностью. Snapseed на iOS теперь представляет кисть "Объект", делающую эти корректировки быстрыми и легкими. Кисть "Объект" позволяет пользователям просто провести пальцем по объекту, чтобы выбрать его для индивидуального редактирования. Эта интуитивно понятная функция работает на основе локальной модели искусственного интеллекта под названием "Интерактивный сегментатор". Эта передовая модель может обнаруживать и выбирать целые объекты или людей менее чем за 20 миллисекунд после простого касания или проведения линии. Модель генерирует точную маску для выбранного объекта, адаптируясь к его границам. Обучение "Интерактивного сегментатора" включало подход "Большого переноса" и дистилляцию знаний от более крупной "учительской" модели к меньшей, эффективной "периферийной" модели. Этот процесс обеспечивает высококачественную сегментацию при сохранении отзывчивости в реальном времени. Система разделяет понимание изображения и запроса на отдельные подмодели, чтобы сбалансировать качество сегментации с низкой задержкой. Наконец, масштабирование маски до размера изображения обеспечивает высокое качество редактирования для детальных корректировок.
CdXz5zHNQW_hPOeNkUBEn.png