Создание браузерного инструмента для раскраски изображений на базе ИИ

Эта статья посвящена созданию в браузере инструмента для раскрашивания изображений на основе искусственного интеллекта, уделяя первостепенное внимание конфиденциальности, снижению затрат и удобству работы пользователей. Реализация этого в браузере защищает конфиденциальность пользователей, сохраняя изображения на их устройствах, что важно для конфиденциальных фотографий и документов. Это исключает затраты на сервер, связанные с использованием графического процессора, пропускной способностью и хранением, которые традиционно требуются для обработки ИИ. Инструмент предлагает автономную функциональность, работая без подключения к интернету, что полезно для пользователей с ограниченным или отсутствующим подключением. Кроме того, отсутствие сетевых переходов обеспечивает мгновенные результаты, значительно улучшая пользовательский опыт с нулевой задержкой. Техническая архитектура включает в себя загрузку ONNX Runtime и предварительно обученной модели раскрашивания. Предоставленные фрагменты кода подробно описывают предварительную обработку изображений, запуск вывода с использованием модели и постобработку выходных данных. Service Worker кэширует модель, обеспечивая более быструю последующую загрузку и улучшая производительность. Основные используемые технологии включают ONNX Runtime Web, модель DeOldify и OffscreenCanvas для фоновой обработки. Наконец, в статье делается вывод о том, что раскрашивание на основе браузера обеспечивает отличный пользовательский опыт, одновременно обеспечивая конфиденциальность и сокращая расходы.