Upscayl: бесплатное приложение для апскейла изображений¶

Upscayl — это бесплатная кроссплатформенная программа с открытым исходным кодом для увеличения разрешения (апскейла) цифровых изображений с использованием алгоритмов искусственного интеллекта. Приложение предназначено для повышения качества фотографий и графики, позволяя увеличивать их размер без значительной потери чёткости, что достигается за счёт «достраивания» деталей нейросетью.

¶История и происхождение

Проект был основан индийским разработчиком Наяном Хандракаром (Nayam Amarshe) в 2022 году. Название программы является игрой слов, объединяющей английский термин «upscale» (увеличение масштаба) и название популярного инструмента для обработки изображений. Изначально Upscayl создавался как удобная графическая оболочка (GUI) для работы с консольными моделями нейросетей, в первую очередь с Real-ESRGAN. Разработка ведётся в публичном репозитории на платформе GitHub, что позволяет сообществу участвовать в улучшении кода и добавлении новых функций.

Приложение быстро приобрело популярность благодаря своей доступности: в отличие от многих коммерческих аналогов, оно распространяется бесплатно. Модель финансирования проекта основана на добровольных пожертвованиях пользователей через платформы Patreon и Buy Me a Coffee. Первые стабильные версии программы поддерживали операционные системы Windows и Linux, а поддержка macOS появилась несколько позже.

¶Технология и принцип работы

В основе Upscayl лежат модели глубокого обучения, использующие свёрточные нейронные сети (CNN). Наиболее известной моделью, интегрированной в программу, является Real-ESRGAN (Enhanced Super-Resolution Generative Adversarial Network). Данная технология была разработана исследователями из Tencent ARC Lab и отличается способностью восстанавливать и «придумывать» мелкие детали — текстуры, волосы, элементы фона, — которые отсутствуют на исходном изображении с низким разрешением.

Принцип работы сети заключается в следующем: модель обучается на огромных наборах пар изображений (низкое и высокое разрешение), изучая закономерности и корреляции между пикселями. В процессе апскейла алгоритм не просто растягивает картинку, а анализирует содержимое и генерирует новые пиксели, которые логично вписываются в общую картину.

¶Алгоритмы обработки

Программа предлагает несколько встроенных моделей апскейла, каждая из которых оптимизирована под определённый тип контента:

• Real-ESRGAN (General) — универсальный алгоритм, подходящий для большинства фотографий и смешанного контента.
• Real-ESRGAN (Anime) — специализированная модель, обученная на изображениях в стиле аниме и манги. Она позволяет избежать артефактов и искажений, которые возникают при обработке рисованных изображений универсальными алгоритмами.
• Real-ESRGAN (Sharp) — вариант модели с усиленной фокусировкой на повышении резкости краёв и текстур.
• Remacri — альтернативная модель, ориентированная на максимально естественный результат без излишнего «выглаживания» кожи и текстур.
• Ultramix Balanced — гибридный алгоритм, сочетающий характеристики нескольких моделей для достижения сбалансированного результата.

Пользователь может выбрать модель вручную перед запуском обработки, а также настроить коэффициент масштабирования (от 2 до 8 раз). Для обработки доступны изображения в форматах JPEG, PNG, WebP и BMP.

¶Возможности и особенности

Ключевой особенностью Upscayl является то, что вся обработка происходит локально на компьютере пользователя, без загрузки данных на удалённые серверы. Это обеспечивает конфиденциальность и позволяет работать с изображениями даже при отсутствии подключения к интернету.

¶Интерфейс

Программа имеет минималистичный и интуитивно понятный интерфейс. Основное окно разделено на две области: слева отображается исходное изображение, справа — результат обработки. Пользователь может изменять масштаб просмотра для детального сравнения «до» и «после». Управление осуществляется через боковую панель, где выбирается файл, модель и параметры масштабирования.

¶Производительность

Поскольку алгоритмы глубокого обучения требуют значительных вычислительных ресурсов, Upscayl использует аппаратное ускорение. Для работы программы рекомендуется наличие видеокарты с поддержкой технологии Vulkan. При отсутствии дискретной видеокарты программа может использовать встроенную графику или центральный процессор, однако скорость обработки в этом случае значительно снижается. Время обработки одного изображения зависит от его разрешения, выбранной модели и мощности оборудования и может составлять от нескольких секунд до нескольких минут.

¶Сферы применения

Upscayl нашёл широкое применение среди различных категорий пользователей:

• Фотографы и реставраторы используют программу для увеличения старых снимков, восстановления деталей на архивных фотографиях и подготовки изображений к печати большого формата.
• Дизайнеры и верстальщики применяют апскейл для улучшения качества стоковых изображений и создания крупных баннеров.
• Геймеры и моддеры обрабатывают скриншоты, текстуры для игр и обложки.
• Обычные пользователи улучшают качество кадров, извлечённых из видеозаписей, или изображений, сохранённых в низком разрешении из мессенджеров.

¶Ограничения и недостатки

Несмотря на впечатляющие результаты, технология имеет определённые ограничения. Искусственный интеллект не способен восстановить информацию, которая полностью отсутствует на изображении — он лишь создаёт правдоподобные предположения. При сильном увеличении (более 4 раз) или работе с сильно сжатыми изображениями могут возникать артефакты, такие как «пластиковый» эффект кожи или искажение геометрических форм.

Кроме того, программа не поддерживает пакетную обработку в стандартной версии, что делает обработку большого количества файлов трудоёмкой. Также Upscayl не умеет работать с видеофайлами напрямую, хотя пользователи могут извлекать кадры и обрабатывать их по отдельности.

¶Аналоги

На рынке существует ряд аналогичных решений, как бесплатных, так и коммерческих. К ним относятся онлайн-сервисы (например, Waifu2x), плагины для фоторедакторов и профессиональные программы, такие как Topaz Gigapixel AI. По сравнению с ними Upscayl выигрывает за счёт бесплатности, отсутствия ограничений на количество обрабатываемых файлов и конфиденциальности локальной обработки, однако уступает коммерческим продуктам в скорости работы и количестве доступных алгоритмов.