Video Enhance AI — программа апскейлинга видео¶

Video Enhance AI — программа для апскейлинга и восстановления видео, разрабатываемая японской компанией Topaz Labs. Приложение использует нейросетевые модели для увеличения разрешения видеофайлов, устранения шумов, дрожания кадра и артефактов сжатия, а также для интерполяции промежуточных кадров. Программа работает в режиме предпросмотра и пакетной обработки и ориентирована на видеографов, реставраторов архивных материалов, студий постпродакшна и энтузиастов, работающих со старыми или повреждёнными записями.

¶История и разработчик

Topaz Labs — американская компания со штаб-квартирой в Остине, штат Техас, основанная в 2005 году. Изначально компания выпускала набор утилит для обработки фотографий (Sharpen AI, DeNoise AI, Gigapixel AI), а затем перенесла нейросетевые технологии на видео. Video Enhance AI появился в 2019 году как первая коммерческая программа Topaz, предложившая потребителям апскейлинг видео с помощью глубокого обучения. Ранее подобные возможности существовали только в профессиональном и лабораторном ПО или требовали ручной работы в After Effects с плагинами.

С выходом новых версий программа получала обновлённые модели: от базового апскейлинга до отдельных алгоритмов для анимации, документального кино, низкокачественных веб-записей и архивных плёнок. В 2022 году Topaz Labs выпустила обновление с моделью Proteus, а позже — с моделями Artemis, Gaia, Hyperion и Rhea, каждая из которых оптимизирована под определённый тип исходного материала.

¶Принцип работы

В основе Video Enhance AI лежат свёрточные нейронные сети, обученные на парах «исходное видео — эталонное видео высокого разрешения». Модель анализирует каждый кадр, восстанавливает утраченные детали и генерирует изображение большего разрешения. Программа поддерживает апскейлинг до 400% от исходного разрешения (например, из 480p в 4K) и работает с форматами MP4, MOV, AVI, MKV и другими.

Помимо увеличения разрешения, Video Enhance AI выполняет:

• Удаление шума — подавление цифрового и плёночного зерна;
• Интерполяцию кадров — увеличение частоты кадров (например, с 24 до 60 fps) за счёт генерации промежуточных кадров;
• Восстановление деталей — устранение артефактов сжатия, блоков и размытия;
• Стабилизацию — коррекцию дрожания камеры;
• Цветокоррекцию — базовую настройку яркости и контраста.

Обработка выполняется локально на компьютере пользователя и требует видеокарты с поддержкой CUDA (NVIDIA) или Metal (Apple). Скорость обработки зависит от модели GPU, разрешения исходного видео и выбранной модели нейросети.

¶Модели и режимы

Программа предоставляет предпросмотр фрагмента видео до полной обработки, что позволяет подобрать модель и параметры без ожидания завершения всего файла.

¶Применение

Video Enhance AI используется в нескольких сферах:

• Архивная реставрация — оцифровка и улучшение старых плёночных записей, телевизионных архивов, любительских кассет VHS;
• Профессиональный постпродакшн — подготовка материала для показа на экранах высокого разрешения;
• Киноиндустрия — восстановление старых фильмов и телесериалов для переиздания;
• Любительская обработка — улучшение записей с экшн-камер, дронов, веб-камер;
• Научные и образовательные цели — обработка видеоданных, полученных при наблюдениях.

Программа распространяется по подписочной модели (годовая или пожизненная лицензия) и доступна для Windows и macOS.

¶Ограничения

Несмотря на высокое качество обработки, Video Enhance AI имеет ограничения: нейросеть не способна восстановить детали, полностью утраченные в исходнике, а при сильном шуме или повреждениях возможны артефакты в виде «мыльных» участков или ложных деталей. Обработка больших файлов занимает продолжительное время, а результат зависит от качества исходного материала.

¶См. также

• Апскейлинг
• Интерполяция кадров
• Topaz Labs
• Восстановление видео

¶Источники

• Topaz Labs — официальный сайт разработчика
• Обзоры Video Enhance AI на профильных ресурсах о видеообработке
• Документация Topaz Labs по моделям апскейлинга