Новая технология улучшит старые видео: как она работает

ИИ-алгоритм научился устранять шум, повышать четкость и исправлять артефакты в видеозаписях, которым десятки лет. Теперь восстановление архивных кадров станет проще, чем когда-либо.
Автор новостей
Улучшенное видео с ракетой от Project Starlight
Пример работы ИИ Project StarlightИсточник: Topaz Labs

Современные технологии искусственного интеллекта кардинально меняют способы обработки цифрового контента, и новая разработка от компании Topaz Labs — яркий тому пример. Они представили Project Starlight — диффузионную модель, созданную специально для реставрации старых видеозаписей. Это программное решение способно автоматически повышать качество старых видео, устранять дефекты и даже дорисовывать утраченные детали без участия человека.

Улучшенное видео с девушкой от Project Starlight
Пример работы ИИ Project StarlightИсточник: Topaz Labs

В чем уникальность Project Starlight

Проект основан на архитектуре нейросети с более чем 6 миллиардами параметров и использует мощные графические процессоры NVIDIA. В отличие от традиционных алгоритмов новый ИИ работает по принципу диффузионных моделей. Это означает, что нейросеть изучает деградацию изображения, добавляя шум к качественному исходнику, а затем учится убирать этот шум, восстанавливая оригинальные детали. Такой подход позволяет точнее воссоздавать элементы кадра без размытия и артефактов, которые часто встречаются при работе других инструментов.

Улучшенное видео с боксером от Project Starlight
Пример работы ИИ Project StarlightИсточник: Topaz Labs

Одной из ключевых особенностей Project Starlight является ее способность сохранять согласованность между кадрами. Многие алгоритмы увеличивают разрешение изображения, но в процессе могут возникать визуальные искажения, особенно в динамичных сценах. Starlight же анализирует сразу несколько кадров и гарантирует плавность картинки, исключая резкие изменения текстур и цветов.

Как проходит процесс восстановления видео

Алгоритм Project Starlight выполняет сразу несколько задач:

  • Удаление шума — устраняет цифровой и аналоговый шум, возникающий при старении видеозаписей;
  • Повышение четкости — дорисовывает утраченные пиксели и улучшает детализацию;
  • Исправление артефактов — убирает искажения, вызванные сжатием или повреждениями носителя;
  • Увеличение разрешения — переводит старые видео в формат Full HD и выше;
  • Коррекция цветопередачи — восстанавливает естественные цвета, исправляя выцветание пленки.
Улучшенное видео с женщиной от Project Starlight
Пример работы ИИ Project StarlightИсточник: Topaz Labs

Все эти процессы происходят автоматически. Пользователю достаточно загрузить видео в программу, и ИИ проведет анализ, предложив оптимальные настройки для улучшения качества.

Как новая технология меняет рынок видеореставрации

Ранее для восстановления старых видеозаписей требовалась кропотливая ручная работа специалистов. Они использовали комбинацию инструментов для цветокоррекции, удаления дефектов и увеличения разрешения, что занимало недели или даже месяцы. С появлением Project Starlight процесс стал намного быстрее и доступнее.

Topaz Labs обещает, что базовая версия программы позволит бесплатно улучшать видео длиной до 10 секунд, а для обработки более длинных роликов потребуется платная подписка. В коммерческой версии будут доступны для работы файлы длиной до 5 минут с разрешением 1080p, а корпоративные пользователи смогут работать с длинными видео в 4K и выше.

Улучшенное видео с семьей от Project Starlight
Пример работы ИИ Project StarlightИсточник: Topaz Labs

Перспективы и ограничения

Хотя первые примеры работы Project Starlight впечатляют, у технологии есть и слабые стороны. Например, в динамичных сценах с большим количеством мелких деталей нейросеть может допускать ошибки, создавая размытые или неестественные текстуры. Однако разработчики уверяют, что в будущих обновлениях алгоритмы станут точнее, а модель будет поддерживать более сложные сценарии восстановления.

В ближайшие годы мы, вероятно, увидим интеграцию подобных технологий в популярные видеоредакторы и облачные сервисы. Это означает, что не только профессионалы, но и обычные пользователи смогут легко оживлять старые записи и придавать им современный вид.

Также стало известно об обновлении другой нейросети для изображений. Вышла модель DeepSeek-VL2, рассказали о ней подробно в статье.