Выпускники Новосибирского государственного университета (НГУ) разрабатывают веб-приложение, которое сможет улучшать качество видеороликов, используя для этого нейросетевые технологии. Алгоритм увеличивает разрешение картинки, удаляет лишние шумы и артефакты.
Команда разработчиков состоит из четырех выпускников физического факультета. Они рассказали, что применяемая в их проекте технология использует генеративные состязательные нейросети для обработки видео. Причем на российском рынке аналогов такому решению нет, а доступность иностранных систем ограничена из-за введенных санкций. Поэтому предложенная программа должна быть востребованной для внутреннего потребителя.
Прототип платформы работает на интерфейсе Gradio, написанном на языке Python. Он позволяет настраивать демонстрационные профили для разных моделей машинного обучения. Авторы проекта отмечают, что материал длительностью одну минуту и разрешением до 480p можно обработать за 40 секунд, улучшив качество до FullHD. Если заниматься обработкой вручную на это уйдет более часа.
В настоящее время команда трудится над оптимизацией алгоритмов, чтобы повысить качество и скорость обработки видео. Планируется создать бесплатное приложение, которое позволит изменять видеоконтент на собственных мощностях пользователя с загрузкой его видеокарты и процессора. Если же он занимается этим на телефоне или не имеет необходимого оборудования, то предлагается использовать облачный сервис, но через покупку токенов, за которые откроется доступ к обработке видео через удаленный сервер.
Разработчики собирают обратную связь от пользователей, участвующих в тестировании системы. Также расширяется область задач, которые сможет решать алгоритм. Планируется провести дополнительное обучение нейросети. Если это удастся сделать, то уже через 6−9 месяцев авторы представят стабильно работающее веб-приложение. Оно будет востребовано как среди блогеров-любителей, так и среди профессионалов, работающих с видеоконтентом.
Ранее мы рассказывали, что Nvidia представила мощную ИИ-модель для создателей музыки и саундтреков.