Компьютер научили превращать стихи в видео. Что получилось

Каждый кадр связан с текстом, иногда изображения кажутся очень странными и даже пугающими.

Художник и аниматор Гленн Маршалл создал искусственный интеллект для визуализации текстов. Чтобы показать, как работает нейросеть, мужчина записал видео с поэтическим произведением «В мрачной середине зимы». Его написала английская писательница XIX века Кристина Россетти.

В тексте говорится о морозной зиме, когда «стонал злой ветер, Земля промерзла, и реки лед сковал», а в конце совершается Рождественское чудо. ИИ удалось передать тягостную атмосферу, которая может возникнуть при прочтении стихотворения.

Интересно, что некоторые строчки компьютер визуализировал буквально. Например, вы увидите, как из воды появляется камень, что означает «вода, подобная камню». Когда в тексте лирический герой вопрошает, что он может дать в качестве подношения, на экране появляется непонятное существо должно быть, это и есть подарок:

Скриншот: Glenn Marshall Neural Art / YouTube
Скриншот: Glenn Marshall Neural Art / YouTube

Для того чтобы из слов получалось видео, Гленн Маршалл воспользовался библиотекой Story2Hallucination. В качестве аудиосоставляющей для ролика был использован инструмент vo.codes.

Посмотрите на причудливый мир с роботами, созданный художником Алехандро Бурдисио, — его работы удивляют даже гиков.

https://hi-tech.imgsmail.ru/pic_original/ca6b31082407df4d921a4b144162e8f2/1914235/
https://hi-tech.imgsmail.ru/pic_original/ddaa8245427413173767d68b5ccb0d5b/1914234/
https://hi-tech.imgsmail.ru/pic_original/42aecce256b67a845a0f6b2b624a330e/1914233/
https://hi-tech.imgsmail.ru/pic_original/286789ad8503b7ddeed4fba6f72471d5/1914232/
33фотографии
Фото: Alejandro Burdisio / Artstation

Это тоже интересно: