Mail.RuПочтаМой МирОдноклассникиИгрыЗнакомстваНовостиПоискВсе проекты
Рассылка
Получайте главные новости дня от Hi-Tech Mail.Ru
, Источник: N + 1

Нейросеть научилась рисовать картинки по текстовому описанию

Разработчики из компании Microsoft создали новую порождающую состязательную нейросеть, которая умеет рисовать изображения на основе их краткого текстового описания.

Система работает благодаря алгоритму, который учитывает важные детали описания, и подробно описана в препринте на arXiv.

Очень часто в основе создающих изображения алгоритмов лежат порождающие состязательные нейросети (также их называют генеративно-состязательными, GAN — generative adversarial networks) — разновидность искусственных нейронных сетей, состоящих из генератора и дискриминатора.

Архитектура AttGAN. Изображение: He et al. / arXiv 2017

Задача первого — создавать новые объекты, похожие на объекты из обучающей выборки, доступа к которой у него нет, а задача второго — решить, принадлежит ли сгенерированный объект к классу объектов из доступной ему обучающей выборки, и дать соответствующий сигнал генератору. На основе такого алгоритма создаются программы, которые умеют рисовать оригинальные произведения искусства, создавать трехмерные модели местности и даже превращать наброски в фотореалистичные портреты.

Разработчики из исследовательского отделения Microsoft под руководством Сяодуна Хэ (Xiaodong He) для создания изображений из текстового описания разработали новую разновидность GAN-нейросети: внимательную GAN (attentional GAN, AttGAN). В отличие от уже существующих алгоритмов, которые генерируют изображения из целого описания, превращая его в один вектор-предложение, новый алгоритм обращает внимание на детали: то есть оценивает каждое слово в описании и рисует изображение на их основе.

Изображения: He et al. / arXiv 2017

Разработчикам, таким образом, удалось показать эффективность нового алгоритма создания изображений на основе описания и отдельно — эффективность добавления в нейросеть «внимательной» составляющей.

Недавно исследователи из Сеульского университета представили другую нейросеть, которая из текстового описания действия генерирует трехмерную модель его выполнения. Полученную модель затем можно использовать для того, чтобы заставить двигаться робота.

Елизавета Ивтушок.

Читайте также: Искусственный интеллект впервые обошел человека в тесте на понимание прочитанного и Всего за 4 часа ИИ Google научился играть в шахматы и стал чемпионом мира

Поделитесь с друзьями новостью о том, как ИИ стал художником, для этого нажмите на одну из кнопок ниже
Хиты продаж и новинки
Самые лучшие цены на смартфоны
Вы подписались на рассылку.Отменить
Подписаться на рассылку
Комментарии
3
Константин Ерастов
Да, кто-то фантастику в детстве не читал-изобрел эту... Скай-нет. Точнее, это уже - Генезис; оболочка Скай-нет. Зачем создавать продвинутый тридцатиядерный процессор по схеме Микро-нет, когда эта виртуалняя программа можеь с любыми железом работать на равных. Потом - что; война с машинами?
СсылкаПожаловаться
ку ку ку
Языки программирования учить уже не стоит ??? Блин... чуть не взялся...!!!) Спасибо !
СсылкаПожаловаться
Андрей Зайцев
Как только научаться переводить текст в видео, так сразу кино уйдет в прошлое.... туда ему и дорога. Перечитаю ВСЕ)))
СсылкаПожаловаться
Чтобы оставить комментарий, вам нужно авторизоваться.
Обнаружили ошибку? Выделите ее и нажмите Ctrl+Enter.
Подпишитесь на нас
Новости Hi-Tech Mail.Ru