Нейросеть научили рисовать мультики по тексту

© pixabay.com

© pixabay.com

Американские ученые разработали алгоритм, который может превратить любой текст в короткий анимационный ролик. Испытать программу решили на популярном мультсериале «Флинтстоуны».

Программу, в основе которой находится нейросеть, назвали CRAFT (Composition, Retrieval and Fusion Network). Ее цель — преобразовать текст в картинку, опираясь на заранее известный шаблон.

Например, нейросеть знает, как выглядит место (кухня, спальня, двор), какие герои есть в мультфильме и какие действия они могут выполнять. Анализируя текст, алгоритм составляет полную картину происходящего и накладывает анимацию.

Разработчики обучали нейросеть на 25 тысячах роликов из мультсериала «Флинтстоуны», чтобы отделить все диалоги, действия и героев. В итоге у нейросети появилась целая библиотека текстов, фонов и действий, из чего могут получиться новые уникальные сюжеты.

Конечно, не все созданные алгоритмом ролики получаются логичными, но ученые работают над этим. Система обработки информации еще несовершенна, поэтому иногда нейросеть ошибается с выбором места или путает действия героев.

Качество роликов тоже оставляет желать лучшего, но нужно с чего-то начинать, считают американские разработчики.

Нам важно ваше мнение!

+0

Комментарии (0)

В других СМИ:

Картина дня

Бездна новостей
Все новости

Новая власть обманывает украинцев, считает оппозиция в Верховной раде.

Встреча прошла на фоне претензий демократов к политике Facebook.

распахнутьcвернуть

гражданская журналиcтика

Рассуждаем о планах Blizzard на кошельки игроков.

В газетах писали, что жители очень недовольны наплывом туристов.

Плато, известное своими альпийскими лугами, Лаго-Наки​ расположено на Западном Кавказе.

Разработано устройство, которое позволяет извлечь углекислый газ из любого потока.

Как-то раз меня занесло сразу к двум «агентам влияния».

интересное

История великого мастера и величайшего оружия современности.

В России пробела удаленного шпионажа стоит особенно остро.

С 1 июля 2020 года производителей обяжут устанавливать российское ПО на все устройства.

В Сети опубликована короткометражка о темной стороне технологий.

полезное

Эта инфекция передается через укус комара.

Не забудьте гору вкусностей и горячий чай.

Используем музыку вместо стимуляторов, алкоголя и прочих запрещенных веществ.

развлечения