Нейросеть научили рисовать мультики по тексту

© pixabay.com

© pixabay.com

Американские ученые разработали алгоритм, который может превратить любой текст в короткий анимационный ролик. Испытать программу решили на популярном мультсериале «Флинтстоуны».

Программу, в основе которой находится нейросеть, назвали CRAFT (Composition, Retrieval and Fusion Network). Ее цель — преобразовать текст в картинку, опираясь на заранее известный шаблон.

Например, нейросеть знает, как выглядит место (кухня, спальня, двор), какие герои есть в мультфильме и какие действия они могут выполнять. Анализируя текст, алгоритм составляет полную картину происходящего и накладывает анимацию.

Разработчики обучали нейросеть на 25 тысячах роликов из мультсериала «Флинтстоуны», чтобы отделить все диалоги, действия и героев. В итоге у нейросети появилась целая библиотека текстов, фонов и действий, из чего могут получиться новые уникальные сюжеты.

Конечно, не все созданные алгоритмом ролики получаются логичными, но ученые работают над этим. Система обработки информации еще несовершенна, поэтому иногда нейросеть ошибается с выбором места или путает действия героев.

Качество роликов тоже оставляет желать лучшего, но нужно с чего-то начинать, считают американские разработчики.

Нам важно ваше мнение!

+0

Комментарии (0)

В других СМИ:

Картина дня

Бездна новостей
Все новости

Все выданные ранее документы останутся действительны до окончания срока.

распахнутьcвернуть

гражданская журналиcтика

Новые правила голливудской инклюзивности уже в действии.

Носить бороду в Таджикистане дело не самое безопасное.

Живопись изображает отечественных правителей людьми как говорится «в теле».

интересное

Разработчик приложил все усилия, чтобы успокоить взволнованное комьюнити.

Вспоминаем самые яркие и самые неприятные моменты из жизни аргентинского футболиста.

Многие поликлиники просто не работали в карантин.

полезное

развлечения

Рисунки крошечные, но несмотря на размер они полны деталей и ярких красок.

Приходится подстраиваться под мир, предназначенный для людей среднего роста.