Нейросеть научили рисовать мультики по тексту

© pixabay.com

© pixabay.com

Американские ученые разработали алгоритм, который может превратить любой текст в короткий анимационный ролик. Испытать программу решили на популярном мультсериале «Флинтстоуны».

Программу, в основе которой находится нейросеть, назвали CRAFT (Composition, Retrieval and Fusion Network). Ее цель — преобразовать текст в картинку, опираясь на заранее известный шаблон.

Например, нейросеть знает, как выглядит место (кухня, спальня, двор), какие герои есть в мультфильме и какие действия они могут выполнять. Анализируя текст, алгоритм составляет полную картину происходящего и накладывает анимацию.

Разработчики обучали нейросеть на 25 тысячах роликов из мультсериала «Флинтстоуны», чтобы отделить все диалоги, действия и героев. В итоге у нейросети появилась целая библиотека текстов, фонов и действий, из чего могут получиться новые уникальные сюжеты.

Конечно, не все созданные алгоритмом ролики получаются логичными, но ученые работают над этим. Система обработки информации еще несовершенна, поэтому иногда нейросеть ошибается с выбором места или путает действия героев.

Качество роликов тоже оставляет желать лучшего, но нужно с чего-то начинать, считают американские разработчики.

Нам важно ваше мнение!

+0

Комментарии (0)

В других СМИ:

Картина дня

Бездна новостей
Все новости

Отважным путешественникам лишь в самом конце понадобилась помощь других людей.

Предприятие не было официально зарегистрировано и не имело пожарной сигнализации.

распахнутьcвернуть

гражданская журналиcтика

Немецкие дивизии попали в окружение в «Фалезском мешке».

80% процентов детей, находящихся в детских домах России, не являются сиротами.

Кругобайкальская железная дорога проходит прямо над крутыми берегами озера.

интересное

Snapdragon 7c и Snapdragon 8c предназначены для ноутбуков и планшетов начального уровня.

Вместе с полностью беспроводным iPhone компания может представить собственную зарядную станцию.

Производители энергетических напитков смогли угодить любителям ЗОЖ

полезное

По их данным, недостаток и избыток сна опасны для сердца.

Как не утащить за собой в новый год гору нерешенных вопросов?

развлечения