Нейросеть научили рисовать мультики по тексту

© pixabay.com

© pixabay.com

Американские ученые разработали алгоритм, который может превратить любой текст в короткий анимационный ролик. Испытать программу решили на популярном мультсериале «Флинтстоуны».

Программу, в основе которой находится нейросеть, назвали CRAFT (Composition, Retrieval and Fusion Network). Ее цель — преобразовать текст в картинку, опираясь на заранее известный шаблон.

Например, нейросеть знает, как выглядит место (кухня, спальня, двор), какие герои есть в мультфильме и какие действия они могут выполнять. Анализируя текст, алгоритм составляет полную картину происходящего и накладывает анимацию.

Разработчики обучали нейросеть на 25 тысячах роликов из мультсериала «Флинтстоуны», чтобы отделить все диалоги, действия и героев. В итоге у нейросети появилась целая библиотека текстов, фонов и действий, из чего могут получиться новые уникальные сюжеты.

Конечно, не все созданные алгоритмом ролики получаются логичными, но ученые работают над этим. Система обработки информации еще несовершенна, поэтому иногда нейросеть ошибается с выбором места или путает действия героев.

Качество роликов тоже оставляет желать лучшего, но нужно с чего-то начинать, считают американские разработчики.

Нам важно ваше мнение!

+0

Комментарии (0)

В других СМИ:

Картина дня

Бездна новостей
Все новости

Ранее Илья Гаффнер советовал россиянам «поменьше питаться».

Супруга расчлененного рэпера записала видео для своих подписчиков.

распахнутьcвернуть

гражданская журналиcтика

Немного о ситуации в стране.

Очень прикольный городской музей Эйлата, про который не знают туристы (Израиль)

интересное

Это поможет для изучения процесса генного редактирования.

Это может помочь сервису избежать блокировки на территории США.

«Мы должны выходить из сложившейся ситуации. Кто будет за это отвечать?»

полезное

Результаты исследования могут изменить принципы лечения женщин с ожирением.

Они проверили, как частота и интенсивность смеха влияют на переживание стрессовых событий.

развлечения