Нейросеть научили рисовать мультики по тексту
- 17 апреля 2018 13:14
- Эрика Ефремова, журналист «Ридуса», отдел «Наука и технологии»
Американские ученые разработали алгоритм, который может превратить любой текст в короткий анимационный ролик. Испытать программу решили на популярном мультсериале «Флинтстоуны».
Программу, в основе которой находится нейросеть, назвали CRAFT (Composition, Retrieval and Fusion Network). Ее цель — преобразовать текст в картинку, опираясь на заранее известный шаблон.
Например, нейросеть знает, как выглядит место (кухня, спальня, двор), какие герои есть в мультфильме и какие действия они могут выполнять. Анализируя текст, алгоритм составляет полную картину происходящего и накладывает анимацию.
Разработчики обучали нейросеть на 25 тысячах роликов из мультсериала «Флинтстоуны», чтобы отделить все диалоги, действия и героев. В итоге у нейросети появилась целая библиотека текстов, фонов и действий, из чего могут получиться новые уникальные сюжеты.
Конечно, не все созданные алгоритмом ролики получаются логичными, но ученые работают над этим. Система обработки информации еще несовершенна, поэтому иногда нейросеть ошибается с выбором места или путает действия героев.
Качество роликов тоже оставляет желать лучшего, но нужно с чего-то начинать, считают американские разработчики.
- Телеграм
- Дзен
- Подписывайтесь на наши каналы и первыми узнавайте о главных новостях и важнейших событиях дня.
Войти через социальные сети: