Искусственный интеллект создает фильм по нескольким строчкам сценария
ИИ-алгоритм создает фильм по нескольким строчкам сценария. Так называемый генеративный алгоритм создает изображения из меток. ИИ даже может предсказать по нескольким кадрам следующий. Но никто до сих пор не пытался собрать кадры вместе в последовательную историю, созданную на основе краткого сценария, пишет HighTech со ссылкой на Science.
Нейронная сеть действует в два этапа, которые имитируют работу съемочной группы. Сначала с помощью текста создается основное содержание видео, по сути — размытое изображение фона с кляксой на том месте, где должно произойти главное действие. Во второй стадии с помощью текста и черновика видеоряда компьютер монтирует собственно фильм.
Вторая нейронная сеть при этом производит сравнение. Она видит фильм, который иллюстрирует, скажем, «плавание под парусом», и настоящее видео с яхтой и должна выбрать настоящее. Когда первая нейронная сеть справляется с задачей, вторая поднимает планку и начинает придираться еще более дотошно. Постепенно качество работы улучшается.
Пока таким образом удалось создать видеоролики всего по 32 кадра длиной и продолжительностью около секунды, а размером они с почтовую марку, 64×64 пикселя.
