Нейросеть научили создавать видео по тексту А также изображениям и другим видео
Генеративная нейросеть Dreamix способна создавать и редактировать видео по текстовым описаниям, изображениям и другим видеороликам. Алгоритм может генерировать анимацию на основе одного изображения или серии картинок, а также создавать новые видеоролики на основе других видеофайлов, добавляя, заменяя или вовсе убирая те или иные элементы из роликов.
Разработчики утверждают, что нейросеть понимает практически любой запрос и контекст. Dreamix может отредактировать видеоролик по текстовому запросу, сохранив цветовую гамму, позы, размеры объекта и положение камеры. Правда, пока система пока генерирует видеоролики с довольно низким качеством.
Персонажи заметно смазываются в движении, а животные часто выглядят неестественно. Dreamix является фактически внутренней разработкой корпорации Google Research, потому когда нейросеть появится в общем доступе, неизвестно. Если в будущем этот сервис станет публичным, он может стать заменой традиционным видеоредакторам.
Здесь мы подробно объясняем, как работают нейросети:
Использованные источники: