Нейросеть научили создавать видео по тексту А также изображениям и другим видео

Генеративная нейросеть Dreamix способна создавать и редактировать видео по текстовым описаниям, изображениям и другим видеороликам. Алгоритм может генерировать анимацию на основе одного изображения или серии картинок, а также создавать новые видеоролики на основе других видеофайлов, добавляя, заменяя или вовсе убирая те или иные элементы из роликов.

Разработчики утверждают, что нейросеть понимает практически любой запрос и контекст. Dreamix может отредактировать видеоролик по текстовому запросу, сохранив цветовую гамму, позы, размеры объекта и положение камеры. Правда, пока система пока генерирует видеоролики с довольно низким качеством.

Персонажи заметно смазываются в движении, а животные часто выглядят неестественно. Dreamix является фактически внутренней разработкой корпорации Google Research, потому когда нейросеть появится в общем доступе, неизвестно. Если в будущем этот сервис станет публичным, он может стать заменой традиционным видеоредакторам.

Здесь мы подробно объясняем, как работают нейросети: