Google представила нейросеть Lumiere для генерации коротких реалистичных видео. Назван сервис по фамилии изобретателей кинематографа и постановщиков первых в мире фильмов братьев Люмьер. К сожалению, пока нет возможности протестировать ее работу, но мы обязательно это сделаем, когда сервис появится в общем доступе.
Модель искусственного интеллекта Lumiere использует пространственно-временную диффузию (Space-Time-U-Net, STUNet), что отличает его от других нейросетей. Если похожие сервисы сначала создают ключевые кадры, а затем создают движение между ними (из-за чего основные кадры порой плохо согласуются), то Lumiere создает видео за один проход. При обучении нейросети использовался датасет из 30 млн видеороликов с текстовыми описаниями.
В результате можно делать видеоролики по текстовому описанию, «оживлять» фотографии или их фрагменты, менять готовые видео и так далее. На выходе пользователь получит видеоролики продолжительностью пять секунд и размером 1024×1024 пикселей. Их можно будет использовать в рекламе, на аватарках и в постах. То есть, это будет весьма удобный инструмент не только в SMM, но и для создания баннеров для сайтов и приложений.
Дарья Капитонова, SMM-маркетолог TexTerra:
«В своей работе я неоднократно встречала и выкладывала ролики, созданные при помощи ИИ. Их качество становится все лучше и лучше, и если первые видео были сопоставимы по уровню с прописями первоклашки, то сейчас энтузиасты создают настоящие трейлеры к несуществующим фильмам. Вполне вероятно, что и Lumiere займет достойное место рядом с Runway, Pika Labs и другими нейросетями, и добавит что-то свое в генерацию видео.
Если бренд уже активно использует продвижение в видеоформате, то подобный ИИ будет отличным помощником, сократив время на создание роликов. К тому же сейчас, когда нейросети в центре внимания, их использование заставляет дополнительно говорить о бренде. Но, думаю, пройдет еще год-два и это станет уже абсолютно привычным инструментом».
Светлана Шульман, маркетолог TexTerra:
«Как и другие нейросети, помогающие генерировать изображения и видео, Lumiere может стать отличным помощником в деле создания уникального и привлекательного рекламного или промо-контента. Думаю, что подобные сервисы значительно упростят работу маркетологам, так как создание короткого видео из фото – это отличная альтернатива большим масштабным съемкам, например нового раздела каталога товаров. Достаточно будет загрузить фото и дать правильное задание – отображение нового продукта на сайте будет более живым и наглядным без привлечения операторов и видеографов. Безусловно, подобные технологии на службе маркетинга будут полезны».
Читайте также:
Причины блокировки групп «ВКонтакте»: руководство с примерами
За что прилетает страйк «ВКонтакте»: это шестиуровневая система