Нейроновости Arnapress: новый ИИ для генерации видео от Google

Lumiere – это инновационный шаг в области генерации видео, основанный на пространственно-временной диффузии, или Space-Time-U-Net (STUNet).

Одной из ключевых особенностей Lumiere является возможность создавать реалистичные видеоролики продолжительностью в пять секунд по текстовому описанию. В отличие от некоторых альтернативных моделей, использующих двухэтапный процесс генерации, Lumiere создает видео за один проход. Это позволяет избежать несогласованности кадров между собой и обеспечивает более естественное визуальное восприятие.

Модель была обучена на внушительном наборе данных, включающем 30 миллионов видеороликов с текстовыми описаниями. Этот многообразный набор данных позволил Lumiere научиться генерировать видео разного стиля и содержания. Входные данные состояли из видео с разрешением 128×128 пикселей, длиной 80 кадров и частотой 16 кадров в секунду, в то время как на выходе модель создает пятисекундные ролики разрешением 1024×1024 пикселей.

Особенности работы Lumiere включают несколько режимов, таких как генерация видео по текстовому описанию, анимация изображений, соблюдение определенного стиля и возможность изменять только указанные фрагменты видео. Это предоставляет пользователям широкий спектр творческих возможностей.

Центр ИИ мирового уровня появится в Астане

В Астане в здании сферического павильона Nur Alem создадут Международный центр искусственного интелл ...

  • 01.07.2025

Девочка выпала из окна дома в Темиртау

30 июня из окна, расположенного на третьем этаже, выпала девочка в Темиртау, передает Liter.kz со ссылко ...

  • 01.07.2025

Под эгидой "Духа Китай - Центральная Азия" строим более тесное сообщество единой судьбы КНР и стран ЦА

За три десятилетия после установления дипломатических отношений Китай и страны Центральной Ази ...

  • 01.07.2025

Подозреваемую в присвоении 31 млн тенге сотрудницу банка задержали в Москве  

Ей грозит наказание в виде лишения свободы сроком от семи до двенадцати лет с конфискацией иму ...

  • 20.06.2025