Runway презентовала Gen-4 – новую модель искусственного интеллекта для стабильных и реалистичных видео

Стартап Runway представил новую модель ИИ для создания видео — Gen-4. Об этом сообщает TechCrunch.

Модель решает одну из главных проблем в генерации видео с помощью ИИ: обеспечение стабильности персонажей и объектов через различные сцены. Gen-4 способна создавать стабильные образы героев, локаций и предметов, сохраняя целостность окружающей среды и воспроизводя элементы с разных углов и позиций.

Пользователи могут загрузить изображение персонажа и описать желаемую композицию или кадр.

«Gen-4 способна использовать визуальные ссылки вместе с инструкциями для создания новых изображений и видео, сохраняя стиль, объекты, локации и другое без необходимости в дополнительной настройке или обучении», — говорится в блоге компании.

Модель также может обеспечивать стабильность персонажей при изменении освещения и создавать реалистичную физику в кадре. Разработчики отметили, что для обучения модели был использован большой объем видеоматериалов, но источники данных остаются конфиденциальными, чтобы сохранить конкурентные преимущества.

По словам Runway, Gen-4 является важным шагом вперед в способности визуальных генеративных моделей воспроизводить физику реального мира. Система позволяет пользователям размещать объекты и персонажей в различных точках пространства, сохраняя логическую последовательность.

Что известно о Gen-4:

Четкость и фотореализм: новый ИИ обеспечивает высокий уровень детализации в каждом кадре, точно передавая как сцены, так и внешний вид персонажей;

Плавная динамика движения: видео выглядит почти так же, как снято настоящей камерой — никакой «ломаности» или размытия;

Интеграция реальных объектов: достаточно загрузить фотографию предмета — и он мгновенно появится в виртуальной сцене;

Точность выполнения запросов: платформа лучше распознает текстовые и визуальные инструкции, обеспечивая естественную целостность видео, как если бы оно было снято одним дублем;

Редактирование по принципу «слоев»: каждая сцена — как отдельный слой в Photoshop. Это позволяет изменять элементы независимо, не влияя на всю композицию;

Создание роликов в Full HD: поддерживается экспорт видео длительностью 5–10 секунд в разрешении 1080p.

Разработчики уверены, что Gen-4 — это только шаг к еще более мощным версиям генерации видео, которые могут изменить киноиндустрию, рекламу и контент-мейкинг.

Подписывайтесь на наш Тelegram-канал t.me/sudua и на Google Новости SUD.UA, а также на наш VIBER, страницу в Facebook и в Instagram, чтобы быть в курсе самых важных событий.