Компания Runway представила свою новейшую модель AI для генерации видео — Gen-4, которая обещает стать настоящей революцией в создании видеоконтента. Эта система решает одну из главных проблем, с которой сталкиваются разработчики видеогенераторов: поддержание единообразия персонажей и объектов в разных сценах.
Об этом сообщает КавПолит, ссылаясь на Runwayml.com.
Как утверждают представители Runway, Gen-4 значительно улучшила качество генерации видео по сравнению с предыдущими моделями. Главное техническое достижение заключается в том, что система теперь может сохранять последовательность внешнего вида персонажей и объектов при изменении освещения, локаций и других факторов, используя всего одно опорное изображение. Это открывает новые горизонты для создания более динамичных и реалистичных видео.
«Gen-4 устанавливает новый стандарт для создания видео и представляет собой значительный шаг вперед по сравнению с Gen-3 Alpha», — подчеркивают в Runway.
Система теперь объединяет визуальные ссылки с текстовыми инструкциями, что позволяет сохранять единую стилистику на протяжении всего видео. Это также делает процесс создания контента быстрее и более удобным, особенно для тех, кто работает с ограниченным временем и ресурсами.
Еще одним важным достижением является способность Gen-4 имитировать физику реального мира. Это позволяет пользователям размещать объекты и персонажей в разных сценах, сохраняя последовательность и правильную физику движения.
Для демонстрации возможностей Gen-4 Runway создала несколько короткометражных фильмов. Например, в «Нью-Йорк — зоопарк» персонажи, такие как животные, переносятся в разные сцены Нью-Йорка, а в «The Herd» изображена сцена погони на ночном коровьем поле, где Gen-4 сохраняет внешний вид персонажей при использовании всего нескольких референсных изображений.
«The Retrieval» — еще один яркий пример, где исследователи ищут таинственный цветок. Этот фильм был создан менее чем за неделю благодаря возможностям Gen-4.
Система уже доступна для платных подписчиков и крупных клиентов компании. В будущем ожидается добавление дополнительных функций, включая справочные материалы.
В результате Runway закрепила за собой лидерство на рынке видеотехнологий на основе искусственного интеллекта, с оценкой около 4 миллиардов долларов и прогнозируемой выручкой в 300 миллионов долларов к 2025 году, став одним из главных конкурентов для Sora от OpenAI.
Ранее мы передавали, Sony создает большое хранилище для размещения всех игр: что это значит для геймеров?