Runway представили Act-Two: Прорыв в AI-генерации видео

Runway представили Act-Two – революционное обновление в мире генерации видео с помощью искусственного интеллекта. Этот шаг вперед от Act-One открывает новые горизонты для создателей контента, позволяя добиваться ранее недостижимой реалистичности.

Теперь можно делать полноценную мимику, жестикуляцию и фон, что идеально подходит для AI-липсинга и создания динамичных сцен. Act-Two значительно расширяет границы креативности, позволяя создавать более живой и убедительный контент.

Ключевые преимущества Runway Act-Two

Новая версия предлагает ряд существенных улучшений, которые делают ее мощным инструментом для создателей контента:

• Улучшенное качество и стабильность: Act-Two обеспечивает более высокую детализацию и плавность движений, минимизируя артефакты и нежелательные искажения.
• Комплексный трекинг: Теперь доступен трекинг головы, лица, тела и даже рук, что открывает двери для создания более сложных и естественных анимаций.
• Простота использования: Для генерации видео достаточно предоставить видео перформанса и один референс персонажа, что значительно упрощает процесс создания контента.
• Поддержка разных стилей: Модель эффективно поддерживает различные стили, сохраняя при этом исходные детали персонажа, что позволяет экспериментировать с визуальным оформлением.
• Ограничения и перспективы: Максимальная длина видео составляет до 30 секунд, а качество — 720p.

В отличие от предыдущей версии, Act-Two выдает стабильные, реалистичные движения без необходимости использования дорогостоящих костюмов и трекеров. Это делает технологию более доступной и практичной для широкого круга пользователей. Изначально доступная только для подписчиков Enterprise и Creative Partners, компания обещает скорый релиз для всех пользователей, что вызывает большой интерес и ожидание в сообществе.

Потенциал применения Act-Two

Новые возможности Act-Two открывают перспективы для:

• Создания реалистичных аватаров: Для виртуальных встреч, презентаций и интерактивного контента.
• Производства динамичных рекламных роликов: С использованием персонализированных персонажей и сюжетов.
• Разработки игр и интерактивных историй: Где требуется реалистичная анимация персонажей.
• Улучшения процесса AI-липсинга: Делая синхронизацию губ и движений более точной и естественной.

Технические аспекты и будущее

Техническая сторона вопроса говорит о значительном прогрессе в алгоритмах машинного обучения, лежащих в основе Act-Two. Улучшенный трекинг и генерация мимики обусловлены более глубоким анализом лицевых структур и мышечных движений. Поддержка разных стилей без потери деталей свидетельствует о гибкости модели и ее способности адаптироваться к разнообразным визуальным задачам. Несмотря на текущие ограничения по длине и разрешению, потенциал технологии огромен.

Внедрение Act-Two может стать настоящим прорывом для многих индустрий, где визуальный контент играет ключевую роль. Возможность быстро и качественно создавать динамичные сцены с реалистичной анимацией персонажей значительно сократит время и затраты на продакшн.

Ожидание релиза для всех подогревается растущим интересом к инструментам генеративного ИИ. Runway активно развивает свои продукты, предлагая передовые решения для создателей контента. Следите за новостями, чтобы первыми опробовать новые возможности Act-Two!

Подробности анонса: Ссылка на анонс.

Источник: 📱 НейроПост #runway

Часто задаваемые вопросы о Runway Act-Two

• Что такое Runway Act-Two?
  Act-Two — это усовершенствованная версия AI-модели от Runway, предназначенная для генерации реалистичной мимики, жестов и фона в видео.
• Чем Act-Two отличается от Act-One?
  Act-Two предлагает значительно улучшенное качество, стабильность, комплексный трекинг (включая руки) и возможность генерации полноценной мимики и жестов, чего не было в Act-One.
• Какие требования к исходным данным для Act-Two?
  Для использования Act-Two достаточно предоставить видео перформанса и один референс персонажа.
• Будет ли Act-Two доступен всем пользователям?
  Да, Runway обещает выпустить Act-Two для всех пользователей после первоначального релиза для подписчиков Enterprise и Creative Partners.
• Каковы максимальные параметры видео, генерируемого Act-Two?
  Максимальная длина видео составляет до 30 секунд, а качество — 720p.