Разработчики Runway, веб-редактора видео на основе машинного обучения, представили Gen-1 — совершенно новый ИИ для преобразования роликов. Он позволяет менять стилистику и композицию видео на основе простых статичных картинок и текстовых запросов.
У Gen-1 как минимум пять режимов:
- Стилизация — добавляет стиль любого изображения в каждый кадр вашего видео.
- Раскадровка — превращает макеты в полностью стилизованные и анимированные рендеры.
- Маска — изменяет определённые объекты в кадре с помощью простых текстовых подсказок.
- Рендеринг — превращает трёхмерные модели в реалистичные кадры, применив входное изображение или текстовую подсказку.
- Кастомизация — раскрывает всю мощь Gen-1, позволяя настраивать модель ИИ для получения более точных результатов.
Как всё это работает — демонстрирует эффектное видео от разработчиков технологии.
Gen-1 пока ещё на стадии доработки, но запросить доступ к ИИ можно уже сейчас на сайте Runway.