Разработчики Runway открыли для всех доступ к своей нейросети Gen-2, которая умеет генерировать короткие видеоролики по текстовому описанию.
Опробовать Gen-2 можно после быстрой регистрации (есть авторизация через Google-аккаунт). В сумме можно бесплатно создать 105 секунд видео. Сделать это можно как через веб-сайт Runway, так и через мобильное приложение для iOS.
На сайте вы можете выбрать обработку вашего видео через модель Gen-1 или создание ролика с нуля через Gen-2.
Во втором случае нужно лишь ввести текстом свой запрос — на английском языке. Например, вот результат по запросу «rain in the tropical forest» (дождь в тропическом лесу) — получилось прекрасно.
Видео Gen-2 длится всего несколько секунд. Его тут можно скачать на устройство.
В случае с предыдущей моделью нейросети, Gen-1, достаточно загрузить ролик, а в меню справа выбрать один из вариантов стилизации:
- по изображению — загрузите картинку, стиль который вы бы хотели наложить на ваше видео;
- по готовому пресету — сложные стили, которые больше подходят для динамичных роликов;
- по тексту — вы можете текстом указать, что в кадре и какой стиль вы бы хотели.
Ниже можно подкрутить настройки, а далее нужно нажать Preview styles — нейросеть покажет статичные изображения из вашего ролика после генерации. Останется выбрать вариант и сгенерировать полное видео.
Gen-1 плохо распознаёт, что именно представлено на видео, поэтому результаты стилизации не всегда радуют. Тем не менее получить что-то оригинальное всё же можно.
Вот, к примеру, ролик со стилизацией салюта над Невой по одному из пресетов.
А вот оригинальное видео.
Все полученные ролики можно скачать, но не забывайте про ограничение в 105 секунд. Оставшийся лимит выводится в верхней части сайта.