Генерация видео через Runway: с чего начать

Генерация видео через Runway устроена иначе, чем у Veo и Kling: это редактор поверх вашего материала. Разбираем первый заход и типичные промахи новичка.

Первый ролик, который я сделал на Runway, был провальным. Я подошёл к нему как к Veo: написал развёрнутое описание сцены с нуля и ждал готового ролика. Получил среднее видео, которое на той же задаче Kling сделал лучше. Ошибка была не в модели, а в том, что генерация видео через Runway устроена по другой логике, и я её просто не понял.

Как выглядит правильный первый заход, дальше по шагам.

Сцена, с которой всё стало понятно

У нас была съёмка сумки на белом столе, обычная, снятая на телефон. Нужен был ролик для карточки, но с вечерним городом за окном вместо белой стены.

По привычной логике это означало снимать заново в другом месте. Или описывать сцену словами и надеяться, что модель нарисует похожую сумку.

Мы загрузили исходный ролик и написали одну фразу про замену окружения с сохранением света на предмете. Через минуту получили ту же сумку, ту же фактуру кожи, ту же царапину на углу, но в другой сцене. Сумка осталась настоящей.

Вот с этого момента становится понятно, зачем Runway нужен отдельно от остальных.

Изображение

В чём отличие от Veo и Kling

Veo и Kling генерируют сцену. Вы описываете словами или даёте стартовый кадр, модель создаёт движение.

Runway работает поверх существующего материала: понимает, что в кадре, и меняет это по запросу. Замена фона, удаление и добавление объектов, смена света и времени суток. Подробный разбор возможностей есть в обзоре.

Отсюда правило выбора. Нет исходного видео, нужна сцена с нуля: Veo 3.1 или Kling 3.0. Есть материал, который надо доработать: Runway.

Сравнивать их между собой по реализму бессмысленно, они решают разные задачи.

Первый заход по шагам

Возьмите короткий исходник, секунд до пяти, снятый как угодно, хоть на телефон. Пять секунд это рабочий предел одного прохода, дальше материал режут.

Сформулируйте одно изменение. Не пять сразу. Замените фон. Или уберите лишний предмет. Или смените время суток.

Напишите запрос конкретно, с указанием, что сохранить. Формулировка «замени фон на вечернюю улицу, сохрани освещение на товаре» работает лучше, чем просто «сделай красиво на улице».

Посмотрите результат покадрово в местах стыка объекта и фона.

Повторите с уточнением. Второй заход почти всегда нужен, это нормально.

Где новички спотыкаются

Просят всё сразу. Замени фон, добавь человека, поменяй свет и сделай ночь. Модель путается, результат разваливается. По одному изменению за раз.

Берут слишком длинный исходник. Тридцать секунд модель просто не возьмёт за проход, это ограничение, а не вопрос качества.

Забывают про тени и отражения. Меняете окружение, а старый блик на товаре остаётся и выдаёт правку.

Ждут генерации с нуля. Runway это умеет, но не в этом его сила. Для сцены с нуля берите другие модели.

Про второй пункт я до сих пор забываю: загружаю ролик целиком, получаю отказ и вспоминаю, что модель так не умеет.

Когда генерация видео через Runway выходит дешевле остального

Считать надо не по цене генерации, а по тому, что вы не делаете.

Не снимаете второй раз в другой локации.

Не платите за ротоскоп и ручное отделение объекта.

Не переснимаете, когда клиент захотел вечер вместо дня.

На товарных роликах это обычно означает, что одна съёмка расходится на несколько вариантов сцены. Подробно расход считали в материале про стоимость генерации.

Часто задаваемые вопросы

Чем Runway отличается от Veo и Kling? Veo и Kling создают сцену с нуля по описанию или стартовому кадру. Runway работает поверх готового материала: меняет фон, свет, объекты в существующем ролике. Это разные задачи, а не конкуренты по качеству.

Нужно ли своё видео для работы с Runway? Для его сильной стороны да: редактирование предполагает исходник. Генерация с нуля тоже есть, но здесь модель не имеет преимущества перед специализированными видеомоделями.

Какой длины ролик загружать? Отрезками примерно до пяти секунд: это предел одного прохода. Длинный материал режут и сводят в монтаже.

Сколько изменений можно просить за раз? Одно. Несколько одновременных правок модель выполняет хуже, чем те же правки по очереди отдельными проходами.

Подходит ли Runway для карточек маркетплейса? Да, особенно когда есть реальная съёмка товара и её нужно поставить в другую сцену. Товар при этом остаётся настоящим, а не нарисованным заново.

Генерация видео через Runway: с чего начать, если раньше не пробовали