Runway AI: генерация видео из текста, монтаж и права

Runway — компания-разработчик креативного софта, которая создаёт ИИ-инструменты для видео, изображений и звука. Её главный продукт — студия в браузере с мобильным приложением-компаньоном, где можно генерировать новые кадры из текста и изображений и применять ИИ-правки к уже отснятому видео. Им пользуются независимые авторы, маркетологи, агентства, а также команды кино и телевидения, причём для самых разных задач: от роликов для соцсетей до концептов и визуальных эффектов.

Компания ведёт и собственные исследования и время от времени выпускает новые поколения своих видеомоделей. Названия моделей и их точные возможности быстро меняются, поэтому полезнее думать о том, что делает каждый инструмент, например генерирует кадр, сохраняет персонажа узнаваемым или удаляет фон, чем запоминать номера версий.

Большая часть работы в Runway расходует кредиты. Сколько кредитов уйдёт на генерацию, зависит от модели, длины клипа и настроек качества, а тарифы отличаются количеством включённых кредитов и доступными функциями. Перед крупным проектом проверьте актуальные условия тарифов.

В режиме text-to-video вы описываете кадр, а модель генерирует короткий клип. Клипы длятся секунды, а не минуты, поэтому планируйте работу отдельными кадрами, а не целыми сценами. Сильный промпт называет объект, действие, место, освещение, движение камеры и общий визуальный стиль. Например: медленный наезд камеры на старого рыбака, который чинит сеть на деревянном причале на рассвете, лёгкая дымка, приглушённые цвета, документальная стилистика.

Режим image-to-video обычно даёт больше контроля. Вы начинаете со статичного изображения, будь то ваша фотография, 3D-рендер или сгенерированная картинка, и описываете, как оно должно двигаться. Поскольку композиция и стиль уже заданы изображением, промпт может сосредоточиться на движении и работе камеры. Некоторые модели позволяют задать и последний кадр, а свежие модели умеют использовать референсы, чтобы один и тот же персонаж, товар или локация оставались узнаваемыми в нескольких кадрах.

Будьте готовы к итерациям. Сгенерируйте несколько вариантов, оставьте лучший и меняйте что-то одно за раз. Описывайте движение явно, а не только внешний вид, не пытайтесь уместить несколько действий в один клип и следите за типичными слабыми местами: руками, читаемым текстом, толпами и быстрыми сложными движениями.

Первую известность Runway принесли инструменты ИИ-монтажа, и они по-прежнему составляют важную часть его ценности. Инструмент удаления фона отделяет человека или объект от сцены без настоящего хромакея, что экономит часы ручного ротоскопинга. Удаление объектов позволяет закрасить лишний элемент, например вывеску, случайного прохожего или попавший в кадр микрофон, и заполнить образовавшуюся пустоту.

Другие инструменты не чистят, а преображают видео. Стилизация video-to-video сохраняет движение в клипе, но меняет его облик, например переводит живую съёмку в живописную или анимационную стилистику. Можно также продлить клип, расширить кадр под другое соотношение сторон, повысить разрешение, сделать замедленную съёмку за счёт генерации промежуточных кадров и синхронизировать движения губ с аудиодорожкой. Инструменты на основе актёрской игры переносят мимику и подачу актёра на сгенерированного персонажа.

Точный набор инструментов и их названия меняются, а некоторые доступны только на определённых тарифах. Если инструмента, о котором вы читали, нет в вашем рабочем пространстве, проверьте, не переименовали ли его, не объединили ли с другой функцией и не перенесли ли на старший тариф.

Начните со сценария и покадрового плана и определитесь с соотношением сторон под целевую площадку: вертикальное для коротких роликов в лентах, горизонтальное для большинства видеосайтов и презентаций. Отметьте, какие кадры действительно нужно генерировать, а какие лучше снять, записать с экрана или взять из лицензированных стоков.

Зафиксируйте визуальный стиль до анимации. Сначала создайте или соберите ключевые статичные кадры для персонажей, локаций и товаров, согласуйте их и только потом превращайте в движение. Это экономит кредиты, ведь правка статичного изображения обходится гораздо дешевле повторной генерации видео, и помогает сохранить единый стиль. Проверяйте движение на коротких отрезках или с пониженными настройками, прежде чем запускать генерацию в финальном качестве.

Упорядочивайте отобранные дубли по ходу работы: давайте файлам понятные имена и записывайте, какой промпт и какая модель использовались. Собирайте монтаж в видеоредакторе вроде CapCut, Premiere Pro или DaVinci Resolve. Сгенерированным клипам часто нужна цветокоррекция, чтобы они сочетались между собой, а звук во многом делает сцену убедительной, поэтому заложите время на закадровый голос, музыку и шумовые эффекты.

Условия Runway определяют, кому принадлежит результат и как его можно использовать в коммерческих целях, и детали могут различаться в зависимости от тарифа. Прежде чем сдавать работу клиенту, прочитайте актуальные условия и проверьте настройки экспорта: на некоторых тарифах к скачанным файлам добавляется водяной знак.

Исходные материалы важны не меньше результата. Загружайте только те видео, изображения и аудио, на использование которых у вас есть права, и проверьте, не запрещают ли лицензии стоков, договоры с клиентами или условия конфиденциальности загружать материалы в сторонние ИИ-инструменты. В коммерческих проектах не просите модель воспроизводить узнаваемых персонажей, защищённых авторским правом, чужие логотипы и товарные знаки.

Вопрос охраны авторским правом материалов, полностью созданных ИИ, всё ещё не решён и зависит от страны. В ряде юрисдикций, включая США, охрана зависит от существенного творческого вклада человека, поэтому ваш собственный вклад через сценарий, отбор кадров, монтаж, композитинг и звук укрепляет вашу позицию. В клиентских проектах пропишите в договоре, какие части созданы ИИ и кому какие права принадлежат.

Реалистичное синтетическое видео может ввести людей в заблуждение, даже если такой цели не было. Крупные видеоплатформы и соцсети просят авторов помечать реалистичный контент, созданный или существенно изменённый с помощью ИИ, и многие предлагают соответствующую отметку при загрузке. Пользуйтесь ею, особенно если ролик похож на настоящую съёмку реальных событий.

Никогда не создавайте без явного согласия человека реалистичное видео, где он говорит или делает то, чего не говорил и не делал. Помимо этики, это может нарушать условия использования Runway, правила площадок и законы о клевете, мошенничестве и праве на собственное изображение. То же касается рекламы: ИИ-кадр, где товар делает то, чего на самом деле не умеет, остаётся недостоверным рекламным утверждением, как бы хорошо он ни выглядел.

Ведите простые записи по каждому проекту: промпты, исходные файлы, модели и список сгенерированных кадров. С ними проще маркировать контент, отвечать на вопросы клиента и повторить нужный стиль позже.

Runway лучше всего подходит, когда нужны короткие эффектные кадры, материалы для концептов и питчей, контент для соцсетей или эффекты, которые долго делать вручную. Хуже он справляется с длинными непрерывными сценами с точными диалогами и действиями, где живая съёмка или традиционная анимация по-прежнему дают больше контроля.

Хороший первый проект — небольшой: короткий тизер товара или анимированная версия нескольких статичных изображений с закадровым голосом и музыкой. Так вы поймёте, как ведут себя модели, сколько попыток требует пригодный кадр и как планировать расход кредитов, прежде чем браться за что-то крупное.