Runway: что это за нейросеть и как ей пользоваться

Runway — ИИ-сервис для генерации и редактирования изображений, видео и аудио. От аналогов он отличается собственной моделью Gen-4.5, которая сохраняет персонажей, объекты и окружение от сцены к сцене. Это позволяет создавать серии картинок и длинные видеоролики без постоянной пересборки визуального стиля.

В этой статье мы расскажем, как начать работу с Runway бесплатно, и рассмотрим ключевые особенности и инструменты платформы.

Содержание

• Что такое Runway
• Какие модели доступны в Runway
• Как в ней зарегистрироваться
• Создание изображений, видео и аудио в Runway
• Инструменты Runway для редактирования
• Дополнительные возможности платформы

Что такое Runway

Runway — облачная платформа для генерации изображений, видео и аудио по текстовому запросу. Созданный контент можно доработать прямо в сервисе — например, стилизовать изображение под журнальный коллаж, заменить фон или отдельные элементы в видео, настроить визуальные эффекты.

Вот благодаря каким фишкам Runway стала популярна:

• Простота использования. Все инструменты в сервисе готовы «из коробки». Пользователю не надо настраивать процесс генерации контента, выбирать отдельные модели под конкретные задачи или переопределять для них веса.
• Большой выбор инструментов для редактирования. Например, в Runway можно менять фон, освещение и покраску в видео или добавлять на изображения новые элементы. О конкретных инструментах мы поговорим позже.
• Возможность комбинировать разные модели для создания контента. Можно выстраивать цепочку из промптов, референсов и разных ИИ-инструментов, чтобы получить лучший результат или автоматизировать обработку контента.

Стоимость ежемесячной подписки на Runway варьируется от 0 до 95 долларов в месяц.

Бесплатный тариф даёт доступ к устаревшим моделям, например Gen-4 Turbo или Gemini 3 Pro, и ограниченному набору инструментов для работы с изображениями и видео. Кроме того, пользователь получает всего 125 кредитов на любые действия. Этого количества хватит на создание 20–30 изображений или 5–10 коротких видео. Лимит обновляется раз в месяц.

Платные тарифы снимают ограничения: открывается доступ к актуальным моделям и полному набору инструментов — например, можно добавлять персонажей в уже созданные сцены.

Какие модели доступны в Runway

В Runway для работы с изображениями и видео используются собственные модели Gen-3 и Gen-4 и нейросети от Google из семейства Gemini, Nano Banana и Veo. В некоторых инструментах на платных тарифах можно использовать специализированные модели для отдельных задач.

Gen-4.5 — флагманская модель Runway для видео и аудио. Она поддерживает генерацию сложных сцен с большим количеством элементов, фотореалистичное качество и корректную физику объектов. Модель может подбирать персонажам ролика озвучку, близкую к реальным голосам, которые можно загрузить, и фоновые звуки для происходящего в кадре.

Aleph — модель для анализа и редактирования загруженных видео. С помощью этой нейросети можно добавлять или удалять объекты из кадра, изменять окружение и освещение, выставлять камеру под другим углом и даже генерировать продолжение видеоряда, сохраняя логику происходящего.

GWM-1 (General World Model 1) — модель на базе Gen-4.5, позволяющая создавать симуляции реального мира. GWM-1 обучена предугадывать последовательность кадров, поэтому способна моделировать события в заданном окружении и действия ИИ-аватаров. В настоящий момент находится в разработке, но можно заполнить запрос на ранний доступ.

Как зарегистрироваться в Runway

Чтобы создать учётную запись, нажмите на кнопку Try Runway на главной странице сервиса. Введите электронную почту в открывшемся окне или войдите через учётную запись Google или Apple.

На следующей странице придумайте логин и пароль и нажмите на кнопку Create Account. Теперь пройдите капчу и подтвердите учётную запись, введя код, который придёт по почте.

После небольшого опроса вы попадёте в рабочее пространство ИИ-редактора, где можете приступить к созданию первого проекта.

Создание изображений, видео и аудио в Runway

В левой верхней части рабочего пространства можно выбрать один из трёх режимов генерации — изображение (Image), видео (Video) и аудио (Audio). Они дублируются в разделах Tool и App.

Image: создание изображений

Изображения можно создать на основе промпта, референсов или набросков. В последнем случае скетч можно загрузить с компьютера или нарисовать его в специальном инструменте — Sketch Layout.

Модель для генерации изображения выбирайте в нижней части окна. Набор доступных вариантов зависит от тарифа.

Мы попросили нейросеть сгенерировать изображение в стилистике Чарльза Мариона Рассела. Большинство его работ посвящено теме Дикого Запада. Runway отлично справилась с задачей, использовав правильную цветовую гамму и планы, характерные для оригинальных картин американского художника. И это даже без загрузки референсов.

Video: генерация видео

Для создания видео потребуется выполнить два действия: загрузить первый кадр для генерации видеоряда и написать уточняющий промпт. После этого нажмите кнопку Generate.

Audio: создание аудиоряда

Чтобы создать аудиозапись, откройте вкладку Audio, введите текст в специальном окне, выберите подходящий голос из списка и нажмите Generate.

Сервис поддерживает несколько языков, включая русский.

Где найти созданные изображения, видео и аудио

Сгенерированные в Runway материалы можно найти в Asset Library — библиотеке контента. Чтобы открыть её, нажмите на вкладку с вашей сессией, далее — на три точки и выберите пункт See generations in Asset Library.

В открывшемся окне можно просмотреть и прослушать созданный контент.

Чтобы сохранить файл из библиотеки на жёсткий диск, наведите на него курсор и нажмите на всплывающей панели кнопку Download. Кроме того, в верхнем правом углу экрана находится кнопка Download All, при помощи которой можно скачать все файлы, созданные во время одной сессии.

Инструменты Runway для редактирования

Инструменты для редактирования контента находятся во вкладке App. Откройте её и нажмите на кнопку See more в разделе для видео (Create Video) или для изображений (Create Image), чтобы увидеть все доступные варианты.

В бесплатной версии возможности редактирования ограничены.

Для работы с изображениями

Рассмотрим инструменты, которые используются для работы с изображениями.

Product Shot позволяет создать изображение с конкретным предметом в реалистичном окружении. Инструмент подойдёт тем, кто хочет получить фотографию какого-либо товара или изделия, но не готов проводить реальную фотосъёмку.

Чтобы сгенерировать изображение, потребуется фото предмета. После этого можно или ввести текстовый промпт, описывающий кадр, или выбрать готовый пресет.

Expand — инструмент для изменения соотношения сторон изображения. Нейросеть сгенерирует недостающие области картинки, ориентируясь на исходное изображение и текстовый промпт.

Create Ad используется для генерации баннеров и других промоматериалов. Пользователям доступно десять готовых пресетов для рекламы различных вариантов продукции, например напитков или аксессуаров.

При создании баннеров и других материалов можно загрузить несколько картинок и добавить надписи, которые появятся на итоговом изображении.

Mockup — инструмент для «примерки» дизайна на различные объекты и окружение. В Runway доступно много готовых пресетов — от одежды до муралов в стиле мозаики. Если не выбрать шаблон, то нейросеть создаст мокапы на своё усмотрение.

Stylize Image используется для стилизации изображений. На выбор много пресетов с конкретным стилем: карандашный рисунок, акварель, пиксель-арт, чёрно-белые тона и так далее.

Vary заменяет детали на изображении — от освещения и фона до объектов съёмки. Аналогично работает инструмент Vary Ad, который подойдёт для работы с промоматериалами.

Cinematic Brainstorm и Runway Look добавляют изображениям кинематографичности. Первый инструмент рассчитан на создание эффектных постеров, а второй ориентирован на работу с любительскими снимками. Разница между ними минимальная, и в работе над конкретным изображением советуем попробовать оба варианта.

Для работы с видео

В Runway доступно 15 инструментов для редактирования видео с помощью ИИ. Одни из них направлены на изменение стиля и улучшение качества, другие — на замену объектов в кадре. Рассмотрим некоторые из них.

Upscale увеличивает разрешение видео. Поддерживаются разные варианты, включая 4K. Продолжительность видео не должна превышать 40 секунд.

Animate Frames используется для создания плавного перехода из одного кадра в другой. Продолжительность нового видеоряда составляет от четырёх до восьми секунд в зависимости от настроек. В окне промпта можно описать, что именно должно быть в переходе между первым и последним кадром.

Backdrop — инструмент для замены фона в видео. В окне промпта можно прописать дополнительные условия, например характеристики освещения или добавление новых объектов. Также доступно восемь готовых пресетов: городской пейзаж, бар, поверхность Луны и так далее.

Character Swap добавляет персонажа в видеоряд. Для этого загрузите первый кадр сцены или опишите его промптом и добавьте изображение персонажа.

Color Grade — инструмент для цветокоррекции видео. Можно использовать готовые пресеты или написать инструкцию в промпте.

Dialogue подходит для «оживления» и озвучивания персонажей. В рабочем поле инструмента загрузите изображение персонажа и напишите промпт с текстом, который он должен произнести. Голос и стиль озвучки подбираются автоматически.

Lighting используют для настройки источников освещения и их интенсивности. Как и в случае с Color Grading, можно ввести промпт или выбрать один из девяти стандартных пресетов.

Motion Sketch — инструмент генерации видео по изображению с комментариями пользователя. Пометки на кадре делаются с помощью инструмента Sketch on Image.

Remove используется для удаления объектов из кадра. Это могут быть люди, предметы, транспорт, здания и другие детали, от которых необходимо избавиться.

При обработке используются только первые пять секунд из оригинального видео.

Stylize Video будет полезен для стилизации загруженного видеофрагмента. Можно сгенерировать его в различных стилях — от пластилиновой анимации до пиксель-арта.

Act-Two — инструмент переноса живой съёмки с репликами, эмоциями и жестами на видеоряд с цифровым аватаром из другого загруженного изображения или видео.

Дополнительные возможности платформы

Кроме работы с изображениями и видео, в Runway есть инструменты, которые упрощают для пользователей генерацию или изменение контента.

ИИ-помощник. На главной странице Runway доступен чат-бот, который запускается кнопкой Chat в левой части экрана. Можно отправить ему описание изображения либо видео для генерации или прикрепить готовые варианты, указав в промпте, что с ними требуется сделать.

Кроме генерации ИИ-помощник отвечает на вопросы про инструменты Runway и может дать рекомендации по генерации контента.

Workflow. Отдельное пространство для создания аудио и видео, в котором можно комбинировать разные модели. Сам процесс выглядит как объединение в связки нодов с разными параметрами.

Созданные комбинации можно сохранить в виде пресета, используя их в будущем для быстрого создания или обработки изображений или видео.