Видео и творческий замысел
Как оживить фотографию и сделать из неё короткое видео
В телефоне осталась удачная фотография цикламена на подоконнике. Цветы розовые, горшок терракотовый, за стеклом мягкий утренний свет. Хочется отправить близким маленькую видеозарисовку или поставить её в начало заметки о домашних растениях, а в распоряжении только снимок.
Для такой задачи подойдёт оживление фото нейросетью. Я бы попробовал маленькую сцену с ветерком: цветки чуть покачиваются на тонких стеблях, листья слегка шевелятся, а горшок стоит на месте. Камера остаётся неподвижной, поэтому взгляд задерживается на самом растении. Получится замысел тихого утра у окна, который можно воплотить даже по единственной фотографии.
В Runway Gen-4.5 фотография задаст начало ролика, а нейросеть по описанию дорисует новые положения цветков и листьев. Ниже разберём, как задать такое движение и выбрать пригодный вариант. По тому же принципу можно задумать пар над чашкой или волны на озере.
Выберите фотографию, в которой есть на что смотреть
Откройте снимок крупно. Для цикламена выберите фотографию, на которой цветки и их стебли различаются на фоне окна, а вокруг листьев есть немного места. Так проще описать, какие части растения должны двигаться. Для первой попытки я советую собственный снимок с ясными очертаниями и спокойным фоном. На заставке зритель сразу поймёт, куда смотреть.
В режиме Image to Video, то есть «из изображения в видео», фотография задаёт первый кадр, свет и расположение предметов. Размытый исходник усложняет задачу, поэтому лучше взять чёткий снимок, чем надеяться поправить резкость запросом. Так устроена работа с изображением в официальном руководстве Runway.
Заодно решите, где будет жить ролик. Для вертикальной истории удобен вертикальный снимок; для заставки в горизонтальном видео берите горизонтальный. При смене пропорций часть фото может уйти за край, поэтому оставьте вокруг главного предмета немного свободного места.
| Что есть на фотографии | Какое движение попробовать | Для чего пригодится | Что должно остаться узнаваемым |
|---|---|---|---|
| Цветущий цикламен целиком, стебли хорошо различимы | Цветки мягко покачиваются, листья слегка шевелятся от ветерка | Вступительная зарисовка об утре у окна | Цветки держатся на стеблях, горшок стоит на месте |
| Чашка с напитком на столе | Над напитком медленно поднимается тонкая струйка пара | Уютный кадр к заметке о чае | Край, ручка и рисунок чашки |
| Озеро с деревьями на берегу | По воде идут небольшие волны, камера остаётся неподвижной | Спокойный фон для подписи о прогулке | Линия берега и силуэты деревьев |
В таблице приведены варианты замысла. Для выбранного снимка возьмите одно движение, которое хочется увидеть, и сначала доведите до него один кадр.
Опишите движение, которое можно увидеть
С запросом «оживи красиво» нейросети придётся самой выбрать, что двигать и с какой скоростью. Цветок может резко повернуться, камера отъедет к окну, появится другое настроение. Для нашей зарисовки опишите лёгкое покачивание цветков и почти незаметное движение листьев. Горшок и окно при этом должны оставаться на месте.
Фотография уже содержит цвет растения, фактуру горшка и утренний свет. В руководстве по Image to Video Runway рекомендует сосредоточить текст на движении. Укажите, что движется, в какую сторону и насколько быстро. Слова «медленно» и «слегка» здесь работают на конкретный замысел, ведь сильный порыв превратит тихое утро в сцену перед грозой.
Вот авторский пример запроса для фотографии цикламена. Его можно вставить вместе со снимком или заменить растение своим предметом.
От лёгкого ветерка цветки цикламена медленно покачиваются на гибких стеблях.
Движение небольшое и плавное: цветки слегка отклоняются в сторону и мягко возвращаются.
Листья у основания растения чуть шевелятся от того же ветерка.
Горшок и подоконник остаются неподвижными.
Камера закреплена и остаётся неподвижной. Один непрерывный кадр.
В запросе описано желаемое поведение каждой части сцены. Цветки качаются на стеблях, горшок стоит, камера закреплена. Такой способ формулировать задачу согласуется с советами Runway по запросам.
Длительность выберем в настройках отдельно. Для небольшой заставки начните с четырёх секунд, чтобы успеть заметить, как цветки отклоняются и возвращаются. Точная траектория станет видна после генерации; из полученного варианта выберите тот, в котором покачивание выглядит мягко.
Загрузите снимок в Runway и запустите генерацию
Откройте Runway и войдите в аккаунт. Описанный маршрут использует Gen-4.5, доступную на тарифе Standard и выше. При списании кредитов генерация стоит 12 кредитов за секунду, поэтому четырёхсекундная попытка потребует 48 кредитов. До запуска проверьте доступ к модели и показанную стоимость; это условие официальной справки Gen-4.5.
- В разделе Apps найдите Gen-4.5 через поиск. Название модели подскажет, что открыт нужный инструмент.
- Перетащите фотографию в окно запроса. Так используется режим Image to Video. Рядом введите описание движения из примера.
- Проверьте Aspect Ratio, то есть соотношение ширины и высоты. Для вертикальной заставки выберите 9:16, для горизонтальной 16:9. Посмотрите, целиком ли остались в кадре цветки.
- В Duration задайте 4 секунды. В расширенных настройках Advanced выберите 24 fps; fps означает число кадров в секунду.
- Нажмите Generate и дождитесь готового видео. Кнопка запуска и эти настройки описаны в пошаговой справке Runway.
После генерации посмотрите ролик от начала до конца. Для нашего замысла внутри неподвижного кадра должны мягко двигаться цветки и листья, сохранив узнаваемое растение. Красивый первый кадр ещё ничего не говорит о последних секундах.
Доработайте кадр и сохраните MP4
Сначала смотрите как зритель. Чувствуется ли лёгкий ветерок, приятно ли задержаться на цветке, подходит ли движение к настроению будущей заметки? Затем обратите внимание на детали. Цветки остаются соединены со стеблями, листья сохраняют очертания, горшок стоит на подоконнике. Если лепестки сливаются или растение словно расплывается, такой вариант лучше доработать.
Если цветки раскачиваются слишком сильно, замените вторую строку на «Цветки едва заметно покачиваются, каждый остаётся на своём стебле». Если одновременно двигается вся сцена, уточните последнюю строку словами «Неподвижная камера, положение окна и горшка постоянно». Когда мелкие листья заметно искажаются, упростите замысел до движения цветков и замените строку о листьях на «Листья остаются неподвижными». Сохраняйте фотографию и меняйте одну нужную фразу, чтобы понимать, какая поправка влияет на результат. Каждый новый запуск расходует кредиты согласно выбранным настройкам.
Для работы над текстом задания пригодится статья о том, как уточнить запрос после ответа ИИ. В случае с видео поправка тоже должна называть видимое действие, например силу покачивания или неподвижность горшка.
Под готовым роликом справа находятся элементы управления, в том числе скачивание. Сохраните понравившийся вариант. Стандартный формат MP4 подходит для просмотра и передачи; его назначение подтверждает справка Runway о форматах видео.
Откройте скачанный файл и просмотрите целиком. Если это заставка к заметке, посмотрите и первый, и последний кадр рядом с будущим текстом. Спокойное покачивание узнаваемых цветков подходит к выбранной зарисовке. Перед отправкой близким подпишите ролик «видеозарисовка по фотографии», чтобы было понятно, откуда взялось движение.
Вопросы и ответы
Можно ли написать запрос по-русски?
Да, Runway принимает запросы на разных языках. Интерфейс при этом остаётся без локализации, поэтому в инструкции приведены английские названия кнопок. В справке о языках сервис отмечает, что запросы на разных языках могут работать неодинаково. Если движение передано неточно, сначала упростите описание до одного действия.
Какой длины получится ролик?
В Gen-4.5 выбирается длительность от 2 до 10 секунд. Для лёгкого покачивания цветков в примере отведены четыре секунды. Если задумали несколько последовательных действий, лучше сначала решить, какую часть истории передаёт каждый кадр, и уже под неё выбирать длительность.
Получится ли восстановить, что происходило после снимка?
По фотографии нейросеть придумывает продолжение. В нашем примере ветерок тоже часть замысла. Для рассказа о том, как растение действительно менялось или распускалось, берите настоящую видеозапись либо последовательность снимков.
От одного снимка к маленькой истории
Когда короткий кадр готов, у заметки появляется начало: цикламен чуть качается, словно у окна прошёл ветерок. Дальше можно добавить исходную фотографию и подпись о том, чем растение вам нравится. Так придуманная видеозарисовка и настоящий снимок найдут в рассказе своё место.
Если хочется собрать такую историю из нескольких материалов, на странице творческой практики можно описать замысел, состав сцен и то, что проверить перед показом. В клубе работа с собственными задачами продолжается через практику, вопросы и проверку проектных работ.
Для первой видеозарисовки выберите снимок с хорошо видимыми цветками и попробуйте придать им лёгкое покачивание. Пусть в готовом кадре останутся тот самый цикламен и ощущение тихого утра у окна.