После того, как нейросети заполонили все соцсети, я уже не удивляюсь ничему. Часто попадаются видео, собирающие сотни тысяч лайков, где:

• Питомцы просто танцуют или исполняют другие человеческие движения;

• Блогеры «в один щелчок» преображаются с точностью один к одному в голливудскую звезду или персонажа из фильма, — как под копирку!

Я восхищался и думал, что за этим стоят крутые монтажёры. Через время начал разбираться, как сделать что-то похожее, и удивился, насколько это сейчас просто и доступно буквально каждому.

Например, у меня получилось так. Как повторить и как применять — расскажу ниже ?

Kling Motion Control перевоплотит Вас в любого персонажа!

Kling Motion Control 3.0 — это инструмент, который можно встретить в разных ИИ-генераторах. Я пользуюсь generator-video.pro: сервис даёт бесплатные ежедневные монеты (внутренняя валюта) для теста, и работать с ним можно всего от 99 рублей. Протестить — самое то.

Итак, функционал Motion Control позволяет загрузить два файла:

• вашу исходную фотографию

• и видео-референс, который будет взят за основу движения и моторики.

Монтировать больше ничего не нужно. Вам остаётся всего лишь выбрать качество и длительность в настройках. Остальное ИИ сделает сам.

Фотографии и видео-референсы можете взять любые: выбрать из галереи, скачать из соцсетей или сгенерировать самии.

В видео-референсе должен быть чётко виден весь верх вашего персонажа. Лучше получается, когда голова, плечи и грудь видны почти всё время. Если в кадре только лицо, персонаж обрезан или слишком далеко — генерация будет отклонена!

По фотографиям — тоже важный нюанс. Чтобы получить классный результат, фотография должна быть с открытым лицом, с хорошим освещением и желательно в полный рост, чтобы ИИ сам не придумывал лишние детали. Также важно, чтобы фотографии были без бликов и размытости.

Инструкция по созданию подобных видео

Рассказываю, как делал я. По шагам и по порядку. 

Первое. Ищем видео-референс в ТикТок, Youtube или других соцсетях. Далее — подбираем качественное фото себя или любого персонажа.

Второе. В generator-video.pro выбираем инструмент Motion Control. В этом разделе добавляем видео-референс и исходную фотографию. Далее — переходим на второй шаг. Там выставляем качество генерации и выбираем формат. Советую ставить качество 1080p.

Третье. Ждём пару минут и получаем результат, который сохранится во вкладке «Мои видео» в профиле.

Четвёртое (бонус): расскажу, как заменять и добавлять любых персонажей в сцены фильмов, клипов или других видео. Пригодится блогерам или контент-мейкерам. Возьмите первый кадр с видео-референса. Далее — в разделе Motion Control нажмите на карандаш. Загрузите сначала взятый первый кадр, потом чёткое фото любого вашего персонажа. После в текстовом запросе пропишите:

«Замени персонажа на первом фото персонажем со второго фото. Фон, одежду, освещение и мимику не менять».

Чтобы всё перенеслось идеально, используйте качество «Премиум».

В результате персонаж из выбранного кадра заменится на персонажа из вашего исходного фото.

Далее — берёте полученную фотографию, загружаете уже её как фото-референс, добавляете видео-референс и получаете результат с вашим замененным персонажем! Бинго!

Результат получается в 60 FPS в 720/1080p

И ещё некоторые технические моменты, которые стоит знать заранее.

Как выглядит хороший видео-референс:

• Длительность — от 3 до 30 сек;

• Формат видео — любой (9:16, 16:9, 1:1);

• В кадре — только один человек (иначе ИИ может путаться);

• Движения видны чётко;

• Видео — хорошего качества (чем выше качество, тем лучше результат);

• Видео — без очень резких движений;

• Освещение — хорошее;

• Крупность плана сочетается с исходником фото: полный рост персонажа в видео соответствует полному росту персонажа в фото, портрет к портрету.

Как выглядит хорошее исходное фото с вашим персонажем:

• Персонаж соответствует крупности плана с видео-референсом;

• Вокруг персонажа есть пространство для движений (иначе ИИ может обрезать конечности и генерировать неестественный результат);

• Руки не спрятаны и не убраны в карманы;

• Фото чёткое, с хорошим освещением;

• Без размытости и затемнений.

Motion Control постоянно улучшается, но в процессе всё ещё могут возникать некоторые ошибки. К примеру, если фото вашего персонажа в маске или его плохо видно, ИИ может сам дорисовать улыбку, зубы и т.д. Если спрятаны руки, то нейросеть дорисует лишние пальцы или конечности. Также движения могут не совпадать с референсом из-за их быстроты или из-за длительности более 30 секунд.

Чтобы исправить все эти недочёты, не пренебрегайте референсами, подбирайте фотографии с хорошим разрешением и больше экспериментируйте, пробуйте генерировать не один раз.

Подойдёт для блогов, соцсетей, рекламы и бизнеса

Можно заметить, что уже сейчас самые активные пользователи находят Kling Motion Control разные применения. Они забирают себе внимание аудитории и хорошо это монетизируют.

Создание AI-блогов/AI-инфлюенсеров. Придумывают вымышленных персонажей, за которыми интересно наблюдать, добавляют им свои акценты. Подходят с творческой стороны, тем самым продвигают свои услуги, продукты, продают рекламу, вовлекают аудиторию и при этом экономят время на постпродакшене.

Улучшение визуала в видеороликах. Можно создавать клипы, развлекательные видео, заменять персонажей в сценах из популярных фильмов и подставлять любых других. Самое простое — создавать танцевальные ролики. Формат под TikTok или Reels. Всё, что нужно — это взять понравившееся видео танца или тренда как референс и подставить своего персонажа. Если танец в полный рост, то фото вашего персонажа также должно соответствовать, чтобы не было «каши» при генерации.

Развитие бизнеса. Многие создают интересные карточки товаров на маркетплейсах, продвигают рекламу с оживлением и визуализацией услуг, прокачивают внешний вид посадочных страниц. Вариантов — масса.

Другие примеры

Заключение

Благодаря технологии Kling Motion Control теперь можно перевоплотиться в кого угодно. Это доступно каждому, повторить сможет даже ребёнок. Понадобится лишь фотография персонажа с хорошим освещением и качественный видео-пример. Подойдёт новичкам и профессионалам: блогерам, контент-мейкерам, маркетологам.

Весь функционал Kling Motion Control и другие инструменты для работы доступны в generator-video.pro.