Технологии развиваются настолько быстро, что не успеваешь моргнуть глазом, и вот уже глазами моргают статичные фотографии прошлого века. Да-да, мы говорим про анимацию изображений. Если ещё пару лет назад это казалось чем-то «на грани фантасмагории», то сегодня это настолько въелось в нашу жизнь, что обычный пост с анимированным изображением уже не вызывает эффекта «ВАУ, как это сделали?». Картинки не только шевелятся, моргают и улыбаются — они живут своей жизнью и даже коллабятся с другими!

Сегодня мы решили проверить возможности нейросетей. Насколько далеко они шагнули? Смогут ли они не просто заставить лицо моргнуть или улыбнуться, а действительно вдохнуть жизнь в статичные картинки?

А чтобы сделать эксперимент интереснее, мы выбрали для испытаний культовых персонажей мировой истории. Что скажете, если Юлий Цезарь улыбнётся вам с экрана? Всё увидите сами — не переключайтесь!

Для чего это нужно?

Анимация фотографий — это и новый уровень сторителлинга, и отличный инструмент, чтобы вдохнуть эмоции в старые кадры. Завалялось фото прадеда из семейного архива? Добавьте лёгкое движение — и вместо молчаливого снимка получится живой привет из прошлого. Или, например, у вас бизнес и вы хотите привлечь внимание к бренду? Анимированный баннер зацепит взгляд быстрее, чем статичная картинка. Да и мемы никто не отменял — сделать так, чтобы исторические личности улыбались или кривлялись, это, согласитесь, уже само по себе весело. В общем, анимация — это и про память, и про креатив, и про то, чтобы немного разбавить скучные посты.

Как будем тестировать?

Теперь к интересному! Во-первых, мне всегда было любопытно, что бы получилось, если бы нейросеть оживила исторических личностей, но в контексте современности и социальных сетей. Как бы выглядели такие персонажи, как Цезарь, Наполеон или Чингисхан, если бы они не сидели в своих портретах, а сняли какой-нибудь сторис? 

Мы решили проверить, как нейросети справятся с этим и подготовили 2 задания:

Первое — разогревочное. Берём фотографию и просим нейросеть сделать что-то простое: пусть человек моргнёт, улыбнётся и посмотрит в камеру. Оценим, насколько естественно модель оживляет изображение.

Второе — усложняем задачу. Здесь интересно увидеть, как личности выглядели бы, если бы снимали сторис на фоне событий своей эпохи. Не просто анимация лица, а полноценная сцена — с фоном и движением. Оценим, насколько хорошо нейросети справятся с более сложной композицией.

Для создания изображений для тестов я буду использовать платформу Bothub, а точнее — нейросеть Midjourney, которая там доступна. Помимо неё для генерации изображений на платформе есть Flux и DALL·E. Кстати, при регистрации по ссылке сервис дарит 100 000 капсов —  забираем и начинаем творить!

Итак, открывает наш топ — Runway.

С первой минуты сервис цепляет анимированным интерфейсом. Кого тут только нет — от скунсов до питонов, всё в движении.

Кликаем “Try Runway Now” и переходим к регистрации. Её можно пройти 3 способами: Google-аккаунт, Apple ID или SSO. 

После попадаем на “Home” страницу, где видим возможности сервиса. Здесь вы можете создать видео, анимировать персонажа или сгенерировать картинку. Нас интересует второе окошко — кликаем “Use Act-One”.

Переходим к первому тесту!

Во вкладке “Custom” загружаем фотографию.

Первым подопытным будет Гай Юлий Цезарь — вернее, его лицо, которое пережило заговор, но чудом осталось нетронутым в редакторе сервиса) Сейчас объясню!

Нейросеть ставит рамки — всю фотографию оживить не получится, что-то обязательно да обрежется. Можно выбрать как горизонтальный, так и вертикальный формат. Также в настройках можно отрегулировать амплитуду, зум и ротацию камеры.

Ниже пишем промпт. Я буду писать на 2 языках, потому что мне кажется, что русский нейросеть не понимает. Ну а если поймёт, то оценим её мультиязычность.

Скрытый текст

Сделай легкую дружелюбную улыбку, естественное моргание глазами и плавный поворот головы в сторону камеры, чтобы персонаж посмотрел прямо в объектив. Движения должны быть плавными и реалистичными, сохраняя величественное и уверенное выражение лица.

И да, тут можно выбрать длительность анимации: либо 5, либо 10 секунд. 

Ещё один момент: у сервиса под капотом Gen, и мы можем выбрать модель во время генерации. Всего их 4, но в бесплатной версии доступны только 2: Gen-4 Turbo и Gen-3 Alpha Turbo. Я выбрал первую, ибо сервис утверждает, что она эффективнее. Кликаем ”Generate” и смотрим результат!

Вышло, надо сказать, неплохо. Мне понравилась плавность движений. Генерация заняла около минуты!

Но! В промпте я просил, чтобы он посмотрел в камеру, а Цезарь вместо этого просто плавно повернул голову и, улыбаясь, что-то пробормотал в конце. Такого я не заказывал. Ещё он не моргнул!

По факту из 4 движений он осилил только 2: улыбнулся и красиво повернулся в сторону камеры.

Давайте посмотрим результат на английском!

Физиономия Цезаря выполнила всё, о чём просили. Считаю это успехом! Нигде ничего не сдвинулось, всё стабильно. 

С заданием нейросеть справилась отлично!

Теперь перейдем к более сложному. Предлагаю оживить сразу несколько лиц!

Следующий номер в нашем эксперименте — гроза степей, Чингизхан. Только теперь вместо захвата городов, он будет захватывать кадры!

У нас есть фото, на котором он с заготовкой под селфи. Хочу попросить нейросеть оживить всю картину — пусть лошади бегают, воины сражаются копьями, а сам полководец машет мечом. Промпт будем писать сразу на английском!

Скрытый текст

Animate Genghis Khan’s face, making him smile and blink naturally Have him hold the camera for a selfie, with the camera slightly tilted, as if he is posing The movements should be smoot.

Кстати, напишу заранее: при регистрации нам дали 125 кредитов. Я даже не заметил, как за 3 генерации они испарились. В бесплатной версии сервиса есть лимит — 25 секунд анимации. 

И вот незадача: с Чингизханом возникли проблемы. Сервису сложно обработать фото целиком и он не понимает промпт! Вместо того, что я хотел, нейросеть выдала просто плавно приближающееся лицо Чингизхана с надписями его имени.

Я решил упростить промпт. Очень долго прогресс был на нуле, а в конце просто выдавало ошибку. Потом я приблизил лицо и сократил промпт до двух предложений. 

Скрытый текст

Animate face, making him smile and blink naturally The movements should be smooth and realistic, with a majestic expression on his face.

После 7-минутного ожидания мне всё-таки удалось получить анимированную картинку. Чингизхан начал улыбаться шире, но объекты сзади оставались статичными. Если фотография перегружена мелкими деталями, то алгоритмы справляются не очень, либо вообще не справляются, как в этом случае.

С заданием нейросеть провалилась!

Ну а что по возможностям? Видео можно преобразовать в 4K-формат за 20 кредитов — реально сделать в бесплатной версии.

Также в сервисе есть встроенный редактор: можно обрезать видео, добавить аудио или изменить стиль анимации (рестайл).

Файл загружается сразу в 2 форматах — GIF и MP4, что очень удобно. Загружается файл, увы, с вотермаркой.

Что по цене?

Платная подписка от 15 $ в месяц открывает доступ к моделям Gen-4, Gen-3 Alpha и Act-One, убирает водяные знаки, ускоряет генерацию и позволяет улучшать видео до 4K. Каждый месяц начисляют 625 кредитов, а при необходимости их можно докупить. Но, функция Frames (Text-to-Image) в подписку не входит.

Следующий испытуемый нашей подборки — Pika. 

Уже с окна регистрации слева нейросеть показывает впечатляющие анимации: тут и машины трансформируются, и коты пьют кофе. Даже интересно, сможет ли сервис так же красиво оживить нашу картинку?

Варианты регистрации стандартные — Google, Facebook*, Discord или email.

После регистрации попадаем на главный экран. Внизу видим поле для ввода промпта, а справа — иконку загрузки. Кликаем, выбираем картинку — она загружается без необходимости обрезать, как в предыдущем сервисе.

Снизу расположена панель инструментов. Здесь можно выбрать длительность анимации — 5 или 10 секунд. Также можно переключать версии нейросети: из бесплатных доступна версия 1.5, хотя по умолчанию стоит 2.2 — видимо, чтобы намекнуть на покупку платной подписки. Во вкладке «Settings» можно задать негативный промпт (слова-табу), выбрать качество и разрешение.

Ну а как вы могли заметить по иконке — нашей героиней станет Клеопатра. Женщина, которая запутала два Рима. А вот улыбнётся ли она третьему — сейчас узнаем!

Скрытый текст

Пусть Клеопатра легко и дружелюбно улыбнётся, естественно моргнёт и плавно повернёт голову, чтобы посмотреть прямо в камеру. Движения должны быть мягкими, изящными и уверенными, отражая её королевскую элегантность.

И да, не забудьте переключить версию на 1.5, она действительно нужна для ещё одного намёка на покупку подписки. 

После этого нажимаем на звёздочку — нас перекидывает в «Library», и генерация начинается. Ждать придётся долго. Я даже решил запустить генерацию с промптом на английском, чтобы сэкономить время. Очередь генераций сервис поддерживает!

Скрытый текст

Make Cleopatra give a gentle smile, blink naturally, and slowly turn her head to look directly into the camera. Movements should be smooth, graceful, and confident, reflecting her royal elegance.

Кстати, после регистрации нам выдали 80 кредитов — запас небольшой, но на тест хватит. За одну генерацию сервис списал 15 штук, значит мы можем создать 5 анимаций. А теперь к результату!

Сразу о неприятном — анимация создавалась полдня. Ужасно долго! Сервис постоянно перегружён, я пробовал генерировать в разное время — «золотого часа» просто нет. За это можно поставить жирный минус.

Теперь к интересному! Мы были удивлены, когда увидели, что промпт на русском дал лучший результат генерации, чем на английском.

При работе с английским промптом персонаж слегка покачал головой и один раз моргнул, ну что это?

А вот при генерации с русским промптом нейросеть выполнила все запрошенные действия: персонаж моргнул, повернул голову, посмотрел в камеру и даже улыбнулся — пусть улыбка и вышла не самой дружелюбной.

Да, лицо вышло пугающим, но факт остаётся фактом — промпт на русском сработал лучше! А это значит, что дальше продолжим с ним. 

А чтобы загрузить результат, наведите курсор на видео и кликните на перевёрнутую стрелочку — загрузка начнётся моментально. При этом итоговый ролик, увы, будет с вотермаркой.

Переходим ко второму заданию, надеюсь результат будет достойным!

Следующей героиней испытаний становится Жанна д’Арк. Когда-то она вела армии, а сегодня мы ведём её по новым маршрутам — через мир нейросетевой анимации.

Скрытый текст

Воительница в доспехах без шлема улыбается, держа камеру для селфи на переднем плане, туманное поле боя с рыцарями на лошадях на заднем плане, добавить движение лошадей, колыхание тумана, легкое покачивание камеры.

И снова я прождал полдня ради одной генерации… 

Нейросеть выложилась неплохо. Сделала, что просили: добавила поворот камеры, оживила рыцарей, флаги, туман, а ещё нарисовала новые войска. Видео получилось динамичнее предыдущих!

Но несмотря на соответствие промпту, результат нельзя назвать шедевром. Смотрим!

Рыцари и лошади слегка «растворились в истории», меч сзади то растянулся, то собрался обратно. Флаги… Кажется, у них совсем другая битва. А новые войска нейросеть заботливо обвела голубым цветом — чтобы их точно не перепутали. 

Анимация Жанны — живенько, временами даже чересчур. Голова чуть скачет, но если закрыть на это глаза, то двигается более-менее естественно!

А вот задний фон пока больше похож на битву рыцарей с законами перспективы.

Что по подписке?

Средний Pro обойдётся в $28. В пакете — 2300 кредитов, которых хватает на солидный запас роликов. Открыт доступ ко всем версиям генерации: от Pika 1.0 до самой свежей 2.2, плюс режимы Turbo и Pro. Включены инструменты для добавления эффектов, замены элементов и настройки деталей — Pikadditions, Pikaswaps, Pikawatts и Pikaffects. Самый заметный плюс тарифа — ускоренная генерация видео, ибо на бесплатном плане, пока ждал генерацию видео, успел сделать обзор аж на 2 сервиса топа!

Готовые ролики скачиваются без водяных знаков, и их можно спокойно использовать в коммерческих проектах. Если кредиты закончатся раньше срока — докупить новые не проблема.

И напоследок! Ниже — таблица стоимости генерации в версии 2.2. Тут показано, сколько кредитов спишется в зависимости от типа генерации, продолжительности и качества. 

Переходим к следующему сервису!

Третий сервис нашего топа — Luna AI.

Что бросается в глаза? Простота! Интерфейс минималистичный: только большое окно для загрузки фото, поле для ввода промпта и выбор разрешения. Ничего лишнего. А самое главное — интерфейс на русском!

Регистрация доступна только через Google-аккаунт и внутри самого сервиса. Без неё можно создать только одно видео — для генерации второго аккаунт уже обязателен. После этого сервис выдаёт 3 кредита — по одному на каждую генерацию.

Героем этого эксперимента станет Авраам Линкольн. Проверим, как он смотрелся бы не только на долларовой купюре, но и в нейросетевом видео.

Загружаем фото. Как и в первом сервисе, изображение немного обрежется, но не критично. Далее вводим промпт, для него тут отведено 1800 символов,  и нажимаем «Создать». 

Проходим «Я не робот», и генерация запускается. Остаётся только немного подождать.

Скрытый текст

Пусть Авраам Линкольн мягко улыбнётся, естественно моргнёт и плавно повернёт голову, чтобы посмотреть прямо в камеру.

Ждали мы около минуты — и знаете что? Мне нравится. Лицо анимировано аккуратно, появился 3D-эффект, как в тех самых газетах из Гарри Поттера. На видео есть вотермарк, но его легко убрать, просто обрезав ролик.

Однако, несмотря на качество анимации, промпт нейросеть не выполнила. В камеру Линкольн не повернулся — это сама камера сместилась к нему. Улыбнулся он слабо, а моргнуть, как я просил, так и не удосужился. Может на английском языке нейросеть поймет нас лучше? Давайте введём промпт!

Скрытый текст

Make Abraham Lincoln give a soft smile, blink naturally, and slowly turn his head to look directly into the camera.

Что хочу отметить сразу — после регистрации нейросеть стала работать быстрее и справилась всего за 40 секунд. Давайте посмотрим, что получилось!

С промптом на английском результат получился таким же. Единственное различие — в первом видео Линкольн поворачивает глаза в камеру чуть позже, чем во втором. Не могу сказать, что нейросеть справилась на все сто — результат получился не совсем таким, как задумывалось.

Ну а теперь переходим ко второму заданию — проверим, сможет ли нейросеть оживить историческое событие. 

Для этого теста нам любезно согласился помочь сам Наполеон Бонапарт… , но в порыве триумфа, его, увы, занесло в мороз и метель. 

Промпт я сразу ввёл на английском — уже убедились, что разницы особой нет, результат примерно одинаковый. 

Скрытый текст

Make Napoleon smile slightly, blink naturally, and slowly turn his head towards the camera as if taking a selfie. Animate subtle snow falling in the background, horses gently moving, and distant soldiers waving flags.

И вот что скажу — итог меня действительно порадовал! Видеоролик вышел неплохим: суперразгара события, конечно, не получилось, но лошади движутся, флаги развеваются, а снег падает. Немного потерялось ощущение селфи, но видео определённо одно из адекватных за всё тестирование.

Что можно сделать с результатом?

Опций немного: скачать, добавить в избранное или отправить. Функции «Expand» и «Extend» — платные. 

Вы, наверное, заметили, что я загрузил записи экрана. Для загрузки доступны 2 формата: mp4 и m4p (gif с подпиской). Однако загрузить файл так и не удалось. Проблему решить не получилось: сервис показывает, что загрузка завершена, но на самом деле она даже не начиналась.

Что по подписке?

Pro стоит $39.9 в месяц. В него входит создание 300 видео в месяц (5 секунд), возможность увеличивать длительность видео, приоритетное создание видео (что тут важно), лицензия для коммерческого использования, видео без вотермарки и отсутствие рекламы (ее я там не заметил).

Предпоследний сервис нашего топа — Immersity AI

Он намного проще аналогов из топа. Это понятно уже при регистрации. Всё лаконично: войти можно через Google-аккаунт или зарегистрироваться внутри сервиса.

Ну а после попадаем на главный экран.

Наверху — логотип, в центре — окно для загрузки, а внизу — скромный набор функций. Свой промпт написать не получится, так что верим в лучшее и надеемся на вкусы нейросети.

Как вы уже догадались, жмём «Upload» и загружаем фото. Загружается быстро — 10 секунд, после можно начинать работать с функциями.

Их тут немного. И как я понял, сервис оживляет изображение через параллакс-эффект. Если коротко — объекты двигаются с разной скоростью: фон медленнее, передний план быстрее. В итоге получается иллюзия лёгкого 3D-движения, но на мой взгляд, это особо не оживляет картинку.

А в этом эксперименте наш герой — Леонардо да Винчи. Человек, который придумал вертолёт и подводный костюм. Жаль только, что он не может подсказать нейросети, как нарисовать идеальную улыбку. А стоило бы…

Пока не начали, хочу сказать!

В сервисе доступны 2 версии модели — 4.0 и 3.0. Пока была включена первая, всё заметно тормозило. 

После переключения на версию проще, лаги пропали. Буду использовать 3.0!

Я насчитал 9 вариантов анимации. Можно заставить камеру приближаться или отдаляться, задать круговые движения или поменять перспективу. Выше расположен ползунок Reverse.

Для любителей настройки вручную, есть параметры вроде амплитуды движений, точки фокуса и степени растяжения краёв объекта. 

Помимо всего, можно менять скорость анимации — ускорять или замедлять. Ну а теперь посмотрим, что вышло у нас!

Честно говоря, результат не особо впечатлил. На мой взгляд, всё двигается топорно, и назвать это «оживлением» после того, что показали сервисы выше, сложно. К тому же водяные знаки раскиданы по всей картинке. А присмотревшись к границам объекта, понимаем, что выглядят они неаккуратно. В целом — самое слабое оживление из всех.

Ну а теперь переходим к экспорту. Жмём на большую синюю кнопку и выбираем формат. Доступны 3 варианта: MP4 3D, GIF 3D и PNG Depth Map.

После выбираем Free план. Выбор там, скажем так, не особенно широкий, но для теста сойдёт.

Экспорт идёт с водяным знаком, и использовать его в коммерческих целях не получится. Далее кликаем «Export», потом «Download» — загрузка началась!

Ради интереса проведём и второй тест. На этот раз нам поможет Александр Великий. Человек, разрубивший гордиев узел, попробует разрубить наши сомнения в качестве этого сервиса. 

Делаем всё то же самое и смотрим, что получилось.

Лично мне да Винчи понравился больше — всё-таки с портретами результат выходит "атмосфернее", чем с динамичными сценами.

Разберём средний тариф!

Image стоит $4.99 в месяц и предоставляет 500 кредитов на конвертацию изображений и видео с разрешением до 4K. Их хватает на 16 3D-анимаций, 25 объёмных изображений или 5 минут видео. Также открываются функции 3D Motion, 3D Image, 3D Video, depth map и Apple Music Album Motion (анимации для обложек). 

Ну а завершает наш топ — Cutout. 

Ещё один простой сервис для оживления картинок. Первое, что бросается в глаза — русский язык. У сервиса есть автоперевод! Но местами качество такое, что хочется тихо вздохнуть.

Зарегистрироваться можно через Google или напрямую в сервисе. После регистрации на счёт падают 5 кредитов, но увы они для изображений.

Кликаем «Загрузить изображение» — и перед нами появляется клон нашего фото, только уже анимированный и украшенный водяным знаком.

Чуть ниже расположены дополнительные инструменты: вырез лица, улучшение фотографии и мультяшное селфи. При выборе одного вы переходите на новую вкладку. Всё работает, хотя стоит сказать — мультяшное селфи больше похоже на рисунок, нежели на мультяшку.

Вернёмся к анимации. Поднимаемся чуть выше — и справа от нашего изображения расположены образцы анимации. Их тут 23 штуки: от поворота головы до полноценного танца. Как и в прошлом сервисе, вводить свой промпт нельзя. Более того — режима Custom тут нет. Поэтому предлагаю пойти простым путём: выберем одну простую анимацию и одну посложнее для второго задания.

Ну а героем первого задания станет Ахиллес. Когда-то он не смог увернуться от стрелы в пятку, но теперь увернётся хоть от автоматной очереди. Вы только посмотрите, как он танцует, да ещё и поёт!

Вот так выглядит третья анимация с конца. И да, сразу заметно, что нейросеть неверно определила границы лица. На мой взгляд, такого рода оживление не очень подходит для статичного изображения. 

Давайте перейдём ко второй анимации, где главной героиней станет Мария Антуанетта. Когда-то она раздавала пирожные, а сегодня будет раздавать улыбки.

Надежд, что задний фон оживёт, не было, но вот лицо анимировалось неплохо. Появилась лёгкая улыбка и даже какие-то эмоции. Живыми их, конечно, не назовёшь, но, на мой взгляд, это самые выразительные из всего топа. Понравилось даже больше, чем холодное лицо Цезаря!

Но не обошлось без огрехов. Нейросеть снова неправильно определила границы лица — из-за этого верхняя часть причёски осталась статичной. Выглядит это не очень!

Давайте к подписке!

Средний пакет — на 5 минут за $45, получается по 15 центов за секунду. Есть пакеты и больше — например, 15 минут за $129 или 45 минут за $299, где цена за секунду падает. Максимально можно взять 330 минут за $1299, но это точно того не стоит. Видео можно загружать до 2 ГБ, в разрешении до 4K и с частотой до 30 кадров в секунду. 

Резюмируя:

В конце эксперимента приходит забавная мысль: если бы Цезарь, Наполеон или Чингисхан вдруг оказались в эпоху соцсетей, они бы наверняка освоили фильтры, ракурсы и сторис куда увереннее, чем нейросети справляются с их цифровым оживлением. Эти люди точно знали, как производить впечатление — а вот у моделей это выходит не всегда.

Изначально я хотел сделать небольшое общее видео — своего рода отчёт о проделанной работе. Под величественную музыку исторические личности смотрят в камеру и улыбаются. Но когда смонтировал половину, понял: некоторых нейросеть заметно исказила, а местами анимация получилась неестественной. Тут напрашивается вывод...

Как бы хорошо ни работала нейросеть и сколько бы деталей ни добавляла — смотришь на эти изображения и понимаешь: атмосфера эпохи и настоящие эмоции людей всё равно ускользают. В конце концов, история живёт не в пикселях, а в людях. И, наверное, её сила как раз в том, что полностью оживить её невозможно.

Спасибо за прочтение! Делитесь своим опытом анимации картинок с помощью нейросетей в комментариях. Возможно, у вас уже есть любимый сервис. Будем рады узнать о вашем опыте!

Meta* и ее продукты (Facebook, Instagram) запрещены на территории Российской Федерации