Нейросеть по пятницам: оживляем фото с помощью Pika

Например, такое выдала Pika по запросу cinematic, a raccoon wearing sunglasses, 3d animation. С первого взгляда и не понять, что это было нарисовано силами ИИ. Так что платформа однозначно неплохо справляется с генерацией видео из текста.

Однако создавать что-то с нуля всегда проще, чем переделывать уже готовый продукт. Поэтому усложним задачу и попросим нейросеть оживить фотографию. Но начнем с простого — пусть она оживит легендарного кота из мультфильма «Шрек».

Отправляем Pika нужную картинку, добавляем пожелания и нажимаем «Старт». Примерно через 15–20 секунд в библиотеке генераций появится готовый материал.

И правда, картинка ожила, причем можно сказать, что эффект оказался очень близок к оригиналу. Что же, с компьютерной графикой сеть, вроде, справилась. Давайте теперь проверим, на что она способна при работе с обычными фотографиями.

Конечно, назвать результат этой работы идеальным нельзя — не более чем «на троечку». Отрисовка лиц пугает, как и слишком быстрые движения будто из фильмов ужасов. Но похвалить систему тоже есть за что. Во-первых, она не добавила людям новых рук и ног, хотя немного запуталась в проработке деталей. Во-вторых, нейросеть правильно поняла, что модели отвернуты от камеры, поэтому решила развернуть их лицами к объективу.

Если вам что-то не нравится в работе автоматических алгоритмов, можно всегда подправить настройки руками.

Здесь регулируется движение камеры, приближение, формат картинки, а также частота кадров и даже точность совпадения с текстовым запросом.

В целом, если смотреть на результаты Pika без увеличения на весь экран, то можно и не заметить существенных огрехов. Вероятно, конечный результат можно улучшить, если описать задачу более точно. Или использовать запросы попроще — например, попросить ИИ оживить фотографию фейерверка. При желании можно добавить озвучку — она тоже сгенерируется с помощью ИИ.

Вот теперь куда лучше, чем с людьми. Хотя с портретами нейросеть работает тоже неплохо. Например, она справилась с оживлением этого снимка.

Все еще далеко от идеала или полной естественности, но уже неплохо, учитывая, что весь процесс занимает не больше минуты свободного времени, к тому же еще и не нагружает компьютер.

Справедливо заметить, что отдавать Pika на «растерзание» фотографии людей пока еще рано, но с компьютерной графикой и снимками неодушевленных предметов нейросеть уже работает на достаточном уровне. Единственный недостаток — платная подписка. При регистрации система выдает 250 токенов, которые очень быстро заканчиваются. Затем каждый день запас монет восполняется только до 30 единиц. Если нужно больше свободы для творчества, придется купить тариф — от 10 долларов за самый простой и до 70 долларов за «про».

Кстати, нейросети могут не только созидать, но и уничтожать — например, удаляют объекты со снимков. Мы показали, как это работает, на примере сервиса ObjectRemover.