Тестируем MagicQuill: удаляем лишнее на фото и заменяем объекты

29.11.2024

В нашей рубрике «Нейросеть по пятницам» решили протестировать сервис для удаления или замены объектов на фотографиях. Она работает через браузер — быстро и бесплатно. Посмотрите, что у нас получилось.

С помощью нейросетей можно не только генерировать картинки или создавать презентации для школы — сейчас искусственный интеллект способен заменить лицо любого человека в видеоролике, причем для этого не нужно обладать мощным компьютером и навыками голливудского мастера по 3D-эффектам. Некоторые фильмы уже активно снимаются с применением подобных технологий. Посмотрите новую драму «Тогда. Сейчас. Потом» с молодым Томом Хэнксом в главной роли, там как раз демонстрируется сила ИИ.

В последнее время базовые возможности искусственного интеллекта добрались даже до мобильных устройств. Например, сейчас смартфоны умеют не только делать качественные фотографии, но еще и редактируют их с помощью ИИ. Недавно такой функционал мы тестировали на realme GT7 Pro — он здорово распознает карикатурные рисунки и превращает их в правдоподобные объекты на фото.

Но что делать, если покупать новый смартфон вы пока не планируете, но уже полны решимости узнать, на что способны современные технологии? Выход есть — MagicQuill на базе Stable Diffusion.

Что такое MagicQuill

Это нейросеть, которую создали энтузиасты платформы Spaces. Здесь несколько сотен различных инструментов и мини-приложений, основанных на базе искусственного интеллекта. Все они работают бесплатно, в том числе и сама нейросеть MagicQuill.

С помощью MagicQuill можно быстро редактировать фотографии. Нет, не исправлять тени или выполнять цветокоррекцию, а делать кое-что более трудоемкое — убирать ненужные объекты со снимка или полностью заменять их. Давайте протестируем сервис.

Тестируем MagicQuill

Прелесть этого инструмента в том, что он не требует регистрации — заходи и сразу пользуйся. Да и в управлении система крайне проста, поскольку состоит из главного окна для загрузки фотографии и нескольких функциональных кнопок: кистей для рисования, ластика, а также ползунка для регулировки размера кисти.

Всего здесь четыре основных инструмента:

  • Add Edge Brush — кисть, с помощью которой можно добавлять объекты.
  • Remove Edge Brush — кисть, с помощью которой можно удалять предметы.
  • Brush RGB — кисть для замены цвета.
  • Erase — ластик для стирания того, что вы нарисовали кистью.

Изучать тут больше нечего — можно сразу приступать к тестированию. В качестве референсного материала возьмем студийную фотографию двух людей. И, конечно же, попробуем заменить человека на снимке.

Freepik/wayhomestudio
В оригинале фото выглядит так — неплохой кадр для тестирования ИИ «на людях»

Выделяем объект, нажимаем кнопку Run и ждем свою очередь. Ожидание — единственный минус MagicQuill.

Результат неплохой. Попробуем еще раз, но теперь на другом примере.

Freepik

Давайте добавим этой сладкой парочке новых ощущений — например, заменим парня на кого-нибудь другого.

Выбираем инструмент «Добавить» и рисуем вместо молодого человека очертания нового объекта, который заменит его на фотографии. В нашем случае получился пингвин.

Вообще, нейросеть как будто читает мысли. Не всегда удачно, но в большинстве случаев угадывает неплохо. Особенно, если постараться изобразить свои пожелания в виде скетча и как можно понятнее.

С Эйфелевой башней и птичками система справилась хорошо. А кораблик дорисовывать не стала — вместо него получилась какая-то мазня. Впрочем, как мы уже сказали — каков исходный материал, таков и результат. Уверены, если бы автор рисовал лучше, то и нейросеть тоже справилась бы лучше.

Единственное, что у нас так и не получилось сделать нормально — полностью удалить крупный или основной объект на снимке. Например, ту же парочку на пляже нейросеть постоянно пытается перерисовать или превратить в других людей, но упорно отказывается удалять их с фотографии.

Как итог — нейросеть хороша, если вам нужно удалить случайного человека в кадре или другой ненужный объект. Но для творчества она не годится, так как зачастую выдает непредсказуемые результаты. Что, впрочем, нормально, потому что даже самые новые версии алгоритмов на базе ИИ все еще далеки от совершенства и могут работать странно, со сбоями или не работать совсем. В таких условиях MagicQuill, как бесплатный и не требующий регистрации инструмент, справился на твердую четверку.

Еще обзоры нейросетей: