Нейросеть Meitu Ai Art для создания реалистичных фото в аниме стиле

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com
| Прочее | Программы, сервисы и сайты

Модуль используется в мобильном приложении Meitu и он на удивление качественно корректирует оригинальное фото, практически не теряя деталей в отличии от сервисов, которые зачастую просто подбирают похожие декорации и персонажа. Жена пользуется им давно, никаких ограничений на количество запросов не появлялось. Не подгружаются только фото в купальнике или коротком топике, а так же известные политические деятели, так что похоже какая-то цензура всё же имеется.

Всё что требуется, это скачать приложение Meitu из плеймаркета, в главном меню нажать кнопку AI Art и выбрать любую картинку из вашей галереи. Это не обязательно должен быть человек, возьмем, к примеру, грустного кота

Обработка сейчас занимает не более 10 секунд, после чего на выбор даётся 3 разных варианта, которые можно сохранить в галерею. Один всегда нейтральный, второй летний/весенний и последний зимний

Это лучше видно при обработке фотографий с людьми, на нижних обязательно присутствует снег и яркие краски, иногда одежда персонажа становится теплее, появляются головные уборы, у Джека воробья повязка стала вязаной

Но иногда алгоритм и промахивается, эмоции Гарольда повторить не особо получилось, Генри Кавилл в образе супермена один раз получился неплохо, но в другом ракурсе несмотря на грубые черты лица нейросеть решила, что это женщина, ведьмак тоже стал женственнее, но всё же больше похож на мужского персонажа

Выбрал несколько картинок, которые в большом количестве наделала моя жена.

Тут снова видны отличия между "весенними" и "зимними" вариантами

Как и писал выше, со смешанными эмоциями беда, хотя иногда очень хорошо попадает, так же иногда проскакивают проблемы с глазами, но не так часто, как в остальных популярных сервисах

Членовредительством редко занимается, но в сложных композициях может терять пальцы. А еще наша кошка выглядит довольно странно почти на всех фото ))

UPD. Несколько пользователей написали, что у них не появляется кнопка AI Art. Я проверил на стереньком планшете и действительно не обнаружил его. Помог перезапуск приложения, просто нажимаете отобразить фоновые, смахиваете, чтобы оно выгрузилось из памяти и открываете, всё появится.

Надеюсь эта информация будет полезной, даже если хотя бы вызовет улыбку. Всем добра =)

Другие мои статьи на подобную тематику:

Нейросеть, создающая реалистичные пейзажи по наброскам: Nvidia Canvas

63 комментария

nemoi13
Интересное приложение, спасибо за наводку.
ResSet
Пожалуйста, единственное, мне кажется её изначально для девушек разрабатывали, женские персонажи получаются отлично, к мужским иногда есть вопросы )
B
Не сильно похоже. Цветовая гамма сохраняется, а черты лица, зачастую, совершенно теряются — получается косплей наоборот
ResSet
Ну в этом и смысл, аниме персонажи ведь обычно выполнены в другой стилистике и славянские черты смотрелись бы как минимум странно )
Всё остальное передаёт неплохо, удивило, что даже одежду не сильно искажает, да и фон не полностью изменяет, а дополняет. На одном фото был край шкафа, он на полки книги расставил.
Vadim_Zoolog
Спасибо за статью. Момент про кошку реально развеселил.
ResSet
Это да, видимо не особо видно было лапы и хвост, так что не понятно, сова это или кошка )
Mercoff
Вот не врубаюсь, что это за чУдное желание выгружать на неизвестные серверы свои личные фотки? Неужели не понимаете, что все эти приложения ничего не делают самостоятельно? Они всего лишь передают фотку себе домой и получают обратно результат обработки. А что потом с выгруженными фотками? Куда они пойдут, кто и как будет их использовать? Остается догадываться.
Инфантилизм.
ResSet
Я Вас не хочу пугать, но очень велика вероятность того, что многие Ваши личные данные и фото уже попали на хранение третьим лицам без Вашего ведома. А это развлекательные ресурсы, туда никто ничего важного обычно не загружает, так же как и в соцсети, откуда их кто угодно может сохранить себе )
s
Ага, особенно после ваших слов, что не подгружаются фото в купальнике и коротком бикине, что показывает отношение пользователя к распространению фотографий соответствующего характера на неизвестных ресурсах.
Тут была новость, что смартфоны Huawei сами удаляют видео с забастовок в Китае, без ведома их владельцев.
ResSet
Про «короткие бикине» я ни слова не писал, но если майка слишком короткая, возможно распознает как нижнее бельё и не обрабатывает, чтобы не подкармливать извращенцев, да и после обработки оно может стать еще откровеннее и оскорбить пользователя.
Насчет фото в купальнике, зайдите в любую социальную сеть — у каждой третьей девушки/женщины найдете фото на пляже или у бассейна, чего в этом плохого? Вот выставление в общий доступ ню фотосессии я осуждаю, против купальников ничего не имею, особенно если они нормально смотрятся )
Y
Мой планшет Huawei этим занимается. А я разборки учинил :( Весь пляжный сет унесло…
Y
Мой планшет Huawei этим занимается. А я разборки учинил :( Весь пляжный сет унесло...
Это дикость!
s
Тоже самое. У меня на телефоне Huawei фото удалились некоторые.
Severance
Один вопрос: и што?
s
Ответ один, если делать нечего, то фигней заниматься не стоит. На кой такие фото нужны? Чтобы в соцсетях покрасоваться и лайки поставили? Так недалеко и до реального влияния лайков и прочей соцсетевской мути на положение дел в обществе.
В приложении, решающей математические примеры по фотографиям, Ито больше пользы, чем у этого анимешного косплея.
ResSet
Интересов у людей много, как и приложений для их удовлетворения. Кто-то шахматы любит, а кто-то комиксы и переодеваться в любимых персонажей. Я вот не стал бы на такое время тратить, но если человеку нравится — почему бы и нет, выбор хобби это личное.
NoName.Man
Это ты в век фейсбуков, воцапов и прочих инстаграмов таким вопросом задался, серьёзно? Где фотки выкладываются сразу на обозрение миллионам? Которые могут скачать их себе одной кнопкой? Недоверие только одно приложение вызывает?
NoName.Man
Наверняка ж это просто фронт к веб-сервису. В виде сайта его кто-то уже нашёл?
ResSet
Я пытался, не получилось. Но думаю это собрат qq, оформление очень похоже, возможно просто разные шаблоны запроса генерируются
Mercoff
Разъясняю. Тех, кто свои рожи постит в сети, я не трогаю. Ну рехнутые и рехнутые, пёс с ними. Но ведь масса есть людей, которые не желают светить свои щёки, и при этом пользуются вот такой фигненй. Не имея представления, что тем самым они сливают неведомо куда свои морщины.
ResSet
Мне кажется с такими объемами все эти фото тупо негде хранить. При подготовке обзора я слил около 100 мегабайт и это без фанатизма. За хранилище придется платить больше, чем стоят ваши фотографии. Большинство подобных сервисов чистят кэш где-то раз в час. Забыл скачать результат за это время, придется заново кидать
Mercoff
Вы недооцениваете врага :) Он не настлолько дурной, чтобы хранить гигапиксели. Машинное зрение давно научилось делать слепки лиц. Это несколько строчек нулей и единиц. Но данный слепок даст возможность распознать конкретную личность в толпе, в видео, в картинках из этого вашего энторнета.
Достаточно, чтобы рожа поместилась в кластер 20х20 пикселей. Про биометрическую идентификацию слыхали?
ResSet
Для этого достаточно пройтись по улице в крупном городе, за 10 минут соберутся все возможные ракурсы )
NoName.Man
Ну рехнутые и рехнутые, пёс с ними
Ну да, миллиарды человек дебилы. Один Мерькофф умный :)
Но ведь масса есть людей, которые не желают светить свои щёки, и при этом пользуются вот такой фигненй
С чего ты взял, что есть такая «масса»? Что, по-твоему, они с обработанным фотками будут делать? Любоваться на них в одиночку? Распечатают и на стену повесят? Понятно же, что сценарий использования — выложить результат на всеобщее обозрение и прорекламировать приложение
И «масса» это сколько?
Mercoff
Полегче, юноша. Вы нифига не поняли. Не имею никаких претензий к сущестсованию подобного софта. каждый зарабатывает как умеет. Кто-то работает, кто-то ворует.
Я веду всего лишь к тому, что если бы эти пасквили в виде обзоров сопровождались банальным предупреждением о том, что загруженные в приложение фотографии уходят в сторонние сервисы, то половина домохозяек стократ задумалась бы, прежде чем фоткаться неизвестно для кого.
ResSet
Я веду всего лишь к тому, что если бы эти пасквили в виде обзоров сопровождались банальным предупреждением о том, что загруженные в приложение фотографии уходят в сторонние сервисы, то половина домохозяек стократ задумалась бы, прежде чем фоткаться неизвестно для кого.

Так это же логично, или Вы думаете, что «домохозяйки» настолько тупы, что не знают ничего про нейросети, о которых из каждого утюга периодически рассказывают?
Все манипуляции сложнее цветокоррекции обычно требует внешней обработки, наши лица давно слиты через соцсети и мессенджеры, а сами мы нафиг никому не сдались, по крайней мере 99% пользователей точно )
Mercoff
Вы слишком высокого мнения о большей части пользователей. Представьте, подавляющее большинство понятия не имеет, что почту можно получать и отправлять со смартфона. А уж копирование/вставка на смартфоне… Это из области фантастики. А вы тут про нейросети еще задвинули.
ResSet
Эмм, ну я сужу по своему окружению. Понимаю, что есть люди, которые понятия не имеют что они делают, но и ценность их личных данных так же стремится к нулю. Ну получит кто-то фото тёти Вали, которая от скуки на работе решила посмотреть что получится. И еще повезет, если психологическую травму не получит после просмотра )
NoName.Man
Ага, и поэтому у нас каждая домохозяйка уже научилась VPN включать. Не такие уж они и тупые, общий уровень подтягивается за прогрессом. Хотя, может у вас другое окружение, конечно. В любом случае, люди быстрто понимают, что если приложение без интернета не работает, то…
NoName.Man
каждый зарабатывает как умеет. Кто-то работает, кто-то ворует
Ничо не понял. Авторы этого софта — воруют, так?
половина домохозяек стократ задумалась бы, прежде чем фоткаться неизвестно для кого
Нет, не задумалась бы
p
Тоже не пользуюсь всякими вконтакте и сайтами знакомств, там же фотки показывать надо, вдруг увидит кто.
20594536@vkontakte
Ох, как здорово! Спасибо за статью и множество примеров :3
ResSet
Пожалуйста, надеюсь Вас результат так же порадует )
NoName.Man
Какой смысл демонстрировать работу приложения на чужих, вылизанных, постановочных фото?
ResSet
А почему нет? Да и не сказал бы, что все вылизаны, на некоторых обработки минимум: в шляпе, с кошкой, в лесу(тут просто фотик нормальный, а не с телефона сделано). Скиньте своё повседневное если хотите, я добавлю в результаты )
NoName.Man
Не люблю кетайский софт, брезгую ставить. Не по причинам, что украдут фоточки, а вообще, в принципе не люблю.
ResSet
Так я же и пишу, скиньте мне, сделаю за Вас если интересно что получится на «не вылизанных» фото )
NoName.Man
Мои нельзя, я слишком известная личность
112245544094995659091@google
Пробовала на своих «невылизанных», не постановочных и совершенно обычных фотографиях с передней камеры. Всё отлично.
NoName.Man
Ну вот это и интересно увидеть
ResSet
Зависть это плохое чувство, автору 35 скоро, живем вместе 10 лет, женаты 6 )
Мне проще было взять имеющиеся разнообразные результаты до и после, чем искать их у других девушек в сети
K
Ai art нет в приложении, разводила автор!
ResSet
А пробовали перезапускать приложение как я рекомендовал в конце статьи?
7240602@vkontakte
Реалистичность странная — изначального человека на результатах обработки не признать
ResSet
Так в этом ведь и смысл, есть фильтры, которые «мультяшек» делают с минимальным изменением пропорций, а в аниме персонажи обычно не особо реалистичные получаются, только по отдаленным чертам может быть понятно с кого срисовывали персонажа )
C
Для ПК с обработкой непосредственно на компьютере пользователя что-то аналогичное имеется?
ResSet
Я находил похожие сервисы, но именно с этим фильтром нет
NoName.Man
Ага, так и даст вам кто-то всю натренированную нейронку
ResSet
Да всю не нужно, могли бы просто позволить и с ПК фото загружать, многим так удобнее, чем с телефона
А
Новый китайский сервис с нейросетью превращает любое фото в аниме
https://lifehacker.ru/kitajskij-servis-foto-v-anime/
Не оно?
ResSet
Не, это QQ, она очень сильно перерабатывает персонажей, меняя цвет кожи, прически и одежду. Результат прикольный, но временами очень далеко от оригинала
М
Сколько пальцев у жены (фото в шляпе)?
ResSet
Я тоже с этого поржал, на зимнем результате их не хватает, на втором исправили этот недочёт и прилепили лишний )
S
Спасибо. Отлично работает. Ждём, когда кто-то натренирует и оживит Симпсонайзер
112531984231529497991@google
Не работает уже
ResSet
Может временные проблемы
112531984231529497991@google
4 дня уже, на сайте пишут Сервис не доступен, идёт обновление
873124866623@odnoklassniki
я который раз указываю фотку, а приложение его не переделывает
ResSet
Разные подсовывали? У меня некоторые тоже не принимало приложение, плюс еще серверы бывают перегружены
112741645330338738033@google
На данный момент приложение стало платным до жути, раньше можно было штамповать сколько хочешь фоток, а щас плати за увеличение лимита
220456754@vkontakte
А обратного нет? Мне срочно нужен обратный, я из одной фотки сделала обложку для фика и лицо идеально подходит под персонажа, но фанфик наш ни разу не аниме.
Блин, ищу обратные ИИ, а та ИИ, что сделала на других фильтрах: дичайшую дичь выдавала, делала 65-летних ботоксных тёток, вместо запрошенной тридцатилетней «чуть за двадцать».
Неужели никто такое ещё не придумал?
А-а-а-а-а, КФ позволяет обложки ставить (если прописать имя нейронки честно). Даже рекламу (с соавтором) смотреть готовы. xD
A
Добавьте, пожалуйста в статью бот https://t.me/anime_2dbot очень прикольный, друзья часто спрашивают про него

Добавить комментарий

Сейчас на главной

Новости

Публикации

Обзор немецкого детектора проводки Ermenrich PING SM90: универсал с функцией лазерного дальномера и цифрового уровня

Приветствую, любители точности! Сегодня будет довольно необычный обзор: де-юре один измерительный инструмент, а де-факто — сразу три. Речь пойдет о немецком детекторе скрытой проводки...

Обзор умной розетки Tapo P115

С приходом холодов становится некомфортно ездить на дачу. Там теперь холодно, и, пока протопится печь, все семейство уже замерзает и дети рискуют заболеть. Можно было бы не ездить на дачу в...

Почему Китай массово переходит на электрокары

В последние несколько лет в КНДР наблюдается настоящий бум на электромобили. Тысячи граждан Поднебесной охотно покупают новейшие машины, отдавая предпочтение электромоторам вместо ДВС. По итогам...

Kinera Celest CD-20 — обзор мощного портативного ЦАПа на чипе ES9039Q2M

Kinera, известный производитель портативного аудио, представил новый ЦАП от своего суббренда Celest. Новинка получила новый производительный чип ES9039Q2M, а также хорошее усиление. Максимальная...

Модернизация аудио в классике: слушаем свою музыку в ВАЗ-2101 и ГАЗ-24 без замены радио

В этой статье я расскажу, как не меняя родной радиоприемник на классических ретро-автомобилях, слушать свою музыку, а не только радиостанции. Поделюсь своим опытом, как я решил эту задачу на своем...