Эксперимент: нейросети рисуют картины из игры Detroit: Become Human

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com
| Статья | Игры

Detroit: Become Human вышла в 2018 году, когда изображения, созданные нейросетями, не были так распространены, как сегодня. В игре есть герой андроид Маркус (Markus) и его можно назвать нейросетью. По наставлению художника Маркус рисует картину и это можно назвать генерацией изображения. Что нарисовать выбирает игрок по двум ключам — это можно назвать словесным описанием. Мне стало интересно, а какие изображения сгенерируют современные нейросети по тем ключам, которые выбирает игрок для Маркуса? Я решила провести такой эксперимент.

Нажмите, чтобы развернуть
Я понимаю, что картины Маркуса в игре рисовали художники, а не генерировала нейросеть, но для эксперимента оставляем это за скобками.

Маркус и Карл

Маркус (Markus) — это андроид-помощник. Он ухаживает за престарелым художником Карлом Манфредом (Carl Manfred), который перемещается в инвалидной коляске. Кроме работы по дому, выполнения поручений и непосредственного ухода, Маркус помогает скрасить одиночество Карла. Со временем Карл начинает относиться к Маркусу как к человеку, а потом как к сыну. Это отношение и его наставнический настрой показаны в главе «Художник» (Painter), где Карл призывает Маркуса к самоопределению, поискам своего места в мире, а потом учит с помощью искусства смотреть на мир вне программы.

По сюжету главы Маркус подает Карлу завтрак в гостиной и пока тот завтракает Маркус должен найти, чем себя занять (на выбор есть несколько активностей).

После игры на пианино Карл обращается к Маркусу:

Карл: Иногда ты бываешь человечнее многих людей. Настанет день, когда меня рядом не будет. Придется защищать себя, самому делать выбор… Реши кто ты, кем хочешь стать… Этот мир не любит тех, кто не как все, Маркус. Не позволяй никому говорить тебе, кто ты.

Цитата на английском
Carl: Sometimes I think you have more humanity than most humans… One day, I won't be here to take care of you anymore. You'll have to protect yourself, and make your choices… Decide who you are, and wanna become. This world doesn't like those who are different, Markus. Don't let anyone tell you who you should be.

Дальше герои отправляются в студию, где Карл предлагает Маркусу попробовать себя в рисовании.

Карл: Довольно обо мне, посмотрим на твои таланты! Попробуй. Напиши что-нибудь.Маркус: Нарисовать? Но я… Что рисовать? Карл: Все что угодно! Попробуй.

Диалог на английском
Carl: But enough about me… Let's see if you have any talent! Give it a try. Try painting something. Markus: Paint? But what I… Paint what? Carl: Anything you want. Give it a try.

В первой попытке, в зависимости от выбора игрока, Маркус пишет точную копию картины Карла, статую или стол с предметами.

Результат Карла, как сторонника неосимволизма, не впечатлил. В его представлении цель художника не воспроизводить реальность, а интерпретировать ее и показать своими глазами.

Карл: Это идеальная копия реальности. Но цель картины — не воспроизвести реальность, а интерпретировать ее, улучшить, показать ее своими глазами. Маркус: Карл, я… Я не смогу. Этого нет в моей программе… Карл: Давай, попытайся. Холст перед тобой.

Диалог на английском
Carl: That is a perfect copy of reality. But painting is not about replicating the world, it's about interpreting it, improving on it, showing something you see. Markus: Carl, I don't think I can do that. It's not in my program… I… Carl: Go on, go, try, grab that canvas.

Карл предлагает Маркусу попробовать посмотреть на мир вне программы, и в этот раз результат его впечатляет.

Карл: Сделай вот что. Закрой глаза. Закрой глаза. Поверь. Вообрази то, чего не существует. Что никогда не видел. Теперь сосредоточься на своих эмоциях и пусть твоя рука сама плывет по холсту. Боже мой…

Цитата на английском
Carl: Do something for me, close your eyes. Close your eyes. Trust me. Try to imagine something that doesn't exist. Something you've never seen. Now, concentrate… on how it makes you feel… and let your hand drift across the canvas. Oh my God…
Видео в студии на русском языке

Все картины Маркуса

Написание картины в игре — действие интерактивное. Игрокам предлагают сначала выбрать первый ключ из списка, а затем второй. После необходимо сделать несколько движений мышкой в нужный момент. В зависимости от выбранных ключей у Маркуса получаются такие картины:

Ключ «Android» (Андроиды)
Ключ «Humanity» (Человечество)
Ключ «Identity» (Личность)

Эксперимент

Для генерации изображений по словесному описанию я выбрала несколько бесплатных сервисов, опираясь на статью РБК Тренды «Нейросеть рисует: 5 способов создать картинку по фото или описанию».

Я выбирала с условиями, чтобы запрос можно было сформулировать на английском языке (игра изначально на английском), сервис был удобным и бесплатным, можно было выбирать стиль (фильтры). В игре Маркус рисует красками на холсте.

Словесный запрос выглядел следующим образом: Humanity — Anger, Identity — Despair и т. д.

Использованные нейросети:

  • ruDALLE-E Kandinskiy 2.2 (модель Kandinskiy 2.2)
  • Fusion Brain (модель Kandinskiy)
  • Dream AI by Wombo

Теперь посмотрим что из этого вышло!

Нейросеть ruDALL-E Kandinsky 2.2

Ключ «Android»

Ключ «Humanity»

Ключ «Identity»

Нейросеть Fusion Brain

Ключ «Android»

Ключ «Humanity»

Ключ «Identity»

Нейросеть Dream by WOMBO

Необходимого стиля (картина маслом) не оказалось, поэтому пришлось выбрать наиболее подходящий — Expressionism v2. Сервис предлагает создавать вертикальные обложки, поэтому изображения отличаются от квадрата.

Ключ «Android»

Ключ «Humanity»

Ключ «Identity»

Заключение

Растущая популярность нейросетей в генерации изображений вызывает недовольства и опасения в сообществе художников. Но некоторые видят в них перспективы и источник креатива. Например, нейросети могут стать дополнительным инструментом художника при необходимости быстро создать набросок для дальнейшей проработки. К генераторам изображений можно обратиться для поиска вдохновения.

В моем эксперименте изображения от нейросетей во многом не похожи на то, что изобразила условная нейросеть Маркус в игре (по понятным причинам). Лично мне некоторые изображения неприятны и выглядят отталкивающе. Почему изображено то, что на картине, мне тоже местами непонятно. Но таков результат нейросетей.

А какие эмоции вызывают изображения у вас? Пишите в комментариях!

Ролевая играПриключенческая играPCPS4
Автор не входит в состав редакции iXBT.com (подробнее »)
Об авторе
Рассказываю про видеоигры, японский язык, литературу, культуру, кино, про изобразительное искусство и не только…

5 комментариев

107350562804134031821@google
Ну… какой смысл сравнить с игрой, если сам автор уточил, что в игре картины рисовали художники? Какой смысл было цитировать игру, если выше уже сказано, что это все сделано человеком? Ну, просто можно было обойтись упоминанием игры в таком случае, а в итоге, 90% статьи уделено внимание подробностям, которые смысла не имеют. Ну, может я не внимательно прочитал и не уловил всю философию… А чего нет МидДжорни? Тут только бесплатные нейросети? В общем, нейросетям далеко до личности Маркуса, и вообще, до какого либо таланта. Первые две, вообще выдали практически тоже самое.
112007670193840025969@google
Потому, что это эксперемент.
Человека одолевает вопрос: а что если? А остальных нет.
107350562804134031821@google
Ну в таком случае нужно было использовать нормальные нейросети, типа Миджорни, а не эти бесплатные сервисы и не лить воду на 2 тясячи символов ради ничего. Вы видимо даже не поняли мой комментарий…
Chenz
Сеть — это инструмент и панику разводить смысла нет. Она может лишь компилировать то, что в неё изначально загружено, но что-то вот прям уникально новое она создать не может.

Добавить комментарий

Сейчас на главной

Новости

Публикации

Насколько люди модифицировали поверхность Земли (пока вы пили кофе): ученые определили скорость поглощения дикой природы

Двенадцать гектаров в минуту. Пока вы завариваете кофе, планета теряет кусок дикой природы размером с два десятка футбольных полей. За сутки площадь составит уже около 178 квадратных километров...

Обзор наушников KiwiEars Orchestra II: арматурная скорость и потрясающий бас

Флагманами у KiwiEars по прежнему остаются гибридные наушники под названием Punch, но они рассчитаны на любителей сильно выраженного динамического баса. Сегодня же нам предстоит познакомиться...

Стоит ли беспокоиться о падении астероида на Землю? Это неизбежно, но участь динозавров нам точно не грозит

Динозавры исчезли с лица Земли из-за падения астероида. Это регулярно заставляет людей задаваться вопросом: может ли грозить современному человечеству аналогичная глобальная...

Обзор 3D принтера QIDI Max4 – что дает большой формат кроме цифр в характеристиках

В этом обзоре речь пойдет о 3D-принтере QIDI Max4 — модели с большой рабочей областью и термостатированной камерой, рассчитанной на печать крупных и инженерных деталей. Может ли...

Обзор мультиварки с индукционной плитой Rawmid Future RFC-01

Производитель бытовой техники Rawmid развил идею мультиварок и выделил нагревательную часть в отделяемую индукционную плиту. В итоге два полноценных устройства в одно — индукционная...

Обзор смарт-часов Amazfit T-Rex Ultra 2 – 30 дней автономной работы, офлайн-карты, звонки и персональное вибро

Часы с усиленным корпусом, двухдиапазонным GPS и автономностью до 30 дней звучат как устройство для тех, кто постоянно в движении. Amazfit T-Rex Ultra 2 как раз так и позиционируются —...