Apple открывает новую эру редактирования фото. ИИ MGIE обещает революцию в iPhone 16

В последнее время в кругах технологических инноваций много говорится о новом достижении от компании Apple, которое, без сомнения, привлечет внимание многих. Речь идет о разработке новой модели искусственного интеллекта, предназначенной для редактирования изображений посредством естественного языка. Эта технология, как ожидается, будет представлена на Всемирной конференции разработчиков Apple (WWDC 2024) в июне 2024 года и найдет свое применение в серии iPhone 16 и операционной системе iOS 18.

Новая модель AI, получившая название MGIE (сокращение от MLLM-гидируемое редактирование изображений), является примером мультимодальной большой языковой модели, способной интерпретировать пользовательские команды на уровне пикселей и выполнять их с высокой точностью. Этот инструмент предоставляет пользователям возможность не просто редактировать основные атрибуты изображений, такие как яркость, четкость, контрастность, но и добавлять к ним художественные эффекты, аналогично функционалу Photoshop.

Более того, MGIE позволяет выполнять такие операции, как изменение размера, обрезка, вращение изображений и добавление фильтров. Одной из наиболее уникальных особенностей является возможность изменения фона изображения. Благодаря пониманию контекста и логики, модель может, например, добавить в изображение пиццы овощи, если пользователь выразит желание сделать ее «более здоровой», осознавая связь между здоровьем и наличием овощей в пище.

Разработка MGIE стала результатом сотрудничества между исследователями Apple и Университета Калифорнии. По мере совершенствования технологии компания планирует предложить для своих устройств ряд приложений. Статья, посвященная этой технологии, была опубликована на конференции ICLR 2024, а код и данные предварительно обученной модели уже доступны на GitHub для общественности.

Несмотря на то, что Apple пришла в сферу ИИ несколько позднее других игроков, компания активно развивает данное направление, предлагая уникальные функции, которые могут отличаться от продуктов других компаний. В прошлом году, например, была представлена технология эффективного использования flash-памяти, позволяющая большим языковым моделям работать на iPhone и других продуктах Apple с высокой эффективностью.

Ожидается, что ближе к концу года Apple представит на WWDC 2024 дополнительные функции ИИ, которые будут включены в обновление iOS 18 и другие программные продукты. Ранее сообщалось о планах компании интегрировать в новые модели iPhone функции генеративного ИИ, а также значительно улучшить возможности Siri за счет использования ИИ, чтобы составить конкуренцию Google Assistant и Amazon Alexa.

Эти инновации подчеркивают стремление Apple не только к улучшению пользовательского опыта с помощью современных технологий, но и к укреплению своих позиций в динамично развивающейся сфере искусственного интеллекта.

Источник: pconline