Новая нейросеть от Adome и MTI ускоряет создание изображений

Массачусетский технологический институт и Adobe недавно разработали метод DMD, который позволяет ускорить создание изображений с помощью нейросетей настолько быстро, насколько это возможно, без ущерба для качества изображения.

Полное название технологии DMD — Distribution Matching Distillation и ее суть сводится к тому, что она упрощает многоступенчатую модель распространения до одноэтапного решения для генерации изображений.

Команда разработчиков заявила что их основная концепция заключается в обучении двух моделей распространения, которые могут не только оценивать функцию оценки реального распределения цели, но и оценивать функцию оценки поддельного распределения.

Исследователи заявили, что их модель может генерировать 20 изображений в секунду на современном оборудовании с графическим процессором. Короткое видео ниже выше посвящено возможностям DMD по генерации изображений по сравнению со Stable Diffusion 1.5. Создание каждое изображение в нейросети SD Stable Diffusion 1.5 занимает 1,4 секунды, в то время как DMD может сгенерировать аналогичное изображение всего за долю секунды.

Кроме видео, наглядные примеры сравнения обеих технологий создания изображений с помощью этих нейросетей можно увидеть по ссылке «источник» ниже

Источник: github