Suno добавила создание ИИ-видео к музыкальным трекам

Пост опубликован в блогах iXBT.com, его автор не имеет отношения к редакции iXBT.com

Suno представила функцию Visuals, позволяющую создавать изображения и 15-секундные видеоролики, синхронизированные с музыкальными композициями, созданными на платформе. Visuals позволяет пользователям превращать песни в AI-сгенерированные видеоклипы с автоматической синхронизацией губ по тексту или создавать изображения для превью и обложек альбомов на основе текстовых запросов. Функция доступна на веб-платформе, а также для iOS и Android. Интерфейс немного отличается в зависимости от платформы, но новая вкладка Visuals находится в режиме Create во всех версиях. Веб-пользователи могут получить к ней доступ через меню с тремя точками на странице песни в своей библиотеке.

Автор: KandooAI / RunDiffusion · Juggernaut XL v2 Источник: huggingface.co

При создании изображений доступны три варианта: выбор предустановленного персонажа Suno, загрузка собственного фото или иллюстрации, либо генерация изображения по текстовому описанию. Возможности генерации позволяют выбирать соотношение сторон для оптимизации результатов под альбомный или портретный режим и онлайн-платформы.

Для создания видео пользователи могут указать, будет ли референсное изображение использоваться в качестве начального или конечного кадра, что упрощает редактирование 15-секундных клипов. Доступна автоматическая синхронизация вокала с видео, а также инструменты для настройки соотношения сторон и длительности клипа. Visuals включает временную шкалу для монтажа клипов в более длинные ролики и добавления настраиваемого текста песен.

Модель H3 Move AI от MiniMax лежит в основе Visuals. Suno заявляет об оптимизации ИИ для сообщества, включая дополнительные меры защиты и безопасности, такие как новые текстовые и визуальные фильтры, предназначенные для предотвращения использования или генерации изображений конкретных артистов, публичных лиц, защищенных авторским правом произведений и интеллектуальной собственности. Visuals использует собственную систему «Visuals credits» для создания видео и изображений, отличную от системы кредитов для AI-музыки, что означает дополнительную плату за использование новой функции.

Запуск Visuals последовал за внедрением функции Speech в октябре, позволяющей генерировать речь и закадровый голос. Добавление видеовозможностей — еще одна попытка диверсифицировать платформу после того, как генератор музыки Suno столкнулся с рядом судебных исков. Некоторые пользователи предпочли бы, чтобы компания сосредоточилась на улучшении возможностей генерации музыки: в видеоролике о запуске Visuals один из них написал: «Исправьте звук, прежде чем добавлять то, что никто не просил». Это мнение разделяют и другие комментаторы.

Источник: The Verge

нет
Автор не входит в состав редакции iXBT.com (подробнее »)
Об авторе
5781

По любым вопросам можно обращаться:

e-mail: alexseevdenis@yandex.ru

Telegram: alexseevdenisblog

Портфолио: Таблица

Мощные мини-ПК, которые я тестировал: Посмотреть

Протестированные магнитные клавиатуры: Посмотреть

Сейчас на главной

Новости

Публикации

Сколько рук у осьминога: почему учёные считают их не щупальцами, а чем-то гораздо более необычным?

Осьминог — одно из самых удивительных беспозвоночных на планете. Его восемь длинных гибких конечностей способны одновременно удерживать добычу, исследовать морское дно, открывать...

Как кассета без ленты передавала музыку с телефона в старую автомагнитолу

Вставляешь в старую автомагнитолу кассету, протягиваешь провод к телефону и нажимаешь «Play». В динамиках играет музыка, хотя внутри кассеты нет магнитной ленты. Магнитола при этом работает в...

Зачем в Чикаго зажигают огонь между рельсами перед проходом поезда

На зимних кадрах из Чикаго пригородный поезд Metra проходит над полосой огня. Низкие языки пламени тянутся вдоль рельса, подсвечивают снег и остаются на месте, когда вагоны уходят дальше. Огонь...

Почему коты так бурно реагируют на валерьянку и можно ли им её давать

Стоит некоторым котам почувствовать запах валерьянки, как их поведение резко меняется. Ещё минуту назад животное спокойно лежало на диване, а теперь катается по полу, трётся мордой о мебель,...

Не все S-90 — Radiotehnika: почему у брянских версий рассыпались динамики, но бас считался лучше

Даже если перед вами стоят две пары колонок с одинаковым названием S-90, идентичным индексом 35АС-012, одинаковыми весом, габаритами и базовой схемой — это могут быть совершенно разные...

Почему кошка всегда приземляется на лапы? Учёные больше века пытались разгадать этот физический фокус

Кошки обладают удивительной способностью: даже если животное начинает падать спиной вниз, спустя мгновение оно уже разворачивается в воздухе и готовится приземлиться на все четыре лапы. Со стороны...