Adobe представила новый ИИ-инструмент для создания и редактирования пользовательского аудио

Новая экспериментальная разработка команды Adobe Research призвана изменить подход к созданию и редактированию пользовательского аудио и музыки. Инструмент для создания и редактирования музыки Project Music GenAI Control, созданный с помощью генеративного искусственного интеллекта, позволяет авторам генерировать музыку на основе текстовых подсказок, а затем с помощью тонкой настройки редактировать аудио в соответствии со своими потребностями. Project Music GenAI Control разрабатывается в сотрудничестве со специалистами из Калифорнийского университета в Сан-Диего и Школы компьютерных наук Университета Карнеги-Меллон.

«С Project Music GenAI Control генеративный ИИ становится вашим соавтором. Он помогает людям создавать музыку для своих проектов. Телеведущие, подкастеры или любые другие люди, которым нужен звук с нужным настроением, тоном и длиной», — говорит Николас Брайан, старший научный сотрудник Adobe Research и один из создателей технологии.

Работа новых инструментов начинается с ввода пользователем текстовой подсказки, которая поступает в генеративную модель искусственного интеллекта для последующей обработки — метод, который Adobe уже использует в Firefly. Пользователь вводит текстовую подсказку, например «мощный рок», «радостный танец» или «грустный и задумчивый джаз», чтобы сгенерировать звуковой трек.

После того, как обработка завершена и ИИ сгенерируют музыку, пользователь может провести точечное и глубокое редактирование полученного трека с помощью интегрируемых инструментов. Благодаря простому пользовательскому интерфейсу сгенерированное можно регулировать темп и структуру, настраивать интенсивность звука, увеличивать продолжительность клипа, микшировать фрагменты.

Особенностью нового инструмента в Adobe разработчики называют то, что он не просто создаёт звук, а «выводит работу с ним на уровень Photoshop», давая креаторам такой же глубокий контроль над созданием, настройкой и редактированием аудио.