Останній експеримент Adobe з генеративним штучним інтелектом має на меті допомогти людям створювати та налаштовувати музику без жодного професійного досвіду роботи з аудіо. Анонсований під час Hot Pod Summit у Брукліні в середу, Project Music GenAI Control – це новий прототип інструменту, який дозволяє користувачам створювати музику за допомогою текстових підказок, а потім редагувати її, не переходячи до спеціального програмного забезпечення для редагування.
Користувачі починають з введення текстового опису, який генерує музику у визначеному стилі, наприклад, “веселий танець” або “сумний джаз”. Adobe заявляє, що інтегровані елементи керування редагуванням дозволяють користувачам налаштувати результат, змінюючи будь-які повторювані патерни, темп, інтенсивність і структуру. Фрагменти музики можна реміксувати, а аудіо можна генерувати у вигляді повторюваного циклу для тих, кому для створення контенту потрібні такі речі, як мінусовки або фонова музика.
Adobe також заявляє, що інструмент може коригувати згенероване аудіо “на основі еталонної мелодії” і збільшувати довжину аудіокліпів, якщо ви хочете зробити трек достатньо довгим для таких речей, як фіксована анімація або сегменти подкастів. Фактичний користувацький інтерфейс для редагування згенерованого аудіо ще не розкрито, тому поки що нам доведеться використовувати нашу уяву.
Adobe заявляє, що для публічної демонстрації Project Music GenAI Control було завантажено контент із суспільного надбання, але незрозуміло, чи можна безпосередньо завантажувати будь-яке аудіо в інструмент як довідковий матеріал, або наскільки довго можна продовжувати кліпи.
Хоча подібні інструменти вже доступні або розробляються – наприклад, MusicLM від Google і AudioCraft з відкритим вихідним кодом від Meta – вони дозволяють користувачам генерувати аудіо за допомогою текстових підказок, практично не підтримуючи редагування музичного результату. Це означає, що вам доведеться генерувати аудіо з нуля, доки не отримаєте бажаних результатів, або вручну вносити правки за допомогою програмного забезпечення для редагування аудіо.
“Одна з найцікавіших речей у цих нових інструментах полягає в тому, що вони не просто створюють звук, – сказав Ніколас Брайан, старший науковий співробітник Adobe Research, у прес-релізі. – Вони виводять його на рівень Photoshop, надаючи творчим працівникам такий самий глибокий контроль над формуванням, налаштуванням та редагуванням аудіо. Це свого роду контроль на рівні пікселів для музики”.
Проєкт Music GenAI розробляється у співпраці з Каліфорнійським університетом та Школою комп’ютерних наук Університету Карнегі-Меллона. Adobe описує його як експеримент на “ранній стадії”, тож, хоча ці функції можуть з часом бути інтегровані в існуючі інструменти для редагування компанії, такі як Audition та Premiere Pro, це займе деякий час. Інструмент ще не доступний для громадськості, і дата його релізу не оголошена. Ви можете стежити за розвитком Project Music GenAI – разом з іншими експериментами, над якими працює Adobe – на сайті Adobe Labs.
Читайте також:
- Adobe представила асистента зі ШІ для роботи з PDF-файлами
- Adobe відмовилась від поглинання Figma за $20 млрд