GenAI від Adobe перетворює текстові підказки на музику: ось перший погляд

Короткий зміст

Основні положення

  • Adobe Project Music GenAI Control надає можливість генерувати музичні композиції, використовуючи текстові описи або зразки мелодій, а також точно налаштовувати отримані результати.
  • Розробка GenAI ведеться у партнерстві з провідними університетами. Основний акцент зроблено на детальному контролі процесу створення музики, що дозволяє уникнути необхідності використання зовнішнього програмного забезпечення для редагування.
  • Хоча використання даних GenAI, ймовірно, відповідає етичним нормам Adobe, залишаються актуальними питання, пов’язані з порушенням авторських прав на музику, створену за допомогою ШІ.

У сучасному світі, де штучний інтелект все активніше проникає у музичну індустрію, компанія Adobe розробляє власний інструмент на базі ШІ для генерації музики, який отримав назву GenAI. Цей інноваційний продукт дасть користувачам можливість створювати музичні твори, виходячи з текстових запитів, та проводити точне редагування результату. Ключовим питанням залишається: які джерела аудіоданих використовує GenAI?

Adobe представляє Project Music GenAI Control

Компанія Adobe анонсувала Project Music GenAI Control – потужний інструмент, що базується на штучному інтелекті, який має на меті спростити та зробити цікавішим процес додавання музики до різноманітного контенту. GenAI дозволить користувачам створювати музику, використовуючи текстові підказки або зразки мелодій, а також надасть інструменти для подальшого редагування та налаштування композицій.

Розробка прототипу Project Music GenAI Control відбувається у співпраці з науковцями з Каліфорнійського університету та Університету Карнегі-Меллона. Наразі невідомо, коли відбудеться офіційний запуск продукту та чи буде він представлений як окремий додаток або інтегрований у програмне забезпечення Adobe, таке як Premiere Pro.

Подібно до генеративної моделі штучного інтелекту Adobe Firefly, користувачі вводять текстовий запит, наприклад, “гладкий джаз”, або завантажують зразок мелодії, після чого ШІ створює аудіо. Після генерації звуку користувачі можуть змінювати темп, структуру та інтенсивність, а також створювати петлі без розривів.

Зі слів Ніколаса Браяна, старшого наукового співробітника Adobe Research, озвучених у прес-релізі:

«Однією з цікавих особливостей цих нових інструментів є не лише здатність генерувати аудіо, але й можливість здійснювати глибокий контроль над ним, як у Photoshop з зображеннями, дозволяючи користувачам формувати, налаштовувати та редагувати аудіо. Це свого роду контроль рівня пікселів, але для музики.»

Ці вбудовані елементи керування не тільки виділяють інструмент серед інших музичних інструментів на базі ШІ, таких як MusicLM, але й усувають потребу у зовнішньому програмному забезпеченні для редагування аудіо. GenAI може стати революційним інструментом для користувачів YouTube, подкастерів та інших творців контенту, які потребують легкого створення циклів та базового налаштування звуку.

Звідки GenAI бере свій вихідний матеріал?

У своєму блозі Adobe зазначає про дотримання Принципів етики ШІ, що гарантує відповідальну розробку технології. Можна припустити, що це означає використання GenAI даних, які є легальними, таких як відкриті або належно ліцензовані джерела. Також, Adobe займається розробкою технології водяних знаків, щоб мати можливість ідентифікувати аудіо, створене за допомогою GenAI.

Проте, функція завантаження зразків мелодій не є повністю прозорою. Наразі невідомо, які пісні користувачі можуть завантажувати в інструмент. Компанія Adobe повинна бути обережною, оскільки додавання музики, захищеної авторським правом, може призвести до проблем із музичними лейблами та виконавцями.

Питання про порушення інтелектуальної власності музикантів з боку музики, згенерованої ШІ, залишається відкритим. Платформи, такі як TikTok та Spotify, вже видаляли деякі deepfake-треки, що використовували вокальні семпли виконавців без їх згоди. Наприклад, пісня AI Heart on My Sleeve з фальшивим вокалом The Weeknd і Drake, як повідомляє The Guardian.

Деякі музиканти позитивно ставляться до можливостей, які надає музика, створена ШІ. Наприклад, співачка Grimes готова до використання ШІ за умови отримання справедливої частки гонорару за будь-яку успішну пісню, створену з її голосом.

У світі постійно розвиваючихся генеративних інструментів на базі ШІ, GenAI має потенціал стати вибором для творців, які шукають легкий спосіб створення музики. Однак це може створити головний біль для музикантів, якщо в результаті завдасть шкоди їхнім авторським правам.