Робот-гравець на маримбі використовує АІ для написання та виконання власної музики

Коли відбудеться неминуче вторгнення роботів, ми тепер знаємо, яким буде саундтрек, що його супроводжуватиме – і мусимо визнати, що він набагато менш епічний, ніж тема з фільму “Термінатор 2: Судний день”. Якщо тільки ви не великий шанувальник маримби, тобто!

Це твердження ґрунтується на дослідженнях Технологічного інституту Джорджії, де інженери розробили робота-граючого на маримбі з чотирма руками і вісьмома паличками, який здатен писати і виконувати власні музичні композиції. Для цього він використовує набір даних з 5 000 музичних творів у поєднанні з новітніми технологіями глибокого навчання на основі нейромережевого штучного інтелекту.

“Це перший приклад робота, який пише власну музику за допомогою глибоких нейронних мереж, – розповів Digital Trends аспірант Мейсон Бретан, який вперше почав працювати над так званим роботом Shimon сім років тому. “На відміну від деяких інших недавніх досягнень в автономному створенні музики, отриманих в результаті досліджень, проведених в академічних колах і таких місцях, як Google, де все моделювання здійснюється за допомогою програмного забезпечення, існує додатковий рівень складності, коли роботизована система, яка живе в реальному фізичному тривимірному просторі, генерує музику. Вона повинна не тільки розуміти музику в цілому, але й розуміти особливості її втілення і як втілити свої музичні “ідеї” в життя”.

Робот пише та грає власну музику завдяки глибокому навчанню

Навчання Шимона створювати нові музичні твори передбачає спочатку створення числового представлення невеликих музичних фрагментів, таких як кілька ударів або один такт, а потім навчання послідовності цих фрагментів. Для роботи використовуються дві окремі нейронні мережі – одна з них є “автокодером”, який створює стисле числове представлення, а друга – мережа довготривалої короткочасної пам’яті (LSTM), яка моделює послідовності з цих фрагментів.

“Ці послідовності походять від того, що ми бачимо в людських творах, таких як концерт Шопена або пісня “Бітлз”, – продовжив Бретан. “Перед LSTM стоїть завдання передбачати вперед, а це означає, що, маючи перші вісім музичних фрагментів, він повинен передбачити дев’ятий. Якщо йому це вдасться, то ми зможемо надати LSTM стартовий матеріал і дозволити йому продовжувати прогнозувати і генерувати далі. Коли Шимон генерує, він приймає рішення, які не тільки базуються на цій музичній моделі, але й включають інформацію про його фізичне “я”, так що його музичні рішення оптимізовані для його конкретних фізичних обмежень”.

Це досить захоплюючі речі. І хоча ідея бота, що створює музику, може здатися цікавою лише людям, які вивчають музику, більш широкі питання, які вона піднімає про комп’ютерну творчість, з часом ставатимуть все більш важливими.

“Хоча ми зосереджені на музиці, більш загальні питання і застосування стосуються розуміння процесів людської творчості і прийняття рішень”, – сказав Бретан. “Якщо ми зможемо відтворити ці процеси, то ми наблизимося до того, щоб робот успішно виживав у реальному світі, в якому творче прийняття рішень є обов’язковим при зіткненні з новими сценаріями і проблемами кожен день”.

Рекомендації редакції

• Tesla просто шокувала всіх своїм прототипом робота Optimus
• Google Assistant і YouTube Music прийдуть в Galaxy Watch 4
• Від фільмів до музики: 2021 рік став роком Dolby Atmos
• Spotify нарешті додає підтримку текстів пісень в реальному часі в свої мобільні додатки
• Телевізори LG на WebOS отримали власний додаток Apple Music

• Обчислювальна техніка
• Музика
• Новини
• HBO Max
• Що буде далі: Як технології допомагають суспільству відкритися після коронавірусу

Source: digitaltrends.com