Алгоритм штучного інтелекту, що читає думки, може з’ясувати, яка музика грає у вас в голові

Більшість з нас користувалися додатками на кшталт Shazam, які можуть ідентифікувати пісні, коли ми підносимо телефон до динаміка. Але що, якби було можливо, щоб додаток визначав музичний твір, ґрунтуючись лише на ваших думках. Неможливо? Можливо, ні, згідно з новим дослідженням, проведеним дослідниками з Каліфорнійського університету в Берклі.

У 2014 році дослідник Брайан Паслі і його колеги використовували алгоритм глибокого навчання і активність мозку, виміряну за допомогою електродів, щоб перетворити думки людини в цифрову синтезовану мову. Це було досягнуто шляхом аналізу мозкових хвиль людини, коли вона говорила, щоб розшифрувати зв’язок між мовленням і мозковою активністю.

Через кілька років команда вдосконалила попередні дослідження і застосувала свої висновки до музики. Зокрема, вони змогли точно (на 50 відсотків точніше, ніж у попередньому дослідженні) передбачити, про які звуки думає піаніст, на основі активності мозку.

• Ви нарешті можете перенести свої чати WhatsApp з Android на iOS
• Як освоїти налаштування еквалайзера для ідеального звучання
• Чи можуть гібридні бездротові навушники вирішити проблему звуку без втрат?

“Під час слухового сприйняття, коли ви слухаєте такі звуки, як мова або музика, ми знаємо, що певні частини слухової кори розкладають ці звуки на акустичні частоти – наприклад, низькі або високі тони”, – сказав Паслі в інтерв’ю Digital Trends. “Ми перевірили, чи ці ж ділянки мозку також обробляють уявні звуки так само, як ви внутрішньо вербалізуєте звук власного голосу, або уявляєте звук класичної музики в тихій кімнаті. Ми виявили, що існує велике перекриття, але також і чіткі відмінності в тому, як мозок представляє звук уявної музики. Побудувавши модель машинного навчання нейронного представлення уявного звуку, ми використовували цю модель, щоб з достатньою точністю вгадати, який звук уявлявся в кожен момент часу”.

Для дослідження команда записала активність мозку піаніста, коли він грав музику на електричній клавіатурі. Таким чином, вони змогли зіставити мозкові патерни і ноти, які він грав. Потім вони повторили експеримент, але вимкнувши звук клавіатури і попросивши музиканта уявити ноти, які він грав. Це тренування дозволило їм створити свій алгоритм прогнозування музики.

“Довгострокова мета нашого дослідження – розробити алгоритми для мовного протеза для відновлення комунікації у паралізованих людей, які не можуть говорити”, – сказав Паслі. “Ми ще досить далекі від реалізації цієї мети, але це дослідження є важливим кроком вперед. Воно демонструє, що нейронний сигнал під час слухового сприйняття є достатньо надійним і точним для використання в алгоритмах машинного навчання, які можуть передбачати акустичні сигнали з виміряної активності мозку”.

Рекомендації редакторів

• Що таке просторовий звук? Повне пояснення функції 3D-звуку Apple
• Аналоговий штучний інтелект? Звучить божевільно, але за цим може бути майбутнє
• Тепер ви можете використовувати музику покемонів у своїх відео на YouTube
• Від фільмів до музики – 2021 рік став роком Dolby Atmos
• Що таке hi-res аудіо, і як його можна випробувати вже зараз?

Source: digitaltrends.com