Штучний інтелект Huawei завершив “Незакінчену симфонію” Шуберта, і ми її почули

Шуберт залишив Симфонію №8 незавершеною. А штучний інтелект смартфона щойно завершив її

Енді Боксолл 6 лютого 2019 року

Франц Шуберт написав свою Симфонію №8 у 1822 році, але так і не завершив її, зробивши лише дві частини і начерк третьої. Майже 200 років потому компанія Huawei, композитор Лукас Кантор, лауреат премії “Еммі”, та штучний інтелект (ШІ) у смартфоні Mate 20 Pro зробили те, чого не зробив видатний композитор. Вони завершили незавершену симфонію.

• Технологія
• Композитор
• Емоція
• Завершена симфонія
• Майбутнє

Проект є продовженням ілюстрації не лише потужності процесора Huawei Kirin 980 та прискорювача штучного інтелекту Dual-Neural Processing Unit (NPU), а й потенціалу використання ШІ в різноманітних творчих проектах. Ми вже знайомі з режимами ШІ на камерах смартфонів, а компанія Huawei раніше продемонструвала потужність і швидкість свого ШІ в безпілотному автомобілі, де телефон використовувався для ідентифікації та допомоги в об’їзді перешкод.

Безумовно, завершення Симфонії №8 Шуберта – це зовсім інша пропозиція? Чи може смартфон і бортовий штучний інтелект дійсно завершити один з найвідоміших незавершених музичних творів, і зробити це таким чином, щоб ми захотіли почути? Digital Trends відвідали перше в історії публічне виконання завершеного твору в Лондоні та поспілкувалися з Лукасом Кантором і Huawei про цей захоплюючий проект.

• 3 тренди, які зроблять бездротове аудіо ще кращим у 2023 році
• Забудьте про AirPods – ось чому я використовую навушники Samsung з iPhone
• Зарядний пристрій Anker на 150 Вт повністю змінив те, як я заряджаю свої гаджети

Технологія

Який внесок зробив Huawei Mate 20 Pro та його ШІ?

“Вся мелодія [для третьої та четвертої частин] була складена за допомогою штучного інтелекту та Mate 20 Pro”, – розповів Digital Trends керівник портфоліо телефонів Huawei Арне Херкельманн.

Телефон і його чіпсет повністю не модифіковані, і точно такі ж, як у Mate 20 Pro, який ви можете мати у своїй кишені. Але Huawei створила спеціальну модель ШІ для розуміння та розвитку музики, якій дали першу та другу частини Шуберта, а потім, проаналізувавши тембр, висоту та метр музики, вона згенерувала третю та четверту частини.

Навчання ШІ було майже як навчання в школі, тільки з лазерним фокусом на одному предметі – робити музику, як Шуберт. Замість шкільних підручників використовувалися MIDI-файли, з яких він вивчав закономірності і структуру. За шість місяців проекту Huawei створила 20 різних моделей, перш ніж зупинилася на фінальній, під час якої штучний інтелект прослухав близько 90 творів Шуберта в якості зразків.

“Думаю, я відповів “так” ще до того, як закінчив читати електронний лист”.

“На початку це був весь Шуберт, щоб ШІ міг зрозуміти, що робив Шуберт”, – сказав Геркельманн. “Пізніше ми також навчали його на композиторах, які, як ми знали, вплинули на Шуберта, щоб переконатися, що існує більш багатий фон і контекст твору”.

Такий підхід допоміг ШІ краще зрозуміти своє завдання. Він також потребував тренувань, щоб переконатися, що він створив мелодію, яка підходить для Шуберта, а не раптово створив мелодію, яка більше підходить для химерної поп-версії незавершеної симфонії Шуберта.

Коли мелодія оживала, композитор Лукас Кантор мав аранжувати її, надати їй емоційності, а також допомогти навчити ШІ і виправити його помилки. Йому знадобилося всього 30 днів, щоб створити завершені третю та четверту частини 8-ї симфонії. Він називав це неможливим терміном без ШІ.

Композитор

Лукас Кантор – композитор, лауреат премії “Еммі”, в даний час пише музику для DreamWorks Animation, серед інших проектів, і він виявився ідеальною людиною для цієї роботи. Задовго до проекту його особистий інтерес до штучного інтелекту став основою для дружби з одним з інженерів, що працюють над ШІ компанії Huawei, випадкова зустріч, яка в підсумку призвела до того, що компанія зв’язалася з ним, щоб закінчити незавершену симфонію за допомогою ШІ.

“Думаю, я відповів “так” ще до того, як закінчив читати електронний лист”, – сміється Кантор, описуючи те, як він став учасником проекту. “Я був схвильований потенціалом”.

Хоча ідея використання штучного інтелекту і технологій для створення, поліпшення або доповнення музики звучить футуристично, в тій чи іншій формі це відбувається вже протягом десятиліть.

“Технології, які я використовую для музичного самовираження, повністю цифрові, – сказав Кантор, – і без них я не зміг би так швидко виражати себе. Я думаю, якби Шуберт мав її, він був би в 10 разів більш плідним”.

“Те, що ви чуєте, – це об’єднання багаторічного досвіду”.

Легко відкинути А.І., або, можливо, навіть Кантора, як сплячого партнера – той був більш впливовим, ніж інший. Так що ж було поділено? Яка частина завершеної роботи належить Кантору, а яка – штучному інтелекту Huawei?

“Це співпраця, як і будь-який музичний твір”, – сказав він. “Я співпрацював з людьми так само, як і з ШІ; ШІ генерував мелодії, в першу чергу ті, які, на його думку, були б схожі на Шуберта, або на те, що міг би придумати Шуберт”.

Емоція

Кантор приносить розуміння, досвід та емоції – речі, які ШІ не в змозі відтворити.

“Те, що ви чуєте, – це поєднання багаторічного досвіду”, – сказав він, говорячи про себе, диригента, музикантів і технологічні знання Huawei. Одне не могло б зробити це без іншого.

“Смартфон не міг би написати її без мене, але це був би не той самий твір без смартфона”, – сказав він, зазначивши, що це було схоже на роботу з “ідеальним партнером по мозковому штурму”. “Я не почав писати, поки не побачив, що зробив штучний інтелект. У мене були деякі уявлення про те, як буде виглядати незавершена симфонія, каркас форми. Коли я вперше почув мелодії, створені смартфоном, я був вражений тим, наскільки вони цікаві. Є одна мелодія в третій частині, де мажорна третина переходить у мінорну, що робить її дуже моторошною, але дуже красивою. Це не та мелодія, яку я міг би придумати”.

Чим глибше ми говорили про те, як були створені частини, тим більше Кантор розкривав можливості штучного інтелекту.

Якби мені не сказали, що третя і четверта частини створені штучним інтелектом, я б не знав.

“Емоційна глибина в останніх двох частинах – це те, що я привніс, але в напрямку, який ми зі смартфоном намітили разом. Мене вразило те, що смартфон генерував мелодії, які не підходили для 1822 року, але, здається, дуже добре підходили до твору. Це був стрибок, який зробив смартфон, і я пішов за ним. Я подумав, що це була чудова ідея”.

Цікаво, що Кантор розповідає про початок формування стосунків між смартфоном і штучним інтелектом. Іноді під час нашої розмови він говорив про нього так, як можна говорити про іншу людину.

“Я знаю, що у нього немає почуттів, але я продовжую приписувати йому почуття”, – сказав він, сміючись.

Як би незвично це не звучало, але це могло мати цікавий вплив на готову роботу.

“Те, що я наділяв її почуттями, допомогло мені отримати більш міцний творчий продукт”, – сказав Кантор.

Завершена симфонія

Виконана в лондонському Кадоган-холі в престижному районі Челсі у супроводі Англійського сесійного оркестру у складі 67 музикантів, завершений твір тривав 48 хвилин, у порівнянні з 27 хвилинами початкових двох частин. Якби мені не сказали, що третя і четверта частини були створені штучним інтелектом, я б не знав. У ній не було нічого цифрового, шаблонного чи бездушного.

Грайливі, злітаючі, а часом і досить епічні, створені штучним інтелектом частини Кантора перенесли мотиви з оригінальних частин Шуберта, і зуміли додати до них унікальні елементи. Не будучи музичним критиком чи знавцем класичної музики, важко сказати, наскільки добре нові частини “вписуються” в оригінали, але справа не в цьому.

Ніхто з колективу не ставив собі за мету створити остаточну завершену версію незавершеної симфонії, та й твір вже не вперше дописується іншими музикантами.

Відповідь на питання, чи вдалося це, чи ні, буде суб’єктивною. Але можна сказати, що вийшов музичний твір, який запам’ятовується, емоційний твір, що запам’ятовується. Не варто також дивуватися, що він так добре спрацював. Починаючи з електронної музики Жана Мішеля Жарра, гуртів на кшталт Pet Shop Boys, які отримали творчі можливості завдяки комп’ютеру Atari ST, і цифрових вокалістів на кшталт Хацуне Міку та іншого програмного забезпечення Vocaloid від Crypton Future Media, що дає музикантам можливість створювати музику, яку вони зазвичай не мали б змоги, – музика і високі технології вже багато років зближуються новими захоплюючими способами.

Майбутнє

Що означатиме завершення ШІ “Незавершеної симфонії”? Чи є це суто рекламним інструментом для Huawei, що демонструє талант ШІ, чи це щось більше? Хоча ми сумніваємося, що Huawei почне завершувати багато інших незавершених творів, музична індустрія вже звертає увагу на ці можливості. Наприклад, співачка і автор пісень Тарін Саузерн використовувала програми ШІ для створення свого альбому I Am AI.

Потенціал використання штучного інтелекту в творчих сценаріях спостерігається в усіх галузях, а не лише в музиці. Картини, написані ШІ, продаються за сотні тисяч доларів, ШІ в наших смартфонах допомагає нам стати кращими фотографами, а ШІ в інструментах для редагування допомагає професіоналам і аматорам робити зображення ще кращими. Штучний інтелект – це вже творча сила.

Ми запитали Кантора, чи це для нього одноразовий проект.

“Я дуже сподіваюся, що це не востаннє [я співпрацюю зі штучним інтелектом], це було фантастично”, – сказав він.

Але як щодо більш широкого впливу музики і штучного інтелекту, які об’єднуються разом? Він зробив захоплюючий прогноз.

“Через кілька років, я не думаю, що це буде чимось незвичайним, коли музику будуть писати таким чином”, – сказав Кантор.

Рекомендації редакції

• Саундбари LG 2023 року стануть бездротовими, отримають екранне управління і зручні для ігор входи
• Ця прихована функція iOS 16 перетворила мій iPhone на ідеальний гаджет для пошуку музики
• Новий Oppo Find N2 – це оновлення розкладного телефону, якого я чекав цілий рік
• Супутниковий зв’язок в iPhone 14: як це працює, скільки коштує і не тільки
• Tidal дарує бета-тестерам функцію живого діджея

Source: digitaltrends.com