Proiectul Yamaha ”Dear Glenn” dezvăluie AI System care reproduce performanța legendarului pianist Glenn Gould la Festivalul Ars Electronica
Yamaha Corporation va dezvălui primul sistem de pian * 1 Artificial Intelligence (AI) din lume bazat pe tehnologia de învățare aprofundată * 2 capabil să redea orice piesă muzicală în stilul regretatului pianist celebru Glenn Gould, în timp ce interacționează cu artiștii din formație pe 7 septembrie, a treia zi a Festivalului Ars Electronica, unul dintre cele mai mari festivaluri de artă media din lume, organizat în Linz, Austria. Sistemul AI va oferi un concert împreună cu mai mulți interpreți de renume. Va exista și o sesiune despre viitorul muzicii și sistemul AI. De asemenea, proiectul a fost recunoscut ca fiind unul dintre multele acțiuni de aniversare a 150 de ani de relații japonezo-austriece.
Puncte tari
- Yamaha va dezvălui primul sistem AI din lume capabil să redea orice piesă muzicală în stilul legendarului pianist Glenn Gould cu experiență interactivă între un pianist AI și muzicieni umani.
- AI a interpretat în concert alături de interpreți de renume, inclusiv piese care nu au fost niciodată interpretate de Gould.
- Dezbaterile vor explora posibilitățile de colaborare pe partea de creație dintre AI și artiști umani și modul în care performanța muzicală se va îmbina.
Website oficial ”Dear Glenn”:
Site-ul web și videoclipurile disponibile din 4 septembrie.
Cu sprijinul complet al Fundației Glenn Gould, Yamaha a analizat peste 100 de ore cu înregistrările performanțelor lui Gould pentru a înțelege stilul său de interpretare și a folosit algoritmi de învățare aprofundată pe baza datelor colectate pentru a crea sistemul AI. În plus față de înregistrările audio ale lui Gould, datele de învățare AI au inclus aportul uman sub formă de performanțe ale mai multor pianiști care erau admiratori ai lui Gould și care erau familiarizați cu stilul său, ridicând calitatea reproducerii la noi niveluri.
Sistemul include, de asemenea, tehnologia originală Yamaha AI Music Ensemble care permite să analizeze performanța colegilor interpreți umani aproape instantaneu și să interpreteze predictiv în timp ce interacționează cu muzicieni umani. Mai mult decât o simplă performanță automatizată, sistemul reproduce măiestria lui Glenn Gould pentru a oferi o experiență inspirată și interactivă de co-creare între un pianist AI și muzicieni umani.
Sistemul AI va fi dezvăluit în a treia zi a festivalului, sâmbătă, 7 septembrie, în timpul unei sesiuni care va explora viitorul muzicii prin utilizarea AI în interpretarea muzicală. Discuția va include pianistul contemporan renumit Francesco Tristano, Brian M. Levine al Fundației Glenn Gould și un dezvoltator al companiei Yamaha, Akira Maezawa, care au ajutat la crearea sistemului AI.
Ulterior, sistemul AI va oferi primul său concert public, împreună cu interpreți de renume contemporani la mănăstirea Sf. Florian. Performanțele vor include un duet la pian cu Francesco Tristano și un trio de instrumentiști alături de membrii Bruckner Orchestra Linz. Programul va include o capodoperă reprezentativă a lui Glenn Gould Goldberg Variations (BWV 988) de J.S. Bach, precum și Fuga ide Bach inversa 2 Clavicembali din The Art of the Fugue (BWV 1080/18) și Trio Sonata G Major (BWV 1038), niciuna dintre acestea nu a fost interpretată vreodată de Gould. Deoarece niciuna dintre piese nu este inclusă în datele de învățare ale AI, sistemul se va confrunta cu provocarea de a interpreta fără sursă de date audio de imitat.
Glenn Gould a fost recunoscut și pentru devotamentul său față de înregistrarea cu media digitală și pentru interesul de a regândi relația dintre interpret și public. Numele proiectului „Dear Glenn” este un omagiu adus atitudinii artistului, care a contribuit la dezvăluirea posibilităților noilor tehnologii și a fost, de asemenea, inspirația pentru ideea din spatele proiectului. Prin acest proiect, Yamaha speră să prezinte noi posibilități de exprimare muzicală prin co-creare și inspirație reciprocă între muzicienii umani și tehnologia modernă AI.
Comentariu de Koichi Morita, Director General Senior al Diviziei de Cercetare și Dezvoltare, Yamaha Corporation
”În lumea instrumentelor și a muzicii, care au fost susținute de-a lungul istoriei și de tradiție, avansarea tehnologică a actualizat și extins întotdeauna posibilitățile de exprimare muzicală. Un exemplu major este pianul, care continuă să evolueze chiar și după ce a devenit un instrument răspândit în forma sa actuală datorită revoluției industriale. Evoluția tehnologiei informației în secolul XX ne-a furnizat nu numai o revoluție hardware a pianului, ci și o revoluție software, inclusiv tehnologia AI. Yamaha consideră că AI are potențialul de a extinde limitele creativității muzicale din punctul de vedere al emoției și sensibilității umane. Așteptăm cu nerăbdare să explorăm noi posibilități, expunând și împărtășind unele dintre rezultatele noastre cu pasionații de muzică de la Ars Electronica din luna septembrie.”
Prezentarea generală a tehnologiei
Sistemul AI este capabil să redea la pian în stilul lui Glenn Gould și se remarcă prin capacitatea sa de a reda piese care nu au fost niciodată interpretate de artist, atât timp cât sunt disponibile date muzicale. Acest obiectiv este posibil prin utilizarea unei aplicații cu tehnologia de învățare aprofundată. Sistemul este alcătuit dintr-un pian player și un software AI, care generează instantaneu date de redare în stilul lui Glenn Gould și apoi furnizează aceste date pianului player.
Figura 1: Procesul de învățare AI. Pe lângă analizarea atingerii clapelor din partea lui Glenn Gould, pe baza înregistrărilor audio ale spectacolelor sale (Pasul 1), AI a folosit și date despre performanța altor pianiști care erau intim familiarizați cu Gould pentru a învăța dintr-o rețea profundă, capabilă să interpreteze în stil Glenn Gould cu utilizarea opțională a partituri (Pasul 2). Drept urmare, sistemul AI este capabil să reproducă stilul lui Gould chiar în timp ce interpretează piese care nu au fost înregistrate niciodată de artist (Pasul 3).
Figura 2: Funcționarea AI Glenn Gould într-o formație. Analiza în timp real a interpreților umani prin intermediul camerei și microfonului permite Glenn Gould AI să interacționeze cu aceștia în timpul spectacolului.
Sesiune Panel (dezvăluirea AI)
Data:
Septembrie 7, 2019 la 19:00 ~ 19:30
Locația:
Mănăstirea St. Florian (Linz, Austria)
Participanți:
Francesco Tristano (pianist), Brian M. Levine (Fundația Glenn Gould), Norbert Trawoger (Brucker Orchester Linz), Akira Maezawa (R&D, Yamaha Corporation)
Tema:
Posibilitățile de co-creație dintre artiști și AI
Concert
Data:
Septembrie 7, 2019 la 20:30 ~ 21:00
Locația:
Mănăstirea St. Florian (Linz, Austria)
Artiști:
Francesco Tristano (pianist), Norbert Trawoger (Flaut; Brucker Orchester Linz), Maria Elisabeth Kostler (vioară; Bruckner Orchester Linz)
Piese:
J.S. Bach's Goldberg Variations (BWV 988), Fuga inversa a 2 Clavicembali din The Art of the Fugue (BWV 1080/18)*, Trio Sonata G Major (BWV 1038)* *Niciodată interpretate de Glenn Gould
Glenn Gould
Născut în Toronto, Canada în anul 1932, Glenn Gould a fost un pianist celebru care a murit în 1982 la vârsta fragedă de 50 de ani. Gould a fost foarte apreciat și este celebru datorită spectacolelor sale magistrale de J.S. Bach, începând cu albumul său de debut Bach: The Goldberg Variations, care a fost lansat în 1956. În 1964, Gould a anunțat sfârșitul carierei sale concertistice și a început să se concentreze pe înregistrări, dedicându-se lansărilor digitale media. Gould a fost recunoscut și pentru obiceiurile sale neconvenționale și unice de interpretare, care includeau așezarea pe un scaun mai jos și aplecarea pe claviatura pianului, precum și zumzetul în timpul cântării, chiar și în timpul înregistrărilor. În anii săi ani, Gould a înregistrat trei albume, printre care Bach: The Goldberg Variations, pe un pian de concert Yamaha.
Festivalul Ars Electronica
Festivalul Ars Electronica este un festival care se concentrează pe arta modernă, tehnologie și știință și este deținut de Ars Electronica, un institut de cercetare în domeniul artei media cu sediul în Linz, Austria. În 1979 a avut loc pentru prima dată, festivalul devenind de atunci unul dintre cele mai mari evenimente de artă media din lume. În timpul festivalului, experții din întreaga lume se adună la expoziții, spectacole, evenimente și conferințe internaționale în locații din jurul orașului Linz pentru a se implica în dezbateri și pentru a promova noi conexiuni.
Fundația Glenn Gould
Misiunea Fundației Glenn Gould este de a onora spiritul lui Glenn Gould prin sărbătorirea sa, promovarea creativității și transformarea vieții prin puterea muzicii și a artelor sub semnătura Fundației, inclusiv Premiul Glenn Gould.
Noutăți
・ Yamaha AI reproduce atingerea clapelor de către maestrul pianist Sviatoslav Richter, alături de Orchestra Filarmonică din Berlin
・ Inteligența artificială Yamaha (AI) transformă un dansator în pianist
・Yamaha AI alături de pianiști umani în duet, formație de instrumentiști
・Yamaha și HAKUHODO i-Studio expune instalația AI Music la SXSW
*1: August 2019, Yamaha Corporation.
* 2: Învățarea aprofundată este o metodă de învățare automată și se caracterizează prin utilizarea multistrat a modelelor matematice denumite rețele neurale pentru procesarea informațiilor.