In urmatoarele cateva luni, RunwayML va prezenta diferitele reclame folosind instrumentele noastre. Interviul de astazi este cu Claire Evans si Jona Bechtolt din trupa de dance-pop YACHT.

Anul trecut, trupa dance-pop YACHT a lansat Chain Tripping, un album captivant nominalizat la premiile Grammy proiectat de membrii formatiei Claire Evans, Jona Bechtolt si Rob Kieswetter folosind Runway. Cu sediul in LA, trupa a folosit Runway pentru a proiecta melodiile si activele vizuale ale albumului, inclusiv videoclipuri muzicale, fotografii ale trupei, o coperta a albumului si instalatii live. Au numit albumul chiar folosind GPT-2.

Array

Interesul YACHT de a folosi ML ca parte a procesului lor de compozitie a inceput acum cinci ani. Avand experienta de editor stiintific si scriitor, Claire era curioasa de implicatiile pe care AI le-ar putea avea asupra artelor si creativitatii. Ea mentioneaza ca a citit scrierile lui David Cope si a vazut lucrarile unor artisti precum Mario Klingemann, Memo Akten si Robbie Barrat.

YACHT – (Downtown) Dans

„Nu stim cu adevarat care este modul incorect de a face lucrurile ..

Array

. Incepeti cu forta bruta, incercati lucruri si ajungeti sa faceti lucruri, poate ca un programator instruit nu s-ar gandi sa faca.”

Cand a venit vorba despre Chain Tripping, trupa a vazut un album ca o oportunitate de a intelege mai bine invatarea automata. „Suntem mereu interesati sa incepem o conversatie cu o noua tehnologie care nu este pentru noi”, spune Claire. „Pista a fost primul instrument pe care l-am vazut pentru utilizator”.

Array

Prin muzica, arta vizuala, fotografie, video, tipografie, design si aspect, formatia a creat ceea ce ei numesc un „document” privind statutul actual al artei si ML.

Cu Runway, trupa a gasit un instrument accesibil cu o piata de modele cu care ar putea experimenta. Deoarece nu sunt programatori de computer, Claire si Jona au externalizat anterior colaboratori mai experimentati. Sa te bazezi pe alte persoane a fost frustrant, spune Claire.

„Pista este singurul instrument pe care am reusit sa ne amestecam cu noi insine”, adauga ea. „Asa inveti cum functioneaza sistemele.”

Privind inapoi la procesul lor, Jona vede valoarea creativa in utilizarea abuziva a modelelor. „Nu stim cu adevarat care este modul incorect de a face lucrurile”, reflecta Claire. „Incepeti cu forta bruta, incercati lucruri si sfarsiti prin a face lucruri pe care un programator instruit nu le-ar gandi sa faca”

YACHT – SCATTERHEAD

In videoclipul muzical Scatterhead, duo a tras imagini de arhiva de dans si le-a inserat in modele post mapping pentru a crea forme de dans glitchy, apoi a adaugat pe formulare din DensePose, un model care le-a permis sa-si mapeze propriile forme 3D din imagini video TV. „Ceea ce este interesant si important este ca aceste instrumente nu sunt perfecte”, spune Jona, descriind modul in care membrele lor ar disparea si reaparea pe o alta parte a corpului lor. „Dar unde esueaza, deseori se intampla cele mai interesante lucruri estetice.”

„Toti ne intelegem sensul in timp, in interpretarea mea si ascultam melodia. Ceea ce crede cineva despre melodie este la fel de valabil ca despre ceea ce cred ca este melodia. ”

Ascultand albumul acum, trupa descrie materialul ca traind in spatiul dintre compozitia narativa traditionala si procesele generative anti-narative ale AI. „Marea intrebare a fost cum putem folosi ML pentru a crea ceva care nu este doar muzica din punct de vedere tehnic”, spune Claire, „dar se potriveste intr-un corp de munca cu care ne putem mandri”.

Pentru majoritatea artistilor, semnificatia unei opere vine de la creator. ML perturba aceasta relatie. Pentru YACHT, procesul creativ a insemnat sa stea in fata textului si a limbajului generat de AI, cunoscut si sub numele de „gobbledygook fara sens”. Provocarea este apoi de a gasi sens in acest limbaj brut, care a ajuns printr-un proces creat de oameni din intrarea care a fost selectata din oameni. „Acest proces de interpretare si aranjare este o parte imensa a sensului in care functioneaza de fapt”, ne spune Claire . Cu alte cuvinte, este diferenta dintre modul in care spui ceva, in comparatie cu ceea ce spui.

Inainte ca Covid-19 sa anuleze spectacolele live, trupa le-a interpretat Chain Tripping fanilor lor cu proiectii live generate de Runway. „Pentru ca [acest album] a venit din spatiul dintre noi si masina, exista aceasta experienta colectiva minunata pe care o avem cu publicul nostru”, spune Claire. „Toti ne dam sensul in timp, in interpretarea mea si ascultam melodia. Ceea ce crede cineva despre melodie este la fel de valabil ca despre ceea ce cred ca este melodia. ”

Jona mentioneaza conversatiile aftershow, in care formatia ar vorbi cu fanii lor despre procesele ML utilizate in spectacol. „Le-am spus sa plece acasa si sa descarce Runway si sa se joace cu asta”, descrie Jona. „Aceste instrumente creeaza rezultate complet imprevizibile. Trebuie sa profitati la maximum de acestea, dar este foarte distractiv. ” Privind in urma, recunoaste el, instrumentele ML au fost o conversatie destul de ciudata de purtat la 1 dimineata intr-un club rock.

„Pista o pune doar in buzunar. O face astfel incat sa puteti realiza instalari video masive folosind invatarea automata in propria curte. E salbatic. ”

Alaturi de albumul lor vizual, trupa a gasit si timp pentru a proiecta o instalatie video pentru Dolby Gallery din San Francisco. Avand o lungime de 96 de metri, trupa a decis sa foloseasca proiectul pentru a intelege ce vad sistemele ML si ce se pierde in traducere. Referindu-se la Eadweard Muybridge si la inceputul istoriei fotografiei, artistii au creat o declaratie vizuala despre modul in care lumea va fi, in cele din urma, remodelata de ML.

Provocarea acestui proiect a fost de a imbina o imagine continua pentru 96 de metri de spatiu. Si-au capturat filmarile originale folosind un iPhone in curtea din spate. „Tocmai am aratat-o ​​computerului si datele importante au fost extrase”, explica Claire. „Pista ne-a permis sa cream ceva care a avut o valoare de productie foarte mare, cu resurse foarte mici.”

Ca formatie, filosofia lui Claire si Jona este sa faca cat mai mult posibil, cu cat mai putin posibil. Ei descriu Runway ca fiind atat eliberator, cat si democratizator. „Aceste instrumente au, de obicei, gatekeepers sau un nivel de cunostinte de calcul pentru a le accesa”, spune Claire, mentionand cat de greu este pentru artistii independenti sa se angajeze in invatarea automata. „Pista o pune doar in buzunar. O face astfel incat sa puteti realiza instalari video masive folosind invatarea automata in propria curte. E salbatic. ”

ARTICOLE SIMILAREDE LA ACELAȘI AUTOR