El compositor de jocs i pel·lícules Sage Lewis diu que ningú no entén l'escriptura per a VR

Per al músic clàssic de Sage Lewis, la tecnologia planteja un repte. Tot i que les seves composicions han aparegut als anuncis de Google, Facebook i Nintendo, Lewis es manté ferma amb sons acústics. "Hi ha alguna cosa sobre el quartet de cordes i els principals instruments acústics, que expressen tanta emoció", diu per telèfon. "No podeu expressar això realment amb la música electrònica de la mateixa manera."

Però, potser, ho ha descobert. Al sud per sud-oest, les peces més recents de Lewis, el techno-drama Operador protagonitzada per Martin Starr (Silicon Valley) i Mae Whitman, i el thriller VR El substitut - Abordar el nostre coneixement canviant de la interactivitat humana amb la tecnologia avançada. Les puntuacions de Lewis, una barreja d’electrònica i acústica reflecteixen aquests canvis sísmics.

Dirigida per Logan Kibens, Operador segueix un programador d’ordinadors que construeix un bot d’atenció al client fent servir la seva dona com a plantilla abans de prendre un camí obsessiu i destructiu construït sobre l’amor. El substitut Mentrestant, és una experiència de VR a partir d’una vista en primera persona que exposa un matrimoni problemàtic. Nominat al Premi a la Innovació Interactiva del festival, El substitut "Problematitza la noció de presència física i reflecteix … pors i afliccions culturals a l’era digital".

Abans del festival d'Austin, Lewis va parlar Invers i ens va dir com va compondre una de les joies ocultes de SXSW i com encara s'estan escrivint les regles per a la composició de VR.

A SXSW aquest any, teniu Operador i El substitut. Què em pot dir sobre la seva comprensió dels dos projectes?

És emocionant, són dues pel·lícules que són similars en les seves històries, però que tenen una forma i una forma molt diferents de viure. Tots dos tenen a veure amb la tecnologia, la relació i la interferència en les relacions reals de la nostra vida personal. Es tracta d’intel·ligència artificial i on anem en el futur.

La tecnologia i les relacions humanes són temes populars, evidenciats en coses com Ella i Mirall negre. Com us heu apropat a la vostra puntuació? Operador ?

La tecnologia està cada vegada més mediada en les nostres comunicacions, però allà on podríem anar són les nostres relacions no només amb un altre humà sinó un algorisme. Va ser molt divertit treballar sobre aquests temes musicalment, la partitura té un conjunt de cambra amb un quartet de corda, piano, guitarra acústica, bateria i percussió. A continuació, hi ha tot un costat electrònic, cada instrument electrònic es mapeja directament a l'altre de l'acústica. Nosaltres les vam recrear a partir de zero amb un sintetitzador modular. Això va crear una partitura que va poder expressar aquestes emocions electrònicament.

Tenint en compte com aquestes pel·lícules són tan importants sobre la tecnologia, per què heu inclòs sons naturals i clàssics a Catalunya? Operador ?

Per a mi, es tractava de dos mons coexistents, un virtual i un altre natural, i de com coexistien en harmonia i conflictivitat, lluitant pel mateix espai. Era important tenir peces. Si teniu dues coses en contra, en canvi, fa que cada un sigui més potent. La música electrònica sona més electrònica quan està en el context de la música acústica. La qualitat d’alguna cosa que és natural pot semblar encara més natural quan esteu contra alguna cosa molt poc natural.

Quina era la vostra part preferida? Operador anotar?

Hi ha algunes belles escenes del llac Michigan, on el personatge, Joe, corre cada dia. Mesura les seves dades de salut, va al llac Michigan i fa una fotografia. Hi ha una escena en què van dir: “Aquesta és una de les peces més importants de la pel·lícula. Això és tot tu, Sage. "La música també havia de ser senzilla, no parlava amb molts gestos. Va ser només un parell de minuts d’uns gestos senzills de col·locar i realment et van colpejar el cor. Aquesta va ser la més emocionant per a mi.

Com compondre una experiència subjectiva en VR enfront d'una pel·lícula com Operador ?

És emocionant perquè ningú no entén com fer-ho. No hi ha cap lloc on pugueu estudiar-lo, ni tan sols per consultar altres projectes de VR per veure què han fet perquè encara no és accessible. Hi ha molt de pensar vosaltres mateixos. Tenim els nostres propis auriculars Oculus per fer-ho. De vegades anem a conferències VR per veure altres continguts però, en la seva major part, és un producte que encara no ha arribat al mercat.

Què hi ha dels videojocs amb els quals heu treballat i, a més, són experiències tecnològiques subjectives?

D'alguna manera és com els videojocs, però l’experiència és diferent. El substitut No és un joc, sinó una "pel·lícula interactiva", que va fer una feina molt bona per descobrir un nou territori de RV. Té una durada de 12 minuts, és esfèrica, és a dir, més que no pas un marc de 16x9 que estàs a la pel·lícula en qualsevol lloc que mires, darrere de tu, amunt, avall, pots caminar. És aquest híbrid de CG amb una càmera esfèrica, amb personatges reals. No avatars.

A mesura que aneu al voltant, algunes de les músiques són utilitzades durant tot el temps per recolzar la narrativa. Hi ha aquest altre tipus situat en espais. Si aneu a aquest espai, ho escolteu, però si no, no ho feu. Hi ha molt que necessiteu comunicar-vos quan esteu en una pel·lícula per fer que la història funcioni, de manera que la gent no es perdi parts importants, però a VR no teniu control sobre l’usuari. L’usuari pot vagar a qualsevol lloc.

La puntuació en VR ajuda a comunicar l’arc emocional, ja siguin o no atents a la performance. Haureu d’utilitzar la puntuació per reunir les coses perquè no teniu control. Això és interessant per a mi, ja que internament, en el personatge que hi ha dins, és un thriller psicològic per a aquest personatge dins de la seva ment i cos, però en el món exterior no ho és. És la gent que es mou i parla, no és un thriller habitual amb acció.

Els angles de la càmera en les pel·lícules comuniquen la narrativa i el tema, que la música s'intensifica. A VR, sembla que la música està fent tot el treball.

És difícil d’identificar-ho també perquè, quan compon, no puc experimentar-ho. No puc demostrar-ho perquè no es pot compondre amb els auriculars. En una pel·lícula, podeu veure-la, introduir-la i veure-la de nou i fer que un grup de persones se senti i parlar-ne.

VR és similar al teatre en realitat. Algunes persones tenen bons seients, algunes persones tenen seients dolents. Estan mirant tots els angles. Des de la perspectiva musical, saps com es sincronitzaran les coses. No heu d'endevinar com se sentiran a l'escenari quan esteu treballant. A VR endevineu, imaginant-ho en la vostra ment, els materials que feu referència que us ajuden a informar-vos de com se suposa que les coses es veuen i sentin al final.

No s’acaba mai. Només segueix canviant. El substitut, acabem de fer la darrera actualització. Després seguirem treballant durant molt de temps en funció del que aprenguem. Les coses són més lentes perquè confieu en els programadors, les coses es trenquen tot el temps dins del sistema. És tan diferent.

Quant de temps creieu que caldrà que els compositors trobin el ritme de la música a la RV?

Esbrinar com escriure música per a VR durarà fins a esbrinar els altres elements. Crec que tenen una durada de tres a cinc anys fins que comenci a arribar a un punt que funciona i que fa part de la vida de tothom. Aquest any, VR es dirigirà al mercat. Probablement trigarà anys a millorar el prototip i esbrinar com crear contingut, però ho veig tot al voltant del 2020, quan és una forma ben desenvolupada. La pel·lícula també va trigar molt de temps. Hi va haver grans pel·lícules des del principi, Charlie Chaplin i coses així, però per desenvolupar aquesta tecnologia va trigar molt de temps fins a la seva edat d'or. Encara estem molt lluny d’aquest, però ara ja està passant. Començarem a veure-ho aquest any. És emocionant.