James Allibans Bipolar presenterer et audiovisuelt speil som genererer et lydbilde fra tilstedeværelsen og bevegelsen til motivene. De resulterende lyddataene (inkludert data fra deltakeren) brukes til å transformere kroppen til et forvrengt portrett som svinger mellom tilstander av kaos og orden. Videoen gjør også en enorm effektiv jobb med å fange motivenes uendelige fascinasjon for installasjonen, og gir øyeblikkelig tilfredsstillelse og en følelse av uendelige muligheter.
Hvordan kom du på ideen til denne videoen?
Dette stykket startet som et eksperiment. Jeg snakket på en designfestival og ble bedt om (sammen med de andre foredragsholderne) å sette sammen en kort “takk for at jeg kom” video for å spille på slutten av arrangementet. Jeg ønsket å gjøre noe litt mer interessant enn å snakke med smarttelefonen. Opprinnelig planla jeg å lage et ansiktssporingsapplikasjon som krengde og slo opp ansiktet mitt som svar på talen min. Over tid endret jeg dette til en kroppsopplevelse ved å bruke Kinect-kameraet.
Jeg kom over denne effekten som virket så dramatisk at jeg bestemte meg for å undersøke nærmere og publisere Bipolar (så navngitt på grunn av de konstante svingningene mellom ordenstilstander og kaos) i form av en kort video. Folk begynte å bli interessert i å stille ut stykket, så jeg modifiserte det til å bli en installasjon. Prosjektet ble en samarbeidsinnsats da Liam Paton fra Silent Studios la til et interaktivt lydaspekt. Den har blitt stilt ut på flere arrangementer og utstillinger siden.
Vi elsker å geek ut, så skjem oss bort, hva ser vi på her?
Den grunnleggende effekten er ikke for involvert. Jeg bruker openFrameworks som er et C ++ kunstbasert programmeringsverktøy. Rundt 30 ganger i sekundet kombineres dybdedata og videomating fra et Xbox Kinect-kamera for å lage en 3D-modell av de besøkende. Jeg bruker lyddataene som kommer inn fra mikrofonen for å ekstrudere hvert andre punkt i 3D-modellen. Punktene blir ekstrudert i retningen de vender for å gi en romlig estetikk som ikke virkelig er mulig med dataene fra et standard kamera.
Utover dette blir det ganske involvert. Det er mye mer som skjer bak kulissene. Jeg bruker kraften på grafikkortet for å glatte 3D-modellen og beregne en haug med data som fremskynder applikasjonen og generelt forbedrer utseendet til stykket. Jeg har et brukergrensesnitt i appen med rundt 15-20 sider med knapper og glidebrytere som lar meg finjustere stykket til jeg er fornøyd. Når det gjelder lyden, blir deltakernes bevegelse beregnet og sendt til et eget stykke programvare bygget i Max / MSP av Liam. Deretter lager han det vridde lydbildet basert på mengden aktivitet og flere andre faktorer som beliggenhet og nærhet. Denne lyden plukkes deretter opp av mikrofonen sammen med andre lyder i omgivelsene og visualiseres på motivet.
Hva har vært det mest tilfredsstillende aspektet for deg med akkurat dette stykket?
Mens læringsprosessen og oppdagelsen og serendipity var veldig hyggelig, var den beste delen av dette prosjektet det endelige resultatet. Å se mennesker oppdage og samhandle med installasjonen for første gang er en fantastisk opplevelse, som jeg gleder meg over hvert stykke jeg tilbyr til publikum. Å være anonym bakerst i rommet og se på mennesker glede seg over en uventet opplevelse som jeg har jobbet hardt for å skape, er alltid veldig givende.
Hva er det siste du har lest, sett eller hørt?
Jeg besøkte University of Virginia sitt nye stykke "Momentum" på Barbican's Curve-galleriet nylig. Den består av en serie med 12 mekaniske lyspendler som svinger jevnt i det mørke rommet. Effekten var veldig kontemplativ, og for meg i det minste litt skummel på grunn av den unaturlige oppførselen til disse langsomt bevegelige søkelysene.
Hva blir det neste?
Jeg snakker med et par kuratorer om utstilling av Bipolar, og i mellomtiden fortsetter jeg å utforske nye måter å representere kroppen på gjennom interaktivitet. Jeg jobber med flere prosjekter for øyeblikket, hvorav et par kommer til å slippe snart, så hold øye med.
