Hver dag laster brukere opp mer enn 350 millioner bilder til Facebook. Denne tilstrømningen av bilder har fått analytikere til å anslå at 10 prosent av verdens 3, 5 billioner bilder er tatt det siste året. Alle dataene som oversvømmer nettet, betyr at hvis du leter etter et bestemt bilde eller objekt - hvordan ser for eksempel en oransje tabby-katt ut - blir du positivt oversvømmet av søkeresultater.
Forrige måned avduket forskere ved University of California, Berkeley ny programvare, AverageExplorer, som lar brukerne se det "gjennomsnittlige" bildet som representerer det de leter etter. I stedet for et bilde verdt tusen ord, er det et bilde verdt tusen - eller flere - bilder.
"Når du går inn på et Google-bildesøk, vil du sile gjennom sider og sider med bilder, " forklarer Jun-Yan Zhu, UC Berkeley-forskerstudent og hovedforfatter av papiret, presentert på årets internasjonale konferanse og utstilling om datagrafikk og interaktive teknikker i Vancouver. “Det er stort og vanskelig å oppsummere; du kan ikke få en følelse av hva som skjer. ”
For det første tilbudet samlet Zhu og teamet hans bilder gjennom Flickr-, Google- og Bing-bildesøk. Programvaren har lite strøm til å kjøre på et gjennomsnittlig skrivebord og kan knaske rundt 10.000 bilder samtidig.
Brukere avgrense søket på et par forskjellige måter. De kan tegne og fargelegge en form, lik tegning i Adobe Photoshop eller Illustrator, for å skjerpe sitt gjennomsnittsbilde-resultat. Hvis du for eksempel farger bakgrunnen til et gjennomsnittsbilde av Eiffeltårnet, vil du selv velge gjennomsnittsbildet for bare å ta bilder tatt om natten. Eller du kan tegne vinklede linjer for å kontrollere orienteringen til en sommerfugl i komposittet.
Ved å foredle fargene i et AverageExplorer-bilde av Sukenes bro, kan du endre scenen fra dag til skumring til natt. (Høflighet UC Berkeley) Når et gjennomsnittsbilde er opprettet, en prosess som kan ta opptil et minutt, kan brukerne avgrense resultatet ytterligere ved å bruke det teamet kaller Utforskermodus. I denne modusen vil du klikke på en bestemt del av et bilde - si kattens nese - avsløre andre vanlige alternativer eller forbedringer for det stedet - kanskje blå eller svarte neser, eller de som er avrundet i stedet for kantete. I en demovideo, for eksempel, foredlet teamet et bilde av barn på julenissens fang, ved å velge bare bilder der julenissen har ett barn på hver arm.
Hvor systemet vil bli spesielt kraftig, sier Zhu, er som et verktøy for å trene datavisjonsalgoritmer, som de som er ansatt av Google Goggles eller Amazon Firefly-apper, som kan identifisere hva et kamera peker på. "Innenfor datamaskinvisjonen bruker folk mye penger på å kommentere objekter, " forklarer han. “Nå kan du bruke merknaden på gjennomsnittsbildet. Tanken er at du bare trenger å jobbe med ett bilde for å forplante alle bildene i et datasett. ”
Ved å foredle modusene for et søkeresultat, kan forskere finne spesifikke katteraser, inkludert (fra venstre til høyre) Ragdoll, Siamese, Maine Coon og Sphinx. (Høflighet UC Berkeley) Å lage kunstverk er den lavthengende frukten for AverageExplorer. Teamet hentet inspirasjon fra artister fra nye medier som Jason Salavon, som møysommelig har laget gjennomsnittlige fotografier for hånd. Det kan også brukes til å lage en Facebook-plugin som lar brukere tulle med gjennomsnittlig bilde av seg selv.
Forskernes ambisjoner er enda mer brede og virkningsfulle. Sosiologer kunne bruke systemet til å oppdage og undersøke sosiale trender; for eksempel et gjennomsnittsbilde kan bevise at brudene ofte står til høyre for brudgommen i bryllupsportretter. AverageExplorer kan også være et nyttig verktøy for medieanalytikere som prøver å dissekere tv-dekning - endrer Stephen Colberts holdning seg når han snakker om George W. Bush kontra Barack Obama?
Ved å la brukerne samhandle intuitivt med visuelle data i stedet for å kjempe for å legge inn riktig streng med nøkkelord, vil brukerne kunne bygge bro over det Zhus rådgiver og gjennomsnittskaper for AverageExplorer, Alexei Efros, kaller "språkflaskehalsen."
Teamet ser for seg en pakke med tilpassede verktøy designet for spesifikke, vanskelig å artikulere oppgaver. En shoppingapplikasjon, for eksempel, vil tillate en bruker å edderkopp på nettet etter et par hæler med den nøyaktige fargen, hælformen og høyden som hun er ute etter. Zhu ser for seg et verktøy som integreres med politiets skisseartiklers arbeidsflyt, slik at et vitne kan søke i ansiktsdatabaser for funksjoner som matcher gjerningsmannen og konstruere et sammensatt portrett.
En grunnleggende versjon av AverageExplorer kommer ut i høst.
