211service.com
Yahoo Labs algoritms identificē radošumu 6 sekunžu Vine videoklipos
2013. gada janvārī video koplietošanas pakalpojums Vine pēkšņi iekļuva kibertelpā. Pakalpojums, kas pieder Twitter, bija unikāls, jo lietotājiem bija atļauts ierakstīt un kopīgot videoklipus, kas nebija garāki par sešām sekundēm. Taču dažu mēnešu laikā tā bija kļuvusi par populārāko video koplietošanas lietojumprogrammu tīmeklī un visvairāk lejupielādēto bezmaksas lietotni Apple veikalā.
Laika ierobežojumam ir bijusi interesanta ietekme uz radošo procesu: tas ir licis lietotājiem pastāstīt savus stāstus tikai sešās sekundēs. Tas savukārt ir novedis pie pilnīgi jauna filmu veidošanas žanra, kam tagad ir sava sešu otro filmu veidošanas kategorija Tribekas filmu festivālā Ņujorkā.
Sešu sekunžu videoklipu neparastie panākumi piedāvā dīvainu iespēju. Tā kā videoklipi ir tik īsi, tos ir samērā viegli analizēt, izmantojot mašīnredzes algoritmus un audio analīzes metodes. Un tas rada interesantu jautājumu. Vai šīs automatizētās metodes var atšķirt sešu sekunžu videoklipus, kurus cilvēki uzskata par radošiem, un tiem, kas nav radoši.
Šodien mēs saņemam atbildi, pateicoties Mirjamai Redi darbam Yahoo Labs Barselonā, Spānijā, un dažiem draugiem, kuri ir izmantojuši pūļa avotu metodes un mašīnu algoritmus, lai analizētu aptuveni 4000 sešu sekunžu video no Vine straumēšanas līnijas. Viņu rezultāti liecina, ka mašīnas var veikt diezgan labu darbu, lai atšķirtu radošu un neradošu saturu — vismaz sešu sekunžu žanrā.
Komanda sāka ar datu kopu, kas tika apkopota, izvēloties 1000 videoklipus, kas jau bija izcelti kā radoši. Viņi atlasīja vēl 200 videoklipus no tiešsaistes rakstiem par Vine radošumu un izpētīja šī satura autoru izveidoto saturu, lai atrastu vēl 2300 videoklipus. Visbeidzot viņi pēc nejaušības principa izvēlējās vēl 500 video no Vine racionalizācijas.
Nākamais uzdevums bija noteikt, kuri no šiem video bija radoši un kuri neradoši. Lai to noskaidrotu, viņi lūdza aptuveni 300 brīvprātīgajiem, kas piesaistīti kolektīvam, aplūkot videoklipus un atbildēt uz jautājumu, vai šis video ir radošs? iespējamās atbildes ir pozitīvas, negatīvas vai nezinu. Katru videoklipu novērtēja pieci dažādi brīvprātīgie.
Šie darbinieki sniedza pārsteidzoši konsekventus rezultātus. Viņi bija 100% vienisprātis par 48% videoklipu. Citiem vārdiem sakot, visi pieci vērtētāji gandrīz pusei videoklipu piešķīra vienādu punktu skaitu. No tiem viņi vienojās, ka 25 procenti bija radoši. Lai to aplūkotu perspektīvā, brīvprātīgie atzina tikai 1,9 procentus no 500 nejauši izvēlētiem videoklipiem kā radošus, tādējādi radot fona līmeni.
Pēc tam viņi analizēja katru videoklipu ar dažādiem algoritmiem. Piemēram, viņi meklēja kompozīcijas iezīmes, piemēram, trešdaļu likumu un seklu lauka dziļumu. Viņi izmantoja algoritmu video ainu satura analīzei, kas pēta attēla kontūras un izkārtojumu. Viņi arī meklēja jebkādus pierādījumus tam, ka videoklipi bija apturētas kustības animācijas vai paredzēti, lai darbotos šķietami bezgalīgā ciklā, meklējot līdzības starp pirmo un pēdējo kadru. Un viņi novērtēja katra videoklipa novitāti, salīdzinot tā īpašības ar nejauši izvēlētu citu videoklipu grupu.
Pēc tam viņi meklēja korelācijas starp mašīnu algoritmu atrastajām funkcijām un video, ko brīvprātīgie identificēja kā radošus. Izrādās, ka ainas saturs visspēcīgāk korelē ar radošumu, kam seko kompozīcijas iezīmes un video jaunums.
Pēdējā posmā viņi apmācīja mašīnmācīšanās algoritmu, lai izmantotu šīs funkcijas, lai atrastu radošus videoklipus datu kopā, ko tas iepriekš nebija redzējis. Šis algoritms 80 % gadījumu varēja pareizi klasificēt videoklipus kā radošus vai neradošus.
Tas ir interesants rezultāts, kas paver iespēju automātiski filtrēt Vine tiešraides straumi visradošākajam saturam. Tas ļauj mums izpētīt audiovizuālo radošumu smalkā līmenī, palīdzot mums saprast, kas tieši veido radošumu mikrovideoklipos, saka Redi un citi.
Un, ja algoritms spēj precīzi noteikt radošumu, kāpēc gan dators nevarētu ģenerēt radošu saturu? Faktiski atšķirības starp cilvēka radītu radošumu un datora radītu radošumu kādu dienu var būt interesants Tjūringa testa stila vingrinājums.
Atsauce: arxiv.org/abs/1411.4080