Vai automatizētie redakcijas rīki var palīdzēt sarūkošajam Vikipēdijas brīvprātīgo darbaspēkam?

Rezultātā ir daudz augstas kvalitātes rakstu par daudzām tēmām vairāk nekā 200 valodās. Bet ir arī nekvalitatīvi un apšaubāmas patiesības raksti.

Tas rada svarīgu jautājumu vietnes apmeklētājiem: cik uzticams ir dots raksts Vikipēdijā?

Šodien mēs saņemam atbildi, pateicoties Xiangju Qin un Pádraig Cunningham darbam Dublinas Universitātes koledžā Īrijā. Šie puiši ir izstrādājuši algoritmu, kas novērtē Vikipēdijas lapu kvalitāti, pamatojoties uz iesaistīto redaktoru autoritatitāti un viņu veikto labojumu ilgmūžību.

Hipotēze ir tāda, ka lapas ar nozīmīgu autoritatīvu autoru ieguldījumu, visticamāk, būs augstas kvalitātes lapas, viņi saka. Ņemot vērā šo informāciju, Vikipēdijas apmeklētājiem vajadzētu daudz precīzāk spriest par jebkura raksta kvalitāti.

Dažādas grupas ir pētījušas Vikipēdijas rakstu kvalitāti un to, kā to izmērīt pagātnē. Šī darba novitāte ir esošo pasākumu apvienošana jaunā veidā.

Qin un Cunningham sāk ar standarta veidu, kā izmērīt labojuma ilgmūžību. Ideja ir tāda, ka augstas kvalitātes labojums, visticamāk, izturēs turpmāko pārskatīšanu. Viņi to aprēķināja, apvienojot konkrētā autora veiktā rediģēšanas lielumu un to, cik ilgi šis labojums turpinās pēc citiem labojumiem.

Vandālisms ir izplatīta problēma Vikipēdijā. Lai to apietu, Cjins un Kaningems ignorē visus anonīmos ieguldījumus un veic arī vidējo kvalitātes rādītāju, kas samazina ļaunprātīgu labojumu ietekmi.

Pēc tam viņi novērtē katra redaktora autoritāti. Wikipedia ir labi pazīstama ar to, ka tajā ir salīdzinoši neliels skaits specializētu redaktoru, kuriem ir būtiska loma sabiedrībā. Šie cilvēki palīdz uzturēt dažādus redakcionālos standartus un izplatīt šīs zināšanas visā kopienā.

Šajā kopienā Cjins un Kaningems pieņem, ka pastāv saikne starp diviem redaktoriem, ja viņi abi ir raksta līdzautori. Tāpēc neizbēgami pieredzējušāki redaktori parasti ir labāk savienoti tīklā.

Ir dažādi veidi, kā novērtēt autoritāti. Qin un Cunningham aplūko citu redaktoru skaitu, ar kuriem konkrētais redaktors ir saistīts. Viņi novērtē īsāko ceļu proporciju tīklā, kas iet caur noteiktu redaktoru. Un viņi izmanto iteratīvu Pagerank tipa algoritmu, lai novērtētu autoritāti. (Pagerank ir Google algoritms, kurā tīmekļa lapa tiek uzskatīta par svarīgu, ja uz to norāda citas svarīgas tīmekļa lapas.)

Visbeidzot, Qin un Cunningham apvieno šos ilgmūžības un autoritātes rādītājus, lai iegūtu izstrādājuma kvalitātes rādītāju.

Lai pārbaudītu sava novērtējuma efektivitāti, viņi izmantoja savu algoritmu, lai novērtētu vairāk nekā 9000 rakstu kvalitāti, kurus jau ir novērtējuši Wikipedia redaktori. Viņi saka, ka labojuma ilgmūžība jau pati par sevi ir labs raksta kvalitātes rādītājs. Tomēr, ņemot vērā redaktoru autoritāti, vērtējums kopumā uzlabojas.

Viņi secina, ka raksti ar nozīmīgu autoritatīvu autoru ieguldījumu, visticamāk, būs augstas kvalitātes, un augstas kvalitātes raksti parasti ietver lielāku saziņu un mijiedarbību starp līdzstrādniekiem.

Protams, ir daži ierobežojumi. Izplatīts rediģēšanas veids, kas pazīstams kā atsaukšana, maina rakstu uz tā iepriekšējo versiju, tādējādi pilnībā noņemot labojumu. To bieži izmanto, lai atbrīvotos no vandālisma. Pašlaik mums nav īpašas attieksmes pret atsauktajiem labojumiem, kas neievieš lapā jaunu saturu, atzīst Cjins un Kaningems. Tātad nākotnē ir darāms darbs.

Tomēr jaunā pieeja varētu būt noderīgs rīks Wikipedia redaktora bruņojumā. Qin un Cunningham norāda, ka tas varētu palīdzēt identificēt jaunus izstrādājumus, kuriem ir salīdzinoši laba kvalitāte, kā arī identificēt esošos izstrādājumus, kuru kvalitāte ir īpaši zema un tādēļ tiem nepieciešama papildu uzmanība.

Tā kā Wikipedia brīvprātīgā darbaspēka skaits ir labi dokumentēts, automatizētie rediģēšanas rīki nepārprotami ir vērtīgi, lai samazinātu atlikušo cilvēku darba slodzi. Plašāks jautājums ir par to, cik labi šie rīki var kļūt un kā tie būtu jāizmanto šādos pūļa centienos.

Atsauce: arxiv.org/abs/1206.2517 : Vikipēdijas lapu kvalitātes novērtēšana, izmantojot rediģēšanas ilgmūžību un līdzstrādnieku centralitāti

paslēpties