AI aģenti mācās strādāt kopā, cīnoties ar virtuālajām cūkām

Strīdēties ar cūku — pat virtuālu — ir daudz vienkāršāk, ja palīdzat kādam draugam. Tas šķiet skaidrs no Microsoft pētnieku rīkotā konkursa, lai pārbaudītu, kā mākslīgi inteliģenti aģenti varētu sadarboties, lai atrisinātu sarežģītas problēmas. Cits jautājums ir, kā vislabāk sadarboties ar savu cūku strīdīgo draugu.

Konkurss pievēršas mākslīgā intelekta jomai, kurai līdz šim ir bijusi salīdzinoši maza uzmanība. AI pētnieki bieži izstrādā programmatūru, kas spēj veikt konkrētu cilvēka uzdevumu, piemēram, spēlēt šahu vai Go, un pēc tam mēra to atbilstoši tās spējai uzvarēt spēlētāju. Tomēr liela daļa cilvēka intelekta ir saistīta ar komunikāciju, sociālo inteliģenci un prāta teoriju vai spēju paredzēt un interpretēt cita saprātīga aģenta nodomus.

Projekts arī norāda uz to, kā cilvēki un AI sistēmas galu galā varētu strādāt kopā, lai sasniegtu vairāk nekā to daļu summu. Tā ir daļa no plašākas tendences pārdomāt AI kā paplašinātu intelektu, nevis mākslīgo intelektu. Orens Etcioni , Alena Mākslīgā intelekta institūta izpilddirektors.

Microsoft konkursā AI aģenti strādāja kopā Project Malmo, beztermiņa datorspēles Minecraft īpašā versijā. Microsoft pētnieks izstrādāja šo vidi, lai būtu viegli importēt un pārbaudīt dažādas AI metodes. Būs vajadzīgs daudz turpmāks progress, lai AI aģenti varētu apvienoties noderīgos veidos vai palīdzēt cilvēkiem, taču konkurss piedāvā veidu, kā pārbaudīt dažas agrīnas idejas.

Sacensībām aģenti varēja mēģināt savaldīt un noķert nevaldāmu virtuālo cūku vai nu paši, vai sadarbojoties ar citu AI aģentu, katru reizi nopelnot punktus.

Labākās komandas Malmo Collaborative AI izaicinājums izmantoja visprogresīvākās mašīnmācības pieejas, piemēram, dziļo mācīšanos, lai apmācītu savus aģentus strādāt kopā. Tas bija saistīts ar lielu datu apjomu. Taču daži dalībnieki izmantoja arī vecākas, mazāk modernas pieejas, kas sniedz virtuālajam aģentam šifrētas zināšanas un izpratni.

Konkursa uzvarētāji, komanda no Oksfordas Universitātes Apvienotajā Karalistē, izmantoja pastiprinošu mācīšanos — sava veida mašīnmācīšanos, ko iedvesmojis veids, kā dzīvnieki mācās eksperimentējot (skatiet sadaļu 10 izrāvienu tehnoloģijas: pastiprināšanas mācīšanās). Viņu aģenti piedzīvoja pozitīvu pastiprinājumu ikreiz, kad viņi veiksmīgi strādāja kopā, lai satvertu cūku.

Katja Hofmane , Microsoft Malmo projekta vadošais pētnieks, atzīmē, ka daudzas komandas apvienoja dažādas pieejas. Viņa piebilst, ka nebija neviena veida pieejas, kas būtu uzskatāma par uzvarētāju, sakot, ka, visticamāk, hibrīdās pieejas izrādīsies īpaši daudzsološi virzieni turpmākajiem pētījumiem.

Cūku cīņas izaicinājums ir iedvesmots no domu eksperimenta, kas pazīstams kā Stirnu medības , kurā tiek pētīti jēdzieni spēļu teorijā, kas ir matemātikas nozare, kas saistīta ar sadarbības un sarunu stratēģijām. Ideja ir tāda, ka diviem medniekiem ir jāizlemj, vai nomedīt zaķi vienam vai apvienoties, lai iegūtu lielāku balvu – briedi.

Konkursā iesaistītās labākās komandas, kas tiek vērtētas pēc sasniegtā rezultāta, kā arī viņu darba novitātes, saņems $ 20 000 pētniecības stipendiju un vietu Microsoft Research AI vasaras skolā.

Pētera svētdienas Vašingtonas Universitātes profesors, kurš pēta mašīnmācīšanos un datu ieguvi, saka, ka mākslīgā intelekta programmatūras apmācībai simulētā vidē ir trūkumi. Viņš saka, ka programmatūra var kļūt pārāk optimizēta konkrētajai videi un tāpēc mazāk noderīga reālajā pasaulē, lai gan sarežģītākas simulētās pasaules to sāk mainīt.

Domingoss piebilst, ka sadarbība starp cilvēkiem ir tik sarežģīta un smalka, ka ir grūti iedomāties, ka Microsoft projekts radīs patiesi noderīgas pieejas. Tomēr, neskatoties uz zināmu skepsi, projekts viņu iedrošina.

Šajā jomā vēl ir sākums, un Minecraft ir vide ar daudzām iespējām, saka Domingoss. [Tas ir] bagātāks par lietām, kas ir izmantotas iepriekš, tāpēc šķiet, ka ir vērts mēģināt.

paslēpties