Psiholoģijas koncepcija palīdz AI labāk orientēties mūsu pasaulē

Kategorija: Mākslīgais intelekts Ievietots 17. jūlijs

Koncepts: Skatoties uz krēslu, neatkarīgi no tā formas un krāsas, mēs zinām, ka varam uz tā sēdēt. Kad zivs atrodas ūdenī, neatkarīgi no tās atrašanās vietas, tā zina, ka prot peldēt. Tas ir pazīstams kā pieejamības teorija, terminu, ko ieviesa psihologs Džeimss Dž. Gibsons. Tajā teikts, ka saprātīgas būtnes, skatoties uz pasauli, uztver ne tikai objektus un to attiecības, bet arī to attiecības iespējas . Citiem vārdiem sakot, krēsls sniedz iespēju sēdēt. Ūdens sniedz iespēju peldēties. Teorija daļēji varētu izskaidrot, kāpēc dzīvnieku inteliģence ir tik vispārināma — mēs bieži vien uzreiz zinām, kā sazināties ar jauniem objektiem, jo ​​apzināmies to iespējas.

Ideja: DeepMind pētnieki tagad izmanto šo koncepciju, lai izstrādātu jauna pieeja pastiprināšanas mācībām . Tipiskā pastiprināšanas mācībā aģents mācās, izmantojot izmēģinājumus un kļūdas, sākot ar pieņēmumu, ka jebkura darbība ir iespējama. Piemēram, robots, kas mācās pārvietoties no punkta A uz punktu B, pieņems, ka tas var pārvietoties pa sienām vai mēbelēm, līdz atkārtotas kļūmes liecina par pretējo. Ideja ir tāda, ka tad, ja robotam vispirms iemācītu savas vides iespējas, tas nekavējoties novērstu ievērojamu daļu neveiksmīgo izmēģinājumu, kas tam būtu jāveic. Tas padarītu mācību procesu efektīvāku un palīdzētu to vispārināt dažādās vidēs.

Eksperimenti: Pētnieki izveidoja vienkāršu virtuālo scenāriju. Viņi ievietoja virtuālo aģentu 2D vidē ar sienu pa vidu un lika aģentam izpētīt tā kustību diapazonu, līdz tas bija uzzinājis, ko vide tam ļaus darīt — tās iespējas. Pēc tam pētnieki aģentam deva vienkāršu mērķu kopumu, kas jāsasniedz, pastiprinot mācīšanos, piemēram, pārvietojot noteiktu daudzumu pa labi vai pa kreisi. Viņi atklāja, ka salīdzinājumā ar aģentu, kurš nebija apguvis iespējas, tas izvairījās no jebkādām kustībām, kuru dēļ to kustības laikā varētu bloķēt siena, tādējādi nodrošinot to, lai efektīvāk sasniegtu savu mērķi.

Kāpēc tas ir svarīgi: Darbs joprojām ir agrīnā stadijā, tāpēc pētnieki izmantoja tikai vienkāršu vidi un primitīvus mērķus. Taču viņi cer, ka viņu sākotnējie eksperimenti palīdzēs likt teorētisku pamatu idejas paplašināšanai līdz daudz sarežģītākām darbībām. Nākotnē viņi redz šo pieeju, kas ļauj robotam ātri novērtēt, vai tas, teiksim, var ieliet šķidrumu krūzē. Izstrādājot vispārēju izpratni par to, kuri priekšmeti ļauj turēt šķidrumu un kuri nē, tai nevajadzēs atkārtoti palaist garām krūzi un liet šķidrumu pa visu galdu, lai uzzinātu, kā sasniegt savu mērķi.