211service.com
Šīs virtuālās robotu rokas kļūst gudrākas, apmācot viena otru
uz virtuālo robota roka ir iemācījusies atrisināt dažādas dažādas mīklas —kluču sakraušana, galda klāšana, šaha figūru kārtošana — bez pārmācības katram uzdevumam. Tas tika paveikts, spēlējot pret otru robota roku, kas tika apmācīta, lai sniegtu tai arvien grūtākus izaicinājumus.
Pašspēle: Izstrādājuši pētnieki plkst OpenAI , identiskās robotu rokas — Alise un Bobs — mācās, spēlējot spēli viens pret otru simulācijā bez cilvēka iejaukšanās. Roboti izmanto pastiprināšanas mācīšanos, paņēmienu, kurā AI tiek apmācīti, izmantojot izmēģinājumus un kļūdas, kā rīkoties dažādās situācijās, lai sasniegtu noteiktus mērķus. Spēle ietver objektu pārvietošanu uz virtuāla galda. Sakārtojot objektus konkrētos veidos, Alise mēģina uzstādīt mīklas, kuras Bobam ir grūti atrisināt. Bobs mēģina atrisināt Alises mīklas. Mācoties, Alise risina sarežģītākas mīklas, un Bobs tās risina labāk.
Pēc Alises uzstādīto bloku mīklu apmācības Bobs var vispārināt dažādus uzdevumus, tostarp galda klāšanu un šaha figūru kārtošanu.
Vairākuzdevumu veikšana: Padziļinātās apmācības modeļi parasti ir jāpārmāca starp uzdevumiem. Piemēram, AlphaZero (kas arī mācās, spēlējot spēles pret sevi) izmanto vienu algoritmu, lai iemācītos spēlēt šahu, shogi un Go, bet tikai vienu spēli vienlaikus. Šahu spēlējošais AlphaZero nevar spēlēt Go, un tas, kurš spēlē šahu, nevar spēlēt šogi. Liela neatrisināta problēma ir tādu iekārtu izveide, kas patiešām spēj veikt vairākus uzdevumus ceļš uz vispārīgāku AI .
AI dojo: Viena problēma ir tāda, ka AI apmācīšanai vairākuzdevumu veikšanai ir nepieciešams liels skaits piemēru. OpenAI no tā izvairās, apmācot Alisi ģenerēt piemērus Bobam, izmantojot vienu AI, lai apmācītu citu. Alise iemācījās izvirzīt mērķus, piemēram, uzbūvēt no blokiem torni, pēc tam to pacelt un līdzsvarot. Bobs iemācījās izmantot (virtuālās) vides īpašības, piemēram, berzi, lai satvertu un pagrieztu objektus.
Virtuālā realitāte: Pagaidām šī pieeja ir pārbaudīta tikai simulācijā, bet OpenAI un citur pētnieki arvien labāk pārsūta modeļus, kas apmācīti virtuālajā vidē uz fiziskām. Simulācija ļauj mākslīgajam intelektam īsā laikā apstrādāt lielas datu kopas, pirms tās tiek precīzi pielāgotas reālās pasaules iestatījumiem.
Kopējās ambīcijas: Pētnieki saka, ka viņu galvenais mērķis ir apmācīt robotu, lai tas atrisinātu jebkuru uzdevumu, ko cilvēks tam varētu lūgt. Tāpat kā GPT-3 — valodas modelis, kurā valodu var izmantot dažādos veidos, šīs robotu rokas ir daļa no OpenAI vispārējā ambīcijas izveidot daudzuzdevumu AI. Viena AI izmantošana cita apmācībai varētu būt tā galvenā sastāvdaļa.