Šis superdators mēģinās atrast informāciju vietnē Reddit

Vai iespējams, ka mašīnu inteliģences veidošanas noslēpums slēpjas nebeidzamu stundu pavadīšanā, lasot Reddit?





Tas ir viens pētnieku grupas jautājums OpenAI , bezpeļņas organizācija, kuru atbalsta vairāki Silīcija ielejas spīdekļi, cer atbildēt ar jauna veida superdatoru, ko izstrādājis mikroshēmu ražotājs Nvidia. Pētnieki arī apmāca robotus mazgāt traukus, eksperimentējot, un viņi veido algoritmus, kas spēj iemācīties spēlēt dažādas datorspēles.

Jaunā mašīna, ko sauc par DGX-1, ir optimizēta mašīnmācības formai, kas pazīstama kā dziļa mācīšanās, kas ietver datu padevi lielam rupji simulētu neironu tīklam un pēdējos gados ir devusi lielus panākumus mākslīgā intelekta jomā. DGX-1 ļaus AI pētniekiem ātrāk apmācīt dziļās apmācības sistēmas, izmantojot vairāk datu. Aptuvens salīdzinājums: aprēķini, kas parastā datorā aizņemtu 250 stundas, DGX-1 aizņem apmēram 10 stundas.

Nvidia izpilddirektors Jen-Hsun Huang piegādā pirmo DGX-1 Elona Muska OpenAI.



OpenAI veiktspējas palielinājums, kas panākts ar jauno aparatūru, vistiešākajā veidā ir redzams valodas izpratnē. OpenAI pētnieki ievada ziņojumu pavedienus no populārās vietnes Reddit uz algoritmiem, kas veido varbūtisku sarunas izpratni. Ja tiks sniegts pietiekami daudz piemēru, pamatā esošais valodas modelis būs pietiekami labs, lai pati sarunātos, cer pētnieki. Un aparatūra ļaus modelī ievadīt daudz vairāk teksta fragmentu un izmantot problēmas risināšanai lielāku skaitļošanas jaudu.

Andrejs Karpatis , OpenAI pētnieks, saka, ka mūsdienu mašīnmācīšanās paņēmieni mēdz kļūt gudrāki, kad tie kļūst arvien plašāki. Padziļināta apmācība ir ļoti īpaša modeļu klase, jo, palielinot modeļu mērogu, tie vienmēr darbojas labāk, Nvidia šodien publicētajā videoklipā saka Karpatija.

Valoda joprojām ir ļoti sarežģīta mākslīgā intelekta problēma, taču pēdējos gados pētnieki ir guvuši panākumus, pielietojot padziļinātu mācīšanos problēmai (skatiet AI valodas problēmu). Piemēram, Google pētnieki ievadīja filmu dialogu padziļinātās apmācības sistēmai, kas sākotnēji bija paredzēta tulkošanai un pēc tam parādīja ka tas varētu izcili labi atbildēt uz dažiem jautājumiem.



OpenAI pētnieki arī plāno izpētīt, vai robots varētu iemācīties lietot valodu, mijiedarbojoties ar cilvēkiem un reālo pasauli. Tomēr šis pētījums ir agrīnā stadijā, un būs vieglāk paplašināt darbu, kas saistīts ar Reddit. Karpathy saka, ka modeļi, kas apmācīti, izmantojot Reddit datus, var pāriet no mēnešiem ilgu sarunu līdz gadiem, pateicoties jaunajai aparatūrai.

Nvidia, kas ražo grafikas apstrādes vienības spēlēm, ir guvusi labumu no dziļās mācīšanās uzplaukuma, jo tā aparatūra ir labi piemērota nepieciešamajiem paralēlajiem aprēķiniem. Pēdējos gados uzņēmums ir centies izmantot šo priekšrocību, un DGX-1, kas izstrādāts par aptuveni 2 miljardu ASV dolāru izmaksām, būtībā ir grafisko mikroshēmu banka, kas optimizēta dziļai apmācībai. Mikroshēmas var apstrādāt datus ļoti ātri (aptuveni 170 teraflopi jeb miljards aritmētisko aprēķinu sekundē) un var vieglāk koplietot datus.

Ķīnas interneta uzņēmuma Baidu galvenais zinātnieks Endrjū Ngs ir rūpīgi apskatījis DGX-1, kuru Baidu plāno izmantot. Tā sniegtās iespējas ļaus mums izmēģināt jaunus veidus, kā mērogot mūsu apmācības procesu, saka Ng. Tas ļaus mums apmācīt modeļus lielākām datu kopām, kas, mūsuprāt, noved pie progresa AI.



OpenAI ir iesaistīts virknē progresīvu AI pētījumu. Papildus dziļai apmācībai tās pētnieki ir vērsti uz tādu algoritmu izstrādi, kas spēj mācīties, izmantojot plašu izmēģinājumu un kļūdu metodi, kas ir pētniecības joma, kas pazīstama kā pastiprināšanas mācīšanās.

OpenAI cer izmantot pastiprināšanas mācīšanos, lai izveidotu robotus, kas spēj veikt noderīgus darbus mājās, lai gan tas var izrādīties laikietilpīgs izaicinājums (skatiet sadaļu This Is the Robot Maid Is the Robot Maid Is Funding and The Robot You Want Most Want is tālu no realitātes ).

OpenAI pētnieki arī pēta veidus, kā AI algoritmi mācīties daudz efektīvāk, ģenerējot savus modeļus vai teorijas par datu kopas nozīmi. Algoritms var iemācīties spēlēt dažādas datorspēles, piemēram, nosakot, ka monētu kolekcionēšana parasti palīdz palielināt rezultātu.



Iļja Sutskever , OpenAI pētniecības direktors un ievērojams AI darbinieks, saka, ka darbs šajā jomā galu galā varētu radīt labākus algoritmus, kas var efektīvāk mācīties. Kad visi šie uzlabojumi ir veikti, vajadzētu būt iespējai izveidot aģentus, kas var sasniegt sarežģītākus mērķus, izmantojot daudz mazāku pieredzi, viņš saka.

OpenAI tika dibināta 2015. gadā ar 1 miljarda dolāru finansējumu no tehnoloģiju nozares VIP personām, tostarp Elons Masks, Tesla un SpaceX izpilddirektors un Sems Altmans, Y Combinator priekšsēdētājs. Bezpeļņas organizācijas mērķis ir veikt atklātu AI izpēti un palīdzēt nodrošināt, ka AI sniedz labumu cilvēcei.

Jen-Hsun Huang, Nvidia izpilddirektors, saka, ka lēmums nodot pirmo DGX-1 OpenAI atspoguļo ticību OpenAI mērķiem. Nvidia stratēģija ir demokratizēt AI, intervijā sacīja Huangs. Mēs vēlētos, lai šī tehnoloģija, lai cik tā ir spēcīga, virzītos sabiedrībai labvēlīgā virzienā.

paslēpties