Nvidia tikko atviegloja viedāku tērzēšanas robotu un viltus ziņu izveidi

Balss palīgierīces attēls blakus skaņas viļņiem Tehnikas kundze; oriģinālais attēls: HARMON KARDON

Mākslīgais intelekts pēdējo desmit gadu laikā ir guvis iespaidīgus panākumus, taču mašīnas joprojām vāji saprot valodu. Vienkārši mēģiniet iesaistīt Alexa mazliet asprātīgā izjokošanā.

Uzņēmums Nvidia, kas ražo datoru mikroshēmas, kas darbina daudzus AI algoritmus, domā, ka tas drīz mainīsies, un vēlas gūt labumu no paredzamā sprādziena.

Programmatūra, ko izlaiž mikroshēmu ražotājs, atvieglo AI programmu izveidi savā aparatūrā, kas spēj graciozāk izmantot valodu. Jaunais kods varētu paātrināt jaunu valodu algoritmu izstrādi un padarīt tērzēšanas robotus un balss palīgus ātrākus un gudrākus.

Nvidia jau ražo vispopulārākās mikroshēmas, lai apmācītu padziļinātas mācīšanās AI modeļus, kas ir lietpratīgi tādos uzdevumos kā attēlu klasifikācija. Tomēr tradicionāli ir bijis daudz grūtāk piemērot statistikas mašīnmācības metodes, piemēram, dziļu mācīšanos rakstītam vai runātam vārdam, jo ​​valoda ir tik neviennozīmīga un sarežģīta.

Bet pēdējā laikā ir noticis ievērojams progress. Divas jaunas Google padziļinātas valodas apguves pieejas, kas pazīstamas kā Transformer un BERT, ir izrādījušās īpaši prasmīgas tulkošanā starp valodām, atbildē uz jautājumiem par teksta daļu un pat reālistiska izskata teksta radīšanā. Tas ir izraisījis akadēmisko un nozares interesi par valodu pilnveidošanu, izmantojot mašīnmācīšanos.

Transformatora un BERT kombinācijai ir bijusi milzīga ietekme, saka Aleksandrs Rašs , Hārvardas universitātes profesors, kurš specializējas mākslīgā intelekta apakšnozarē, kas pazīstama kā dabiskās valodas apstrāde (NLP). Tas būtībā ir vismodernākais katrā etalonā un ļauj studentiem ražot pasaules klases modeļus piecās koda rindās.

Nvidia ir lietpratīgi meklē jaunākās AI pētniecības tendences. Ja jaunākā nojausma izrādīsies pareiza, balss palīgi var pāriet no vienkāršas reaģēšanas uz komandām, lai saskaņotu virkni vairāk vārdu. Tikmēr tērzēšanas roboti var kļūt mazāk vāji, savukārt automātiskās pabeigšanas funkcija, kas daudzās programmās un lietotnēs ir atrodama, var sākt ieteikt veselas rindkopas, nevis tikai dažus nākamos vārdus.

Mums ir liels pieprasījums pēc valodu modelēšanas, saka Braiens Katanzaro , Nvidia lietišķās dziļās apmācības viceprezidents. Un, ja paskatās uz valodas progresa tempu, mums šķiet, ka tā ir acīmredzama vieta, kur veikt ieguldījumus.

Nvidia izstrādāja savu programmatūru, optimizējot daudzas procesa daļas, ko izmanto, lai apmācītu valodu modeļus savos GPU. Tas paātrināja mākslīgā intelekta modeļu apmācību (no vairākām dienām līdz mazāk nekā stundai), paātrināja apmācīto valodu modeļu veiktspēju (no 40 milisekundēm līdz nedaudz vairāk par 2 milisekundēm) un ļāva apmācīt daudz lielākus valodu modeļus (Nvidia valodas modelis). , saukts Megatron, ir daudzkārt lielāks nekā jebkas iepriekš ražots, ar 8,6 miljardiem parametru).

Automātiskā pabeigšana bez ļaunuma

Tomēr valodas progresam var būt arī tumšāka puse. Viedākus algoritmus varētu izmantot, lai masveidā ražotu pārliecinošākus, pielāgotākus viltus pārskatus, sociālo mediju ziņas un ziņu stāstus. Citas pētījumu grupas ir parādījušas, cik spēcīgi valodas modeļi var iegūt reālistisku tekstu pēc tam, kad ir uzņemts liels daudzums rakstīšanas no interneta.

Nvidia ir vienkāršs plāns, lai novērstu iespējamu ļaunprātīgu izmantošanu: tā neizlaidīs lielāko valodas modeli, ko tā ir izstrādājusi, un plāno paļauties uz pētniekiem, kas rūpīgi izmantos savus rīkus. Mēs izlaižam kodu, kas parāda, kā izmantot GPU, lai apmācītu šos lielos modeļus, saka Catanzaro. Mēs uzskatām, ka kopiena izmantos šo kodu atbildīgi, taču ņemiet vērā, ka šāda izmēra apmācības modeļiem ir nepieciešama nopietna skaitļošanas jauda, ​​kas padara to nepieejamu lielākajai daļai cilvēku.

Pat ja progress turpināsies strauji, visticamāk, paies ilgs laiks, līdz mašīnas patiešām varēs ar mums sarunāties. Mašīnām valodu ir maldinoši grūti saprast, daļēji tās kompozīcijas sarežģītības dēļ: vārdus var pārkārtot, lai atbrīvotu bezgalīgu nozīmi. Lai saprastu frāzes nozīmi, bieži vien ir nepieciešama arī kāda veselā saprāta izpratne par pasauli — kaut kas tāds, kas datoriem nav.

Mēs redzam NLP iespēju renesansi, saka Orens Etcioni, uzņēmuma izpilddirektors. Allena Mākslīgā intelekta institūts (Ai2) , bezpeļņas organizācija Sietlā, kas nodarbojas ar visprogresīvāko mākslīgā intelekta pētniecību. Viņš saka, ka tas radīs labākus tērzēšanas robotus un balss palīgus, lai gan viņi cietīs no veselā saprāta trūkuma. Balss asistents, kas ir tikpat noderīgs kā prasmīgs viesnīcas konsjeržs, joprojām atrodas aiz apvāršņa, saka Etcioni.

Ai2 nesen uzsāka rīku, ko sauc Grovers , kas izmanto NLP uzlabojumus, lai uztvertu tekstu, kuru, šķiet, ir izkausējis AI. Etzioni norāda, ka robotprogrammatūra jau tagad maldina cilvēkus Facebook un Twitter. Viņš saka, ka automātiski ģenerēts viltus teksts jau ir šeit, un, visticamāk, tas pieaugs eksponenciāli.

paslēpties