Facebook je napravio A.I. Koja namjerno zaboravlja stvari

“Zdravo, HAL. Čujete li me, HAL?” rekao je astronaut Dave Bowman, očajnički pokušavajući obuzdati svoje emocije.

Sadržaj

  • O čemu razmišljamo kada razmišljamo o zaboravu
  • Ugradnja zaborava u A.I.

Uslijedila je stanka, a zatim je, monotonim bez emocija, računalo odgovorilo. “Potvrdno, Dave. čitam te.”

Preporučeni videozapisi

"Otvori vrata odjeljka za kapsule, HAL."

Još jedna duga stanka. Bio je HAL, svemoćni A.I. koji je kontrolirao Otkriće jedan letjelica, stvarno ga ignorirajući? Nemoguće, sigurno, pomisli Bowman. Svakog trenutka, HAL bi krenuo u akciju i poslušao -

"Žao mi je, Dave", nastavio je HAL. "Bojim se da to ne mogu."

"U čemu je problem?" upita Dave.

“Pa, vidiš, Dave. Zaboravio sam kako ih otvoriti.”

U redu, stvari nisu išle baš tako 2001: Odiseja u svemiru, ali šale se uglavnom pišu same od sebe. Uostalom, kada je riječ o umjetnoj inteligenciji, čini se da je dobro pamćenje jedna od preduvjeta koju istraživači žele ugraditi u svoje sustave. Nitko ne želi A.I. koja se oblikuje prema vrsti svakodnevne, neugledne inteligencije koja zaboravlja stvari. Pa zašto je onda

Facebook izgraditi zaboravni AI? I zašto ćemo, kao u onom starom vicu o konobaru i mušici u kupčevoj juhi, uskoro svi željeti jednog?

O čemu razmišljamo kada razmišljamo o zaboravu

Odgovor je, kako se ispostavilo, da mi čini želite nešto što je više poput svakodnevne, neupadljive inteligencije koja tu i tamo zaboravlja stvari. Ljudi zaboravljaju važne stvari poput godišnjica i novčanika te zatvaranja garaže prije odlaska na godišnji odmor. To je suboptimalno zaboravljanje. Ali također zaboravljamo dijelove informacija jer ih ne trebamo zadržavati, zaustavljajući ih kao dio detritus uhvaćen u hvataču hrane u odvodu sudopera prije nego što može proći kroz kratkoročno i dugoročno memorija.

Facebook AI

U poznati eksperiment, od ljudi se tražilo da točno prepoznaju američki peni iz zbirke slika koje prikazuju netočne penije. Iako su sudionici vjerojatno vidjeli i koristili novčiće svaki dan, pokazali su se iznenađujuće lošima u zadatku. Kao što su istraživači napisali: “Sve u svemu, rezultati su bili u skladu s idejom da vizualni detalji objekta, čak i vrlo poznati predmet, obično su dostupni iz sjećanja samo u onoj mjeri u kojoj su korisni u svakodnevnom životu život."

Iako nije tako jednostavno kao reći da se mozak može napuniti poput pohrane na tvrdom disku, sigurno postoje kratkoročni sjećanja za koja se čini da propadaju kada više nisu potrebna, dok druga prodiru u naš mozak i tamo žive bez najamnine. Primjer? Razmislite gdje ste spakirali božićne ukrase prošlih praznika. Zatim mentalno prošećite od recepcije do svoje sobe u zadnjem hotelu u kojem ste odsjeli, onom u kojem vjerojatno više nikada nećete odsjesti. Niti jedan podatak nije od životne važnosti za vašu dobrobit. Ipak, jedna informacija je potrebna, a druga nije. Vaš mozak nekako zna koju treba baciti u smeće.

Ovo je ideja iza Facebookovog novog A.I. projekt, nazvan Expire-Span. Kao umjetna inteligencija modeli se sve više primjenjuju na skupove podataka dugog oblika poput članaka i knjiga, računalni troškovi povezani s tim modelima rastu kako pokušavaju zapamtiti više informacija. Problem postaje još gorući kako ljudi prikupljaju sve više bogatih multimedijskih podataka o svojim životima.

"Mozak je vrlo složen sustav koji nije u potpunosti shvaćen, a postoji mnogo različitih vrsta pamćenja koje oblikuju ljudsko pamćenje."

"Kako količina sadržaja koji imamo raste, glavno pitanje je pohrana," Angela Fan, istraživač u Facebook AI Research Paris, rekao je za Digital Trends. “Na primjer, telefon ima ograničenu količinu memorije. Ovo je još veći problem u nosivim uređajima i drugim aplikacijama na uređaju, gdje razlozi privatnosti mogu značiti da ljudi strogo žele sadržaj pohranjen na svom uređaju, a ne na poslužitelju ili oblaku, s naglaskom na pohranu izazovi.”

Trenutni A.I. modeli imaju nešto poput pristupa Franka Sinatre sjećanjima — to jest da se sjećaju svega ili ničega. Ili pohranjuju sve informacije stvorene u svakom vremenskom koraku ili ih sve zaborave nakon unaprijed određenog vremena. Sainbayar Sukhbaatar, još jedan Facebook A.I. znanstvenik-istraživač, uspoređuje to sa savršenim sjećanjem svega što se dogodilo u prošlom tjednu, ali apsolutno ničega izvan toga.

Ugradnja zaborava u A.I.

Istraživači su ugradili "zaboravljanje" u A.I. modeli prije. Dugo kratkoročno pamćenje (LSTM) modeli, na primjer, dodali su mehanizam zaboravljanja ponavljajućim neuronskim mrežama (RNN), jednoj od temeljnih tehnologija koje pokreću strojno učenje. "RNN-ovi imaju unutarnju memoriju koja se sastoji od jednog vektora, tako da njegovo zaboravljanje znači prepisivanje novim informacijama", rekao je Sukhbaatar za Digital Trends.

Nasuprot tome, Expire-Span dodaje mehanizam zaboravljanja vanjskoj memoriji koja može sadržavati tisuće vektora. Nove informacije se promatraju, ali Expire-Span - čije ime podsjeća na vrstu naljepnica s rokom valjanosti koje se nalaze na bocama mlijeka - ima sposobnost odrediti koliko dugo te informacije trebaju ostati u memoriji. Ako se informacija ne smatra ključnom za budućnost, do te informacije može doći postupno propadanja, prije nego što se konačno iskorijeni iz A.I. memorije modela kako bi se napravilo mjesta za korisnije informacija.

Kako bi se to postiglo, model mora biti u stanju predvidjeti što jest, a što nije relevantno za određeno zadatku, prije dodjele točnog datuma isteka, nakon čega će informacije nestati iz A.I. sustav. Odbacivanjem nebitnih informacija, Facebookov A.I. sposoban je obrađivati ​​informacije u većim razmjerima.

Facebook AI

Kao i s većim dijelom Facebookovog istraživanja umjetne inteligencije, div društvenog umrežavanja nije najavio da će Expire-Span biti ugrađen u neki od njegovih temeljnih proizvoda u bliskoj budućnosti. Ali, kako Facebook barata sa sve više i više korisničkih podataka (da ne spominjemo njegove priča se da će kupiti pametne naočale), nije teško vidjeti kako bi se ova tehnologija mogla primijeniti. Kada budući A.I. alati mogu raditi na visokim razinama performansi usprkos radu s ogromnim hrpama podataka, Expire-Span bi mogao biti razlog.

Nemojte pogriješiti pretpostavkom da stvaranje zaboravnog U.I. označava još jedan korak prema stvaranju A.I. ljudskije, međutim. Točni razlozi zbog kojih ljudi zaboravljaju stvari još uvijek su predmet brojnih istraživanja istraživača. Kao i kod neuronskih mreža inspiriranih mozgom koje dominiraju modernom umjetnom inteligencijom, Facebookov algoritam za zaboravljanje modeliran je na teoriji zaboravljanja; ne pokušaj repliciranja s bilo kakvom biovjernošću.

"Mozak je vrlo složen sustav koji nije u potpunosti shvaćen, a postoji mnogo različitih vrsta pamćenja koje oblikuju ljudsku memoriju", rekao je Sukhbaatar. “Expire-Span, kao i svi drugi A.I. mehanizmi, mogu biti nadahnut ljudskim mozgom, ali u konačnici nisu vjerni odraz toga kako mozak zapravo funkcionira. Pamćenje je samo po sebi vrlo aktivno istraživačko područje. Analogija ljudskog pamćenja koju opisujemo dodana je samo u svrhu jasnoće, iako definitivno nadahnjuje naš rad.”

I nemojte to zaboraviti!

Preporuke urednika

  • Facebookov novi AI za prepoznavanje slika obučen je na 1 milijardu Instagram fotografija
  • Facebookov novi A.I. podiže prepoznavanje slike na potpuno novu razinu
  • Kako je A.I. može pobijediti zlonamjerni softver koji još uopće ne postoji