Facebook vybudoval A.I. To zámerne zabúda na veci

„Ahoj, HAL. Čítaš ma, HAL?" povedal astronaut Dave Bowman a zúfalo sa snažil udržať svoje emócie na uzde.

Obsah

  • Na čo myslíme, keď premýšľame o zabudnutí
  • Zabudovanie zabudnutia do A.I.

Nastala pauza a potom, monotónne bez emócií, počítač zareagoval. "Potvrdzujem, Dave." Čítal som ťa."

Odporúčané videá

"Otvorte dvere šachty, HAL."

Ďalšia dlhá pauza. Bol HAL, všemocný A.I. ktorý ovládal Discovery One vesmírna loď, naozaj ho ignoruje? To je určite nemožné, pomyslel si Bowman. Každú chvíľu by HAL začal konať a poslúchol –

"Je mi to ľúto, Dave," pokračoval HAL. "Obávam sa, že to nedokážem."

"Aký je problém?" spýtal sa Dave.

"No vidíš, Dave." Zabudol som, ako ich otvoriť."

Dobre, presne tak to nebolo 2001: Vesmírna odysea, ale vtipy sa v podstate píšu samé. Koniec koncov, pokiaľ ide o umelú inteligenciu, zdá sa, že dobrá pamäť je jednou z nevyhnutných vlastností, ktoré výskumníci chcú vložiť do svojich systémov. Nikto nechce A.I. ktorý sa vzoruje podľa druhu každodennej, nevýraznej inteligencie, ktorá zabúda na veci. Tak prečo teda je

Facebook budovanie zábudlivej A.I.? A prečo, podobne ako v starom vtipe o čašníkovi a muche v zákazníckej polievke, budeme čoskoro všetci chcieť?

Na čo myslíme, keď premýšľame o zabudnutí

Odpoveď, ako sa ukazuje, je, že my robiť chcete niečo, čo je skôr ako každodenná, nevýrazná inteligencia, ktorá tu a tam niečo zabudne. Ľudia zabúdajú na dôležité veci, ako sú výročia, peňaženky a zatvorenie garáže pred odchodom na dovolenku. To je suboptimálne zabúdanie. Ale zabúdame aj na časti informácií, pretože ich nepotrebujeme uchovávať a zastavovať ich ako kus detritus zachytený v lapači potravy výlevky skôr, ako môže krátkodobo a dlhodobo prejsť Pamäť.

Facebook AI

V slávny experiment, ľudia boli požiadaní, aby správne rozpoznali americký cent zo zbierky obrázkov zobrazujúcich nesprávne centy. Hoci účastníci pravdepodobne videli a používali centy každý deň, ukázali sa prekvapivo slabí v tejto úlohe. Ako vedci napísali: „Výsledky boli v súlade s myšlienkou, že vizuálne detaily objektu, dokonca aj veľmi známy predmet, sú zvyčajne dostupné z pamäte iba do tej miery, do akej sú užitočné v každodennom živote život.”

Aj keď to nie je také jednoduché, ako povedať, že mozog sa môže zaplniť ako úložisko pevného disku, určite existujú krátkodobé spomienky, ktoré sa zdajú chátrajúce, keď už nie sú potrebné, zatiaľ čo iné sa vryjú do nášho mozgu a žijú tam bez nájomného. Príklad? Zamyslite sa nad tým, kde ste minulé sviatky zbalili vianočnú výzdobu. Potom v duchu prejdite z recepcie do svojej izby v poslednom hoteli, v ktorom ste bývali, v takom, v ktorom už pravdepodobne nikdy nebudete. Ani jedna informácia nie je životne dôležitá pre vaše zdravie. Jedna informácia je však potrebná a druhá nie. Váš mozog nejako vie, ktorý z nich vyhodiť do koša.

Toto je myšlienka nového A.I Facebooku. projekt s názvom Expire-Span. Ako umela inteligencia modely sa čoraz viac aplikujú na dlhé súbory údajov, ako sú články a knihy, výpočtové náklady spojené s týmito modelmi stúpajú, keď sa snažia zapamätať si viac informácií. Problém sa stáva ešte naliehavejším, keďže ľudia zbierajú čoraz viac bohatých multimediálnych údajov o svojich životoch.

"Mozog je veľmi zložitý systém, ktorý nie je úplne pochopený, a existuje mnoho rôznych typov pamäte, ktoré tvoria ľudskú pamäť."

„Ako rastie množstvo obsahu, ktorý máme, hlavnou otázkou je skladovanie,“ Angela Fan, vedecký pracovník spoločnosti Facebook AI Research Paris, povedal pre Digital Trends. „Napríklad telefón má obmedzené množstvo pamäte. To je ešte väčší problém v nositeľných zariadeniach a iných aplikáciách na zariadení, kde môžu znamenať súkromie že ľudia striktne chcú obsah uložený na ich zariadení a nie na serveri alebo cloude, s dôrazom na úložisko výzvy.”

Aktuálne A.I. Modelky majú k spomienkam niečo ako Frank Sinatra – to znamená, že si pamätajú všetko alebo vôbec nič. Buď ukladajú všetky informácie vytvorené v každom časovom kroku, alebo ich všetky zabudnú po vopred stanovenom čase. Sainbayar Sukhbaatar, ďalší Facebook A.I. výskumný vedec to prirovnáva k dokonalému zapamätaniu si všetkého, čo sa stalo za posledný týždeň, ale absolútne nič viac.

Zabudovanie zabudnutia do A.I.

Výskumníci zabudovali „zabúdanie“ do A.I. modely predtým. Dlhá Krátkodobá Pamäť Modely (LSTM) napríklad pridali mechanizmus zabúdania do rekurentných neurónových sietí (RNN), jednej zo základných technológií, ktoré poháňajú strojové učenie. "RNN majú vnútornú pamäť, ktorá pozostáva z jedného vektora, takže jeho zabudnutie znamená prepísanie novými informáciami," povedal Sukhbaatar pre Digital Trends.

Naproti tomu Expire-Span pridáva do externej pamäte mechanizmus zabúdania, ktorý môže obsahovať tisíce vektorov. Objavili sa nové informácie, ale Expire-Span – ktorého názov pripomína typ exspiračných štítkov na fľašiach mlieka – má schopnosť určiť, ako dlho by tieto informácie mali zostať v pamäti. Ak sa informácie nepovažujú za kľúčové pre budúcnosť, môžu sa postupne pridávať úpadku, skôr ako bude definitívne vykorenený z A.I. pamäť modelu, aby sa vytvoril priestor pre užitočnejšie informácie.

Aby to bolo možné, model musí byť schopný predpovedať, čo je a čo nie je relevantné pre konkrétnu osobu úlohu, pred priradením správneho dátumu vypršania platnosti, po ktorom informácie z A.I. systém. Vypustením irelevantných informácií spoločnosť Facebook A.I. je schopný spracovávať informácie vo väčšom rozsahu.

Facebook AI

Rovnako ako pri mnohých výskumoch umelej inteligencie Facebooku, gigant sociálnych sietí neoznámil, že Expire-Span bude v blízkej budúcnosti zapracovaný do ktoréhokoľvek z jeho kľúčových produktov. Ale keďže sa Facebook zaoberá čoraz väčším množstvom údajov o používateľoch (nehovoriac o ich hovorí sa o prechode do inteligentných okuliarov), nie je ťažké pochopiť, ako by sa táto technológia mohla uplatniť. Keď budúci A.I. Nástroje sú schopné pracovať na vysokej úrovni výkonu napriek tomu, že sa zaoberajú obrovskými hromadami údajov, dôvodom môže byť Expire-Span.

Nerobte chybu a nepredpokladajte, že vytvorenie zábudlivého A.I. predstavuje ďalší krok k tomu, aby sa A.I. ľudskejšie však. Presné dôvody, prečo ľudia zabúdajú na veci, sú stále predmetom mnohých výskumov výskumníkov. Rovnako ako v prípade neurónových sietí inšpirovaných mozgom, ktoré dominujú modernej AI, aj algoritmus zábudlivosti Facebooku je založený na teórii zábudlivosti; nejde o pokus replikovať ho s akoukoľvek biovernosťou.

"Mozog je veľmi zložitý systém, ktorý nie je úplne pochopený, a existuje mnoho rôznych typov pamäte, ktoré tvoria ľudskú pamäť," povedal Sukhbaatar. „Expire-Span, rovnako ako všetky ostatné A.I. mechanizmov, môžu byť inšpirovaný ľudským mozgom, ale v konečnom dôsledku nie sú verným obrazom toho, ako mozog v skutočnosti funguje. Najmä pamäť je sama o sebe veľmi aktívnou oblasťou výskumu. Analógia ľudskej pamäte, ktorú popisujeme, je pridaná len za účelom jasnosti, aj keď rozhodne inšpiruje našu prácu.“

A nezabudni na to!

Odporúčania redaktorov

  • Nový Facebook na rozpoznávanie obrázkov A.I. je trénovaný na 1 miliarde fotiek na Instagrame
  • Nové A.I od Facebooku posúva rozpoznávanie obrázkov na úplne novú úroveň
  • Ako A.I. dokáže poraziť malvér, ktorý ešte ani neexistuje