Facebook ehitas A.I. See unustab asjad tahtlikult

"Tere, HAL. Kas sa loed mind, HAL?” ütles astronaut Dave Bowman, püüdes meeleheitlikult oma emotsioone vaos hoida.

Tekkis paus ja siis reageeris emotsioonivabas monotoonses arvuti. „Jaatavalt, Dave. Ma lugesin sind."

"Avage kapiuksed, HAL."

Järjekordne pikk paus. Oli HAL, kõikvõimas A.I. mis kontrollis Discovery One kosmoselaev, ignoreerides teda tõesti? See on kindlasti võimatu, mõtles Bowman. Iga hetk hakkab HAL tegutsema ja kuuletub -

"Anna andeks, Dave," jätkas HAL. "Ma kardan, et ma ei saa seda teha."

"Mis on probleemiks?" küsis Dave.

"No näed, Dave. Olen unustanud, kuidas neid avada."

OK, asjad ei läinud täpselt nii 2001: Kosmoseodüsseia, aga naljad kirjutavad põhimõtteliselt ise. Lõppude lõpuks, mis puutub tehisintellekti, siis hea mälu näib olevat üks eeldusi, mida teadlased soovivad oma süsteemidesse imbuda. Keegi ei taha A.I. mis kujundab end sellise igapäevase, märkamatu intelligentsuse järgi, mis unustab asjad. Miks siis on

Facebook unustamatu A.I ehitamine? Ja miks, nagu vana nali kelnerist ja kärbsest kliendi supis, tahame varsti seda kõik?

Millele me mõtleme, kui mõtleme unustamisele

Vastus, nagu selgub, on see, et meie teha tahan midagi, mis sarnaneks rohkem igapäevasele, tähelepanuväärsele intelligentsusele, mis unustab asju siin ja seal. Inimesed unustavad olulised asjad, nagu tähtpäevad ja rahakotid ning garaaži sulgemise enne puhkusele minekut. See on ebaoptimaalne unustamine. Kuid me unustame ka teabekilde, sest me ei pea seda säilitama, peatades selle nagu killukese kraanikaussi toidukogujasse sattunud praht, enne kui see pääseb lühiajaliselt ja pikaajaliselt läbi mälu.

Sees kuulus eksperiment, paluti inimestel valesid sente kujutavate piltide hulgast USA senti õigesti ära tunda. Kuigi osalejad nägid ja kasutasid tõenäoliselt iga päev sente, osutusid nad ülesande täitmisel üllatavalt kehvaks. Nagu teadlased kirjutasid: "Tasakaalu järgi olid tulemused kooskõlas ideega, et objekti visuaalsed detailid, isegi väga tuttav objekt, on tavaliselt mälust kättesaadavad vaid sel määral, kuivõrd need on igapäevases kasutuses elu."

Kuigi see pole nii lihtne kui öelda, et aju võib täituda nagu kõvaketta salvestusruum, on kindlasti lühiajalisi sündmusi mälestused, mis näivad lagunevat, kui neid enam ei vajata, samal ajal kui teised tungivad meie ajusse ja elavad seal rendivaba. Näide? Mõelge, kuhu pakkisite eelmisel pühadel jõulukaunistused. Järgmisena kõndige vaimselt vastuvõtu juurest oma tuppa viimases hotellis, kus te tõenäoliselt enam ei ööbi. Kumbki teave ei ole teie heaolu jaoks eluliselt oluline. Sellegipoolest on ühte teavet vaja ja teist mitte. Kuidagi teab su aju, kumb prügikasti visata.

See on Facebooki uue A.I idee. projekti nimega Expire-Span. Nagu tehisintellekt mudeleid rakendatakse üha enam pikkade andmekogumite, näiteks artiklite ja raamatute puhul, nende mudelitega seotud arvutuskulud suurenevad, kui nad üritavad rohkem teavet meelde jätta. Probleem muutub veelgi teravamaks, kuna inimesed koguvad oma elu kohta üha rohkem rikkalikke multimeediaandmeid.

"Kuna meil oleva sisu hulk kasvab, on peamine küsimus salvestusruum," Angela fänn, ütles Facebooki AI Research Paris teadlane Digital Trendsile. «Näiteks telefonil on piiratud mälumaht. See on veelgi suurem probleem kantavates seadmetes ja muudes seadmes kasutatavates rakendustes, kus privaatsus võib tähendada et inimesed soovivad rangelt sisu salvestada nende seadmesse, mitte serverisse või pilve, rõhutades salvestusruumi väljakutseid.”

Praegune A.I. modellid suhtuvad mälestustesse Frank Sinatra moodi – see tähendab, et nad mäletavad kõike või üldse mitte midagi. Nad kas salvestavad kogu igal ajaetapil loodud teabe või unustavad need kõik etteantud aja pärast. Sainbayar Sukhbaatar, teine ​​Facebooki A.I. teadlane, võrdleb seda kõige täiusliku mäletamisega, mis eelmisel nädalal juhtus, kuid mitte midagi peale selle.

Unustuse kujundamine A.I.

Teadlased on A.I-sse integreerinud "unustuse". mudelid enne. Pikaajaline lühiajaline mälu (LSTM) mudelid lisasid näiteks korduvatele närvivõrkudele (RNN) unustamismehhanismi, mis on üks masinõpet juhtivaid põhitehnoloogiaid. "RNN-idel on sisemälu, mis koosneb ühest vektorist, nii et selle unustamine tähendab selle ülekirjutamist uue teabega," ütles Sukhbaatar Digital Trendsile.

Seevastu Expire-Span lisab välismällu unustamismehhanismi, mis võib sisaldada tuhandeid vektoreid. Täheldatakse uut teavet, kuid Expire-Span, mille nimi meenutab piimapudelitelt leitud aegumissilte, suudab määrata, kui kaua see teave peaks mällu jääma. Kui teavet ei peeta tuleviku jaoks oluliseks, saab seda teavet järk-järgult muuta lagunemine, enne kui see lõpuks A.I-st välja juuritakse. mudeli mälu, et teha ruumi kasulikumale teavet.

Selleks peab mudel suutma ennustada, mis on konkreetse jaoks asjakohane ja mis mitte enne õige aegumiskuupäeva määramist, pärast mida teave A.I-st kaob. süsteem. Ebaolulise teabe väljajätmisega Facebooki A.I. suudab töödelda teavet suuremas mahus.

Nagu enamiku Facebooki tehisintellektiuuringute puhul, ei ole suhtlusvõrgustike hiiglane teatanud, et Expire-Span lisatakse lähitulevikus mõnesse tema põhitootesse. Kuid kuna Facebook tegeleb üha rohkemate kasutajaandmetega (rääkimata sellest kuulujuttude järgi kolida nutiprillidele), pole raske mõista, kuidas seda tehnoloogiat saaks rakendada. Kui tulevane A.I. tööriistad on võimelised töötama kõrgel jõudlusega, vaatamata suure hulga andmetega tegelemisele, võib põhjuseks olla Expire-Span.

Ärge tehke seda viga, eeldades, et unustav A.I. tähistab järjekordset sammu A.I. siiski inimlikum. Täpseid põhjuseid, miks inimesed asju unustavad, uurivad teadlased endiselt palju. Nagu ajust inspireeritud närvivõrkude puhul, mis domineerivad kaasaegses A.I.-s, on Facebooki unustamisalgoritm modelleeritud unustamise teoorial; mitte katse seda korrata mingi biotruudusega.

"Aju on väga keeruline süsteem, mida ei mõisteta täielikult, ja inimese mälu moodustavad palju erinevat tüüpi mälu," ütles Sukhbaatar. „Aegumisvahemik, nagu kõik teised A.I. mehhanismid, võivad olla inspireeritud inimaju poolt, kuid lõppkokkuvõttes ei peegelda need tõetruult, kuidas aju tegelikult töötab. Eelkõige mälu on iseenesest väga aktiivne uurimisvaldkond. Kirjeldatud inimmälu analoogia on lisatud ainult selguse huvides, kuigi see kindlasti inspireerib meie tööd.

Ja ärge unustage seda!

Toimetajate soovitused

• Facebooki uus pildituvastus A.I. on koolitatud 1 miljardi Instagrami fotoga
• Facebooki uus A.I. viib pildituvastuse täiesti uuele tasemele
• Kuidas A.I. saab alistada pahavara, mida veel isegi ei eksisteeri