Facebook heeft een AI gebouwd Dat opzettelijk dingen vergeet

“Hallo, HAL. Begrijp je mij, HAL?” zei astronaut Dave Bowman, terwijl hij wanhopig probeerde zijn emoties onder controle te houden.

Er viel een pauze en toen reageerde de computer op emotieloze monotoon. ‘Bevestigend, Dave. Ik heb je gelezen.”

‘Open de deuren van de capsuleruimte, HAL.’

Nog een lange pauze. Was HAL, de almachtige A.I. die de controle had Ontdekking Eén ruimtevaartuig, hem echt negerend? Onmogelijk natuurlijk, dacht Bowman. Elk moment zou HAL in actie kunnen komen en gehoorzamen –

‘Het spijt me, Dave,’ vervolgde HAL. “Ik ben bang dat ik dat niet kan.”

"Wat is het probleem?" vroeg Dave.

‘Nou, zie je, Dave. Ik ben vergeten hoe ik ze moet openen.’

Oké, dat is niet precies hoe het ging 2001: Een ruimte-odyssee, maar de grappen schrijven zichzelf eigenlijk. Als het om kunstmatige intelligentie gaat, lijkt een goed geheugen immers een van de noodzakelijke eigenschappen te zijn die onderzoekers graag in hun systemen willen inbouwen. Niemand wil een A.I. dat zich vormt naar het soort alledaagse, onopvallende intelligentie dat dingen vergeet. Dus waarom dan wel

Facebook een vergeetachtige AI bouwen? En waarom willen we er binnenkort allemaal één, net als de oude grap over de ober en de vlieg in de soep van een klant?

Waar we aan denken als we aan vergeten denken

Het antwoord is, zo blijkt, dat wij Doen wil iets dat meer lijkt op de alledaagse, onopvallende intelligentie die hier en daar dingen vergeet. Mensen vergeten belangrijke dingen zoals verjaardagen, portemonnees en het sluiten van de garage voordat we op vakantie gaan. Dat is suboptimaal vergeten. Maar we vergeten ook stukjes informatie omdat we deze niet hoeven te bewaren, waardoor we ze als een deel ervan tegenhouden afval dat in de voedselvanger van een gootsteenafvoer wordt opgevangen voordat het op korte en lange termijn kan passeren geheugen.

In een beroemd experimentwerd mensen gevraagd een Amerikaanse cent correct te herkennen uit een verzameling foto's waarop onjuiste centen te zien waren. Hoewel de deelnemers waarschijnlijk elke dag centen zagen en gebruikten, bleken ze verrassend slecht in deze taak. Zoals de onderzoekers schreven: “Per saldo kwamen de resultaten overeen met het idee dat de visuele details van een object, zelfs een heel bekend object, zijn doorgaans alleen uit het geheugen beschikbaar voor zover ze in het dagelijks leven nuttig zijn leven."

Hoewel het niet zo simpel is als te zeggen dat de hersenen net zo vol kunnen raken als opslag op een harde schijf, zijn er zeker kortetermijnproblemen herinneringen die lijken te vergaan wanneer ze niet langer nodig zijn, terwijl andere zich een weg banen naar onze hersenen en daar leven gratis huren. Een voorbeeld? Denk eens na over waar u de afgelopen feestdagen de kerstversiering heeft opgeborgen. Loop vervolgens in gedachten van de receptie naar je kamer in het laatste hotel waar je hebt verbleven, een hotel waar je waarschijnlijk nooit meer zult verblijven. Geen van beide stukjes informatie is van vitaal belang voor uw welzijn. Niettemin is het ene stukje informatie nodig en het andere niet. Op de een of andere manier weten je hersenen welke je in de prullenbak moet gooien.

Dit is het idee achter Facebook’s nieuwe A.I. project, genaamd Expire-Span. Als kunstmatige intelligentie modellen steeds vaker worden toegepast op lange datasets zoals artikelen en boeken, nemen de rekenkosten die aan deze modellen zijn verbonden toe naarmate ze meer informatie proberen te onthouden. Het probleem wordt zelfs nog urgenter naarmate mensen steeds meer rijke multimediagegevens over hun leven verzamelen.

“Naarmate de hoeveelheid inhoud die we hebben groeit, is de belangrijkste vraag de opslag”, Angela Fan, een onderzoekswetenschapper bij Facebook AI Research Paris, aan Digital Trends. “Een telefoon heeft bijvoorbeeld een beperkte hoeveelheid geheugen. Dit is een zelfs nog groter probleem bij wearables en andere toepassingen op het apparaat, waarbij privacyredenen een rol kunnen spelen dat mensen strikt willen dat inhoud op hun apparaat wordt opgeslagen en niet op een server of een cloud, waardoor de opslag wordt geaccentueerd uitdagingen."

Huidige AI modellen hanteren een soort Frank Sinatra-benadering van herinneringen – dat wil zeggen dat ze zich alles of helemaal niets herinneren. Ofwel slaan ze alle informatie op die bij elke tijdstap wordt gecreëerd, ofwel vergeten ze ze allemaal na een vooraf bepaalde tijd. Sainbayar Sukhbaatar, een andere Facebook A.I. onderzoekswetenschapper vergelijkt het met het perfect onthouden van alles wat er de afgelopen week is gebeurd, maar absoluut niets daarbuiten.

Vergeetachtigheid inbouwen in AI

Onderzoekers hebben ‘vergeten’ ingebouwd in A.I. modellen voor. Langetermijngeheugen (LSTM)-modellen hebben bijvoorbeeld een vergeetmechanisme toegevoegd aan terugkerende neurale netwerken (RNN), een van de kerntechnologieën die machine learning aanstuurt. “RNN’s hebben een intern geheugen dat uit één vector bestaat, dus als je dit vergeet, wordt het overschreven met nieuwe informatie”, vertelde Sukhbaatar aan Digital Trends.

Expire-Span voegt daarentegen een vergeetmechanisme toe aan het externe geheugen dat duizenden vectoren kan bevatten. Nieuwe informatie wordt waargenomen, maar Expire-Span – waarvan de naam doet denken aan het soort houdbaarheidslabels dat je op flessen melk aantreft – heeft het vermogen om te bepalen hoe lang die informatie in het geheugen moet blijven. Als informatie niet cruciaal wordt geacht voor de toekomst, kan dat stukje informatie geleidelijk worden aangepast verval, voordat het uiteindelijk uit de AI wordt uitgeroeid. het geheugen van het model om ruimte te maken voor meer bruikbaar informatie.

Om dit te kunnen doen, moet het model kunnen voorspellen wat wel en niet relevant is voor een bepaald gegeven taak, voordat de juiste vervaldatum wordt toegewezen, waarna de informatie uit de A.I. systeem. Door irrelevante informatie te dumpen, kan Facebook’s A.I. is in staat informatie op grotere schaal te verwerken.

Zoals bij veel onderzoek naar kunstmatige intelligentie van Facebook heeft de sociale netwerkgigant niet aangekondigd dat Expire-Span in de nabije toekomst in een van zijn kernproducten zal worden ingebakken. Maar omdat Facebook steeds meer gebruikersgegevens verwerkt (om nog maar te zwijgen van de geruchten gaan over een slimme bril), is het niet moeilijk om te zien hoe deze technologie zou kunnen worden toegepast. Wanneer toekomstige A.I. tools in staat zijn om op hoge prestatieniveaus te presteren, ondanks het omgaan met enorme hoeveelheden gegevens, zou Expire-Span de reden kunnen zijn.

Maak niet de fout door te veronderstellen dat het maken van een vergeetachtige A.I. markeert een nieuwe stap in de richting van het maken van A.I. echter menselijker. De exacte redenen waarom mensen dingen vergeten, zijn nog steeds onderwerp van veel onderzoek door onderzoekers. Net als de door de hersenen geïnspireerde neurale netwerken die de moderne AI domineren, is het vergeetachtig-algoritme van Facebook gemodelleerd naar de theorie van vergeetachtigheid; geen poging om het met enige biofideliteit te repliceren.

"De hersenen zijn een zeer complex systeem dat nog niet volledig wordt begrepen, en er zijn veel verschillende soorten geheugen die het menselijk geheugen vormen", zei Sukhbaatar. “Expire-Span, net als alle andere A.I. mechanismen kunnen zijn geïnspireerd door het menselijk brein, maar zijn uiteindelijk geen getrouwe weerspiegeling van hoe de hersenen feitelijk werken. Vooral het geheugen is op zichzelf een zeer actief onderzoeksgebied. De analogie van het menselijk geheugen die we beschrijven is alleen ter verduidelijking toegevoegd, hoewel het zeker ons werk inspireert.”

En vergeet het niet!

Aanbevelingen van de redactie

• Facebook's nieuwe beeldherkenning A.I. is getraind op 1 miljard Instagram-foto's
• Facebook's nieuwe A.I. tilt beeldherkenning naar een geheel nieuw niveau
• Hoe A.I. kan malware verslaan die nog niet eens bestaat