Facebook създаде A.I. Което умишлено забравя неща

„Здравей, ХАЛ. Чуваш ли ме, ХАЛ? каза астронавтът Дейв Боуман, отчаяно опитвайки се да сдържи емоциите си.

Съдържание

  • За какво мислим, когато мислим за забравяне
  • Вграждане на забравата в ИИ

Последва пауза и след това с безчувствен монотонен тон компютърът отговори. „Потвърдено, Дейв. Чета те.

Препоръчани видеоклипове

„Отвори вратите на отделението за капсули, ХАЛ.“

Още една дълга пауза. Беше ли HAL, всемогъщият ИИ? които контролираха Откритие едно космически кораб, наистина го игнорира? Със сигурност е невъзможно, помисли си Боуман. Всеки момент HAL щеше да влезе в действие и да се подчини...

„Съжалявам, Дейв“, продължи ХАЛ. "Страхувам се, че не мога да направя това."

"Какъв е проблема?" — попита Дейв.

„Е, виждаш ли, Дейв. Забравих как да ги отворя.

Добре, нещата не се развиха точно така 2001: Космическа одисея, но вицовете основно се пишат сами. В края на краищата, когато става въпрос за изкуствен интелект, добрата памет изглежда е едно от задължителните качества, които изследователите искат да внедрят в своите системи. Никой не иска ИИ. който се моделира след вида на ежедневната, незабележима интелигентност, която забравя нещата. Така че защо тогава е

Facebook изграждане на забравящ ИИ? И защо, както в стария виц за сервитьора и мухата в супата на клиента, скоро всички ще искаме по едно?

За какво мислим, когато мислим за забравяне

Отговорът, както се оказва, е, че ние направи искате нещо, което е по-скоро като ежедневната, незабележима интелигентност, която забравя нещата тук и там. Хората забравят важни неща като годишнини и портфейли и затваряне на гаража, преди да отидем на почивка. Това е неоптимално забравяне. Но също така забравяме части от информация, защото не е необходимо да я задържаме, спирайки я като парче детрит, уловен в уловителя на храна в канала на мивката, преди да може да премине през краткосрочно и в дългосрочно памет.

Facebook AI

В известен експеримент, хората бяха помолени да разпознаят правилно американско пени от колекция от снимки, показващи неправилни пенита. Въпреки че участниците вероятно виждаха и използваха стотинки всеки ден, те се оказаха изненадващо лоши в задачата. Както пишат изследователите: „В крайна сметка резултатите са в съответствие с идеята, че визуалните детайли на обект, дори много познат обект, обикновено са достъпни от паметта само до степента, в която са полезни в ежедневието живот.”

Въпреки че не е толкова просто да се каже, че мозъкът може да се напълни като хранилище на твърд диск, със сигурност има краткосрочни спомени, които изглежда се разпадат, когато вече не са необходими, докато други си пробиват път в мозъците ни и живеят там без наем. Пример? Помислете къде сте опаковали коледната украса през последните празници. След това мислено отидете от рецепцията до стаята си в последния хотел, в който сте отседнали, в който е малко вероятно да останете отново. Нито една информация не е жизненоважна за вашето благополучие. Независимо от това, една информация е необходима, а другата не. По някакъв начин мозъкът ви знае кой да хвърли в кошчето.

Това е идеята зад новия AI на Facebook. проект, наречен Expire-Span. Като изкуствен интелект моделите все повече се прилагат към набори от данни в дълга форма като статии и книги, изчислителните разходи, свързани с тези модели, растат, докато те се опитват да запомнят повече информация. Проблемът става още по-належащ, тъй като хората събират все повече и повече богати мултимедийни данни за живота си.

„Мозъкът е много сложна система, която не е напълно разбрана, и има много различни видове памет, които формират човешката памет.“

„С нарастването на количеството съдържание, което имаме, основният въпрос е съхранението,“ Анджела Фен, учен изследовател във Facebook AI Research Paris, каза пред Digital Trends. „Един телефон, например, има ограничено количество памет. Това е още по-голям проблем при носими устройства и други приложения от типа на устройството, където причините за поверителност може да означават че хората стриктно искат съдържание да се съхранява на тяхното устройство, а не на сървър или облак, като се набляга на съхранението предизвикателства.”

Текущият ИИ моделите възприемат нещо като подход на Франк Синатра към спомените - тоест, че помнят всичко или нищо. Или съхраняват цялата информация, създадена на всяка времева стъпка, или ги забравят всички след предварително определено време. Сайнбаяр Сухбаатар, друг Facebook A.I. учен изследовател, го оприличава на това да си спомня перфектно всичко, което се е случило през последната седмица, но абсолютно нищо извън това.

Вграждане на забравата в ИИ

Изследователите са вградили „забравянето“ в ИИ. модели преди. Дълга краткосрочна памет (LSTM) моделите, например, добавиха механизъм за забравяне към повтарящи се невронни мрежи (RNN), една от основните технологии, които движат машинното обучение. „RNN имат вътрешна памет, която се състои от един вектор, така че забравянето му означава презаписването му с нова информация“, каза Sukhbaatar пред Digital Trends.

За разлика от това, Expire-Span добавя механизъм за забравяне към външна памет, която може да съдържа хиляди вектори. Наблюдава се нова информация, но Expire-Span - чието име напомня вида етикети за изтичане на срока на годност, намиращи се върху бутилки с мляко - има способността да определи колко дълго тази информация трябва да остане в паметта. Ако информацията не се счита за решаваща за бъдещето, тази част от информацията може да бъде направена постепенно разпад, преди окончателно да бъде изкоренен от ИИ. паметта на модела, за да направите място за по-полезни информация.

За да направи това, моделът трябва да може да предскаже кое е и кое не е от значение за дадена част задача, преди да зададе правилната дата на изтичане, след което информацията ще изчезне от A.I. система. Чрез изхвърляне на неуместна информация, ИИ на Facebook е в състояние да обработва информация в по-големи мащаби.

Facebook AI

Както при голяма част от изследванията на Facebook за изкуствен интелект, гигантът на социалните мрежи не е обявил, че Expire-Span ще бъде включен в някой от основните му продукти в близко бъдеще. Но тъй като Facebook работи с все повече потребителски данни (да не говорим за неговите според слуховете се премества в смарт очила), не е трудно да се види как може да се приложи тази технология. Когато бъдещият ИИ. инструментите са в състояние да работят на високи нива на производителност, въпреки че работят с масивни купчини данни, причината може да е Expire-Span.

Не правете грешката да приемете, че създаването на забравящ ИИ. бележи още една стъпка към създаването на A.I. по-човешки обаче. Точните причини хората да забравят нещата все още са обект на много изследвания от изследователи. Както при вдъхновените от мозъка невронни мрежи, които доминират в съвременния изкуствен интелект, алгоритъмът за забравяне на Facebook е моделиран върху теорията за забравата; не е опит да се възпроизведе с каквато и да е биоточност.

„Мозъкът е много сложна система, която не е напълно разбрана, и има много различни видове памет, които формират човешката памет“, каза Сухбаатар. „Expire-Span, както всички други A.I. механизми, може да бъде вдъхновен от човешкия мозък, но в крайна сметка не са верни отражения на това как всъщност работи мозъкът. По-специално паметта е много активна изследователска област сама по себе си. Аналогията с човешката памет, която описваме, е добавена само с цел по-голяма яснота, въпреки че определено вдъхновява нашата работа.“

И не го забравяйте!

Препоръки на редакторите

  • Новият изкуствен интелект за разпознаване на изображения на Facebook се обучава на 1 милиард снимки в Instagram
  • Новият изкуствен интелект на Facebook извежда разпознаването на изображения на съвсем ново ниво
  • Как A.I. може да победи зловреден софтуер, който дори все още не съществува