Facebook створив штучний інтелект Що навмисно забуває речі

«Привіт, HAL. Ти мене чуєш, ХАЛ?» — сказав астронавт Дейв Боумен, відчайдушно намагаючись стримати емоції.

Зміст

Про що ми думаємо, коли думаємо про забуття
Вбудовування забудькуватості в А.І.

Була пауза, а потім беземоційним монотонним голосом відповів комп’ютер. «Ствердно, Дейве. Я читаю вас».

Рекомендовані відео

«Відкрий двері відсіку для контейнерів, ГАЛ».

Ще одна довга пауза. Був HAL, всемогутній ШІ. що контролювали Відкриття перше космічного корабля, справді ігноруючи його? «Звісно, неможливо», — подумав Боумен. Будь-якої миті ХАЛ почав би діяти й підкоритися…

«Вибач, Дейве», — продовжив ХАЛ. «Я боюся, що я не зможу цього зробити».

"В чому проблема?" — запитав Дейв.

«Ну, бачиш, Дейве. Я забув, як їх відкрити».

Добре, все пішло не зовсім так 2001: Космічна одіссея, але анекдоти в основному пишуться самі. Зрештою, коли мова заходить про штучний інтелект, хороша пам’ять, здається, є однією з обов’язкових якостей, які дослідники прагнуть наповнити своїми системами. Ніхто не хоче ШІ. що нагадує повсякденний, нічим не примітний інтелект, який забуває про речі. Так чому ж тоді є

Facebook створити забудькуватий штучний інтелект? І чому, як у старому жарті про офіціанта та муху в супі клієнта, незабаром ми всі захочемо одного?

Про що ми думаємо, коли думаємо про забуття

Відповідь, як виявилося, полягає в тому, що ми робити хочу щось більше схоже на повсякденний, нічим не примітний інтелект, який забуває про речі тут і там. Люди забувають такі важливі речі, як ювілеї, гаманці та закриття гаража перед відпусткою. Це неоптимальне забування. Але ми також забуваємо частини інформації, тому що нам не потрібно її зберігати, зупиняючи, як шматок детрит, що потрапив у вловлювач їжі зливу раковини, перш ніж він зможе пройти через короткочасний і довгостроковий пам'ять.

В відомий експеримент, людей попросили правильно розпізнати американський пенні з колекції зображень, на яких зображені неправильні пенні. Хоча учасники, ймовірно, бачили і використовували копійки щодня, вони напрочуд погано впоралися із завданням. Як писали дослідники: «Загалом, результати узгоджувалися з ідеєю, що візуальні деталі об’єкта, навіть дуже знайомий об'єкт, як правило, доступний з пам'яті лише в тій мірі, в якій вони корисні в повсякденному житті життя».

Хоча це не так просто, як сказати, що мозок може заповнюватися, як пам’ять на жорсткому диску, безумовно, існують короткострокові спогади, які, здається, руйнуються, коли вони більше не потрібні, тоді як інші проникають у наш мозок і живуть там безоплатно. Приклад? Подумайте, куди ви складали різдвяні прикраси минулих свят. Далі подумки пройдіть від стійки реєстрації до свого номера в останньому готелі, в якому ви навряд чи зупинитеся знову. Жодна інформація не є життєво важливою для вашого добробуту. Тим не менш, одна інформація потрібна, а інша – ні. Якось ваш мозок знає, який із них викинути на смітник.

Це ідея нового штучного інтелекту Facebook. проект під назвою Expire-Span. як штучний інтелект моделі все частіше застосовуються до довгострокових наборів даних, таких як статті та книги, обчислювальні витрати, пов’язані з цими моделями, зростають, оскільки вони намагаються запам’ятати більше інформації. Проблема стає ще гострішою, оскільки люди збирають все більше багатих мультимедійних даних про своє життя.

«Мозок — це дуже складна система, яка до кінця не вивчена, і існує багато різних типів пам’яті, які формують пам’ять людини».

«Оскільки обсяг нашого контенту зростає, головним питанням є зберігання», Анжела Фан, науковий співробітник Facebook AI Research Paris, розповів Digital Trends. «Телефон, наприклад, має обмежений обсяг пам’яті. Це ще більша проблема для переносних пристроїв та інших додатків на пристрої, де конфіденційність може означати що люди суворо хочуть, щоб вміст зберігався на їхньому пристрої, а не на сервері чи хмарі, акцентуючи увагу на сховищі виклики».

Нині А.І. моделі використовують щось на зразок підходу Френка Сінатри до спогадів — тобто вони пам’ятають усе або взагалі нічого. Вони або зберігають всю інформацію, створену на кожному кроці часу, або забувають їх усю через заздалегідь визначений час. Сайнбаяр Сухбаатар, інший Facebook A.I. вчений-дослідник порівнює це з досконалим запам’ятовуванням усього, що сталося за останній тиждень, але абсолютно нічого, крім цього.

Вбудовування забудькуватості в А.І.

Дослідники вбудували «забуття» в ШІ. моделі раніше. Довга короткочасна пам'ять Моделі (LSTM), наприклад, додали механізм забування до рекурентних нейронних мереж (RNN), однієї з основних технологій, які керують машинним навчанням. «RNN мають внутрішню пам’ять, яка складається з одного вектора, тому забути його означає перезаписати його новою інформацією», — сказав Сухбаатар Digital Trends.

Навпаки, Expire-Span додає механізм забування до зовнішньої пам’яті, яка може містити тисячі векторів. Спостерігається нова інформація, але Expire-Span, чия назва нагадує тип етикеток терміну придатності на пляшках з молоком, має можливість визначати, як довго ця інформація повинна залишатися в пам’яті. Якщо інформація не вважається вирішальною для майбутнього, цю частину інформації можна робити поступово розпаду, перш ніж його остаточно викорінено з ШІ. пам’яті моделі, щоб звільнити місце для більш корисного інформації.

Щоб зробити це, модель повинна мати можливість передбачити, що є, а що ні, релевантним для конкретного завдання, перш ніж призначити правильну дату закінчення, після чого інформація зникне з A.I. система. Викидаючи нерелевантну інформацію, штучний інтелект Facebook. здатний обробляти інформацію у великих масштабах.

Як і у випадку з більшістю досліджень штучного інтелекту Facebook, гігант соціальних мереж не оголосив, що Expire-Span буде включено в будь-який з його основних продуктів у найближчому майбутньому. Але, оскільки Facebook має справу з дедалі більшою кількістю даних користувачів (не кажучи вже про його за чутками, переходить на розумні окуляри), неважко зрозуміти, як цю технологію можна застосувати. Коли майбутній А.І. інструменти здатні працювати на високому рівні продуктивності, незважаючи на роботу з величезними купами даних, причиною може бути Expire-Span.

Не робіть помилки, припускаючи, що створення забудькуватого ШІ знаменує собою ще один крок до створення A.I. але більш людяним. Точні причини, чому люди забувають речі, все ще є предметом багатьох досліджень дослідників. Як і у випадку з нейронними мережами, натхненними мозком, які домінують у сучасному штучному інтелекті, алгоритм забудькуватості Facebook змодельований на основі теорії забудькуватості; не спроба відтворити його з будь-якою біоточністю.

«Мозок — це дуже складна система, яка до кінця не вивчена, і існує багато різних типів пам’яті, які формують пам’ять людини», — сказав Сухе-Батор. «Expire-Span, як і всі інші A.I. механізми, можуть бути натхненний людським мозком, але в кінцевому підсумку не є вірним відображенням того, як насправді працює мозок. Зокрема, пам’ять сама по собі є дуже активною дослідницькою сферою. Аналогію з людською пам’яттю, яку ми описуємо, додано лише з метою ясності, хоча вона точно надихає нашу роботу».

І не забувайте!