O Facebook construiu uma IA Que se esquece intencionalmente das coisas

click fraud protection

“Olá, HAL. Você me lê, HAL? disse o astronauta Dave Bowman, tentando desesperadamente manter suas emoções sob controle.

Conteúdo

  • O que pensamos quando pensamos em esquecer
  • Construindo o esquecimento na IA

Houve uma pausa e então, num tom monótono e sem emoção, o computador respondeu. “Afirmativo, Dave. Eu li você.

Vídeos recomendados

“Abra as portas do compartimento das cápsulas, HAL.”

Outra longa pausa. Foi HAL, o todo-poderoso A.I. que controlava o Descoberta Um nave espacial, realmente ignorando-o? Impossível, certamente, pensou Bowman. A qualquer momento, HAL entraria em ação e obedeceria...

“Sinto muito, Dave”, continuou HAL. “Receio não poder fazer isso.”

"Qual é o problema?" Dave perguntou.

“Bem, você vê, Dave. Esqueci como abri-los.

OK, não foi exatamente assim que as coisas aconteceram 2001: Uma Odisseia no Espaço, mas as piadas basicamente se escrevem sozinhas. Afinal, quando se trata de inteligência artificial, uma boa memória parece ser um dos pré-requisitos de qualidade que os investigadores desejam incorporar nos seus sistemas. Ninguém quer uma IA. que se modela segundo o tipo de inteligência cotidiana e comum que esquece as coisas. Então por que, então, é

Facebook construindo uma IA esquecida? E por que, como a velha piada sobre o garçom e a mosca na sopa do cliente, em breve todos nós vamos querer uma?

O que pensamos quando pensamos em esquecer

A resposta, ao que parece, é que nós fazer quero algo que seja mais parecido com a inteligência comum e comum que esquece as coisas aqui e ali. Os humanos esquecem coisas importantes como aniversários e carteiras e fecham a garagem antes de sair de férias. Isso é um esquecimento abaixo do ideal. Mas também esquecemos informações porque não precisamos retê-las, interrompendo-as como um pedaço de detritos presos no coletor de alimentos do ralo da pia antes que possam passar por curto e longo prazo memória.

IA do Facebook

Em um famoso experimento, pediu-se às pessoas que reconhecessem corretamente um centavo dos EUA a partir de uma coleção de fotos que mostravam moedas incorretas. Embora os participantes provavelmente vissem e usassem moedas de um centavo todos os dias, eles se mostraram surpreendentemente fracos na tarefa. Como escreveram os pesquisadores: “No geral, os resultados foram consistentes com a ideia de que os detalhes visuais de um objeto, mesmo um objeto muito familiar, normalmente estão disponíveis na memória apenas na medida em que são úteis no dia a dia. vida."

Embora não seja tão simples quanto dizer que o cérebro pode ficar cheio como o armazenamento no disco rígido, certamente existem problemas de curto prazo. memórias que parecem decair quando não são mais necessárias, enquanto outras penetram em nossos cérebros e vivem lá sem aluguel. Um exemplo? Pense onde você guardou as decorações de Natal nas últimas férias. Em seguida, caminhe mentalmente da recepção até o seu quarto no último hotel em que você se hospedou, onde é improvável que você se hospede novamente. Nenhuma das informações é de vital importância para o seu bem-estar. No entanto, uma informação é necessária e a outra não. De alguma forma, seu cérebro sabe qual jogar no lixo.

Esta é a ideia por trás da nova IA do Facebook. projeto, denominado Expire-Span. Como inteligência artificial modelos são cada vez mais aplicados a conjuntos de dados de formato longo, como artigos e livros, os custos computacionais associados a esses modelos aumentam à medida que tentam memorizar mais informações. O problema está a tornar-se ainda mais premente à medida que as pessoas recolhem cada vez mais dados multimédia ricos sobre as suas vidas.

“O cérebro é um sistema muito complexo que não é totalmente compreendido e existem muitos tipos diferentes de memória que formam a memória humana.”

“À medida que cresce a quantidade de conteúdo que temos, a principal questão é o armazenamento”, Ângela Fã, cientista pesquisador do Facebook AI Research Paris, disse à Digital Trends. “Um telefone, por exemplo, tem uma quantidade limitada de memória. Este é um problema ainda maior em wearables e outras aplicações do tipo dispositivo, onde razões de privacidade podem significar que as pessoas desejam estritamente o conteúdo armazenado em seus dispositivos e não em um servidor ou nuvem, acentuando o armazenamento desafios.”

IA atual os modelos adotam uma abordagem semelhante à de Frank Sinatra em relação às memórias – ou seja, eles se lembram de tudo ou de nada. Ou eles armazenam todas as informações criadas a cada passo de tempo, ou esquecem todas elas após um tempo pré-determinado. Sainbayar Sukhbaatar, outra IA do Facebook cientista pesquisador, compara isso a lembrar perfeitamente tudo o que aconteceu na última semana, mas absolutamente nada além disso.

Construindo o esquecimento na IA

Os pesquisadores incorporaram o “esquecimento” na IA. modelos antes. Memória de longo prazo Os modelos (LSTM), por exemplo, adicionaram um mecanismo de esquecimento às redes neurais recorrentes (RNN), uma das principais tecnologias que impulsionam o aprendizado de máquina. “Os RNNs têm uma memória interna que consiste em um vetor, então esquecê-lo significa substituí-lo por novas informações”, disse Sukhbaatar ao Digital Trends.

Por outro lado, Expire-Span adiciona um mecanismo de esquecimento à memória externa que pode conter milhares de vetores. Novas informações são observadas, mas o Expire-Span – cujo nome lembra o tipo de rótulo de prazo de validade encontrado nas garrafas de leite – tem a capacidade de determinar quanto tempo essa informação deve permanecer na memória. Se a informação não for considerada crucial para o futuro, essa informação pode ser gradualmente decadência, antes de ser finalmente erradicado da IA. memória do modelo para abrir espaço para mais útil Informação.

Para fazer isso, o modelo precisa ser capaz de prever o que é ou não relevante para um determinado tarefa, antes de atribuir a data de validade correta, após a qual a informação desaparecerá do A.I. sistema. Ao despejar informações irrelevantes, a IA do Facebook é capaz de processar informações em escalas maiores.

IA do Facebook

Tal como acontece com grande parte da pesquisa de inteligência artificial do Facebook, o gigante das redes sociais não anunciou que o Expire-Span será incorporado a qualquer um dos seus principais produtos no futuro imediato. Mas, à medida que o Facebook lida com cada vez mais dados de usuários (sem mencionar sua rumores de mudança para óculos inteligentes), não é difícil ver como essa tecnologia poderia ser aplicada. Quando o futuro A.I. Embora as ferramentas sejam capazes de funcionar com altos níveis de desempenho, apesar de lidarem com grandes quantidades de dados, o Expire-Span pode ser o motivo.

Não cometa o erro de presumir que criar uma I.A. marca mais um passo para tornar a I.A. mais humano, no entanto. As razões exatas pelas quais os humanos esquecem as coisas ainda são objeto de muitas investigações por parte dos pesquisadores. Tal como acontece com as redes neurais inspiradas no cérebro que dominam a IA moderna, o algoritmo do esquecimento do Facebook é modelado na teoria do esquecimento; não uma tentativa de replicá-lo com qualquer biofidelidade.

“O cérebro é um sistema muito complexo que não é totalmente compreendido e existem muitos tipos diferentes de memória que formam a memória humana”, disse Sukhbaatar. “Expire-Span, como todos os outros A.I. mecanismos, podem ser inspirado pelo cérebro humano, mas, em última análise, não são reflexos fiéis de como o cérebro realmente funciona. A memória, em particular, é uma área de pesquisa muito ativa por si só. A analogia da memória humana que descrevemos é adicionada apenas para fins de clareza, embora definitivamente inspire o nosso trabalho.”

E não se esqueça disso!

Recomendações dos Editores

  • A nova IA de reconhecimento de imagem do Facebook é treinado em 1 bilhão de fotos do Instagram
  • A nova IA do Facebook leva o reconhecimento de imagem a um nível totalmente novo
  • Como a IA pode derrotar malware que ainda nem existe