Iată cum Facebook și-a predat Portalul A.I. a gândi ca un regizor de la Hollywood

Revizuire Facebook Portal+
Dan Baker/Digital Trends

Când Mark Zuckerberg a construit prima versiune a Facebook în camera sa de cămin al colegiului de la Harvard, și-a imaginat-o ca pe o fereastră care le-ar permite oamenilor să se uite la viețile altor utilizatori. Dacă Google era un motor de căutare pentru informații, atunci Facebook, prin contrast, era un motor de căutare pentru oameni. Cincisprezece ani mai târziu, Facebook a dus această ambiție la următorul nivel. Prin crearea Portal și Portal+, linia sa de difuzoare inteligente îmbunătățite pentru ecran, lansată în noiembrie 2018, Gigantul rețelelor sociale a creat o fereastră mult mai literală, permițând utilizatorilor Facebook să efectueze apeluri video către unul o alta.

Cuprins

  • A face camerele mai inteligente
  • Provocări tehnice
  • O piata in crestere
  • Provocări privind confidențialitatea în viitor?

Difuzoarele inteligente Portal literalizează un altul Facebook vis, de asemenea. Acolo unde Facebook a fost, în esență, un motor de căutare pentru oameni, Portal de fapt

face caută-le: cu o cameră itinerantă de 12 megapixeli, cu un câmp vizual de 140 de grade, care te urmărește prin cameră pentru a vedea ce faci. Ca Digital Trends pune-l în recenzia noastră, „dacă ești ocupat să te miști prin bucătărie în timp ce o întrebi pe bunica cum să-i facă celebrele chiftele, poți să fii ocupat în timp ce îi asculți vorbirea.”

Videoclipuri recomandate

Care este mai exact tehnologia inteligentă care conduce Portal? Și cum crede Facebook că a depășit provocarea de a face chat-ul video obișnuit să se simtă la fel de personal ca așezarea pentru o conversație reală? Răspunsul implică o inteligență artificială impresionantă - și o notă umană adăugată.

Legate de

  • A.I. care sesizează emoții. este aici și ar putea fi la următorul interviu de angajare
  • Pentru că 2020 nu este suficient de nebun, o gură de robot cântă A.I. rugăciuni la Paris
  • A.I. Upscaling face ca acest film din 1896 să pară filmat în 4K uluitor
Revizuire Facebook Portal+
Dan Baker/Digital Trends

A face camerele mai inteligente

Încă de la început, Facebook a știut că nucleul experienței sale cu Portal va fi așa-numitul sistem „Camera inteligentă”. Ideea camerei inteligente a fost să depășească tipul de fotografie statică pe care ni-l oferă servicii precum Skype de ani de zile și să joace un rol mai creativ în acest proces. Așa cum un regizor de film sau un director de imagine știe când să folosească o fotografie largă sau când să mărească pentru un prim-plan intim, la fel Facebook și-a provocat inginerii să imite aceeași abilitate cu Portal.

Pentru a oferi acestei camere atingerea umană necesară, Facebook a colaborat cu realizatorii de film pentru a găsi cea mai bună modalitate de a-și distila înțelepciunea în informații care pot fi învățate automat. Într-un caz, le-a cerut să demonstreze cum ar putea filma o scenă în care era imposibil să capteze toate informațiile relevante dintr-un unghi fix.

Portalul cuprinde o lentilă cu unghi extrem de larg în care toate deciziile de mișcare și editare sunt luate în întregime digital.

În altul, inginerii Facebook s-au uitat la diferitele elemente fotografice pe care operatorii de cameră le acordă prioritate în fotografiile de portret și peisaj. Aceste observații au stat la baza modelelor de software care încearcă să-i impregneze pe Portal cu unele dintre ciudateniile de luare a deciziilor pe care le-am atribui în mod normal creativității umane.

„Am vrut să creăm o experiență de apel video hands-free, care să elimine sentimentele de distanță fizică și este mai degrabă ca să stai împreună”, a explicat Eric Hwang, unul dintre inginerii din spatele Portal, pentru Digital Trends.

Sistemul rezultat – despre care Facebook spune că a durat „mai puțin de doi ani” pentru a crea de la zero – îi permite lui Portal să ia decizii menite să îmbunătățească fluxul unei conversații. Într-o postare de blog nou publicată, detaliază câteva dintre ilustrațiile de ce ar putea fi necesar acest lucru. De exemplu, dacă vă aflați într-o cameră aglomerată, plină de oameni care interacționează între ei, trebuie să aleagă când să urmărească un individ în afara cadrului sau când să micșoreze pentru a se adapta la noi subiecte.

Inginerii software de pe Facebook Eric Hwang (șezând inițial pe scaun) și Arthur Cavalcanti demonstrează urmărirea și încadrarea cinematografică a Portalului.

În mod similar, trebuie să învețe să facă față situațiilor de lumină în schimbare în timp real. Ce faci dacă subiectul tău stă întins într-o cameră întunecată, acoperit pe jumătate de o pătură, dar există copii care aleargă în fundal provocând neclaritatea mișcării? Portal cântărește toate aceste informații în mai puțin de o clipire și încearcă să determine cel mai bun rezultat. (Dacă doriți să controlați manual pe cine se concentrează, este posibil si asta acum.)

Provocări tehnice

Din punct de vedere tehnic, câteva lucruri fac tehnologia Portalului impresionantă. Primul este că poate face toate acestea fără utilizarea unei camere reale în mișcare. La începutul procesului de dezvoltare, inginerii Portal au încercat prototipuri care foloseau o cameră motorizată, care se rotește pentru a face față subiecților. Cu toate acestea, acest lucru a fost decis împotriva pe baza faptului că a cauzat o întârziere și un punct de potențială defecțiune mecanică. În schimb, Portal cuprinde un obiectiv cu unghi extrem de larg în care toate deciziile de mișcare și editare sunt luate în întregime digital.

În al doilea rând, echipa care lucrează pe Portal a găsit o modalitate de a-și realiza procesele de luare a deciziilor fără a fi nevoită să se bazeze pe cloud computing. Potrivit lui Hwang, puterea de foc de calcul este realizată în întregime în dispozitiv.

Evoluția portalului Facebook
Primele prototipuri Portal se bazau pe un motor pentru a mișca fizic camera.Inginerie Facebook

„Capturarea tuturor într-un cadru video nu este o problemă grea de inginerie, deoarece mulți ingineri pot face asta cu progresele actuale ale vederii computerizate”, a spus el. „Inovația constă în capturarea persoanelor sau persoanei relevante în timp real, pe dispozitiv, folosind doar micul cip mobil din Portal ca putere de procesare. De obicei, aceste tipuri de A.I. sarcinile necesită servere mari dedicate. [Noi] am depășit acest obstacol comprimând modele complexe de viziune computerizată până când s-au putut încadra pe cipul pe care îl folosim pentru Portal și încă rulează precis și fiabil.”

Pentru a face acest lucru, Portal se bazează pe investiția pe termen lung a Facebook în inteligența artificială. Utilizează un sistem 2D de detectare a poziției care rulează la 30 de cadre pe secundă. Intenționalitatea acestor poziții îl ajută pe Portal să ia decizii continue cu privire la ceea ce fac subiecții săi - și când ar putea fi nevoie să facă panouri sau zoom digital ca rezultat. În plus, utilizează cercetarea camerelor de profunzime dezvoltate de Facebook Reality Labs ca parte a eforturilor de realitate virtuală ale gigantului rețelelor sociale.

O piata in crestere

Facebook este convins că este un câștigător cu Portal. Este ușor de văzut de unde îi vine încrederea. În acest moment, piața difuzoarelor inteligente este în plină expansiune. Deși este dominată în mare măsură de liderul de piață Amazon, este crescând cu peste 100 la sută de la an la an. Aceasta este o veste bună pentru companiile de tehnologie care caută următorul lucru important într-un moment de aplatizare smartphone vânzări.

Revizuire Facebook Portal+
Dan Baker/Digital Trends

În timp ce Facebook a fost ultimul dintre cei patru mari giganți ai tehnologiei (Amazon, Alphabet, Facebook și Apple) pentru a sări în vagon, este încă unul dintre primii val de difuzoare inteligente centrate în jurul ecranului ca dispozitiv de comunicare.

„Portal este singurul produs de acest fel de pe piață”, a spus Hwang. „Astăzi, difuzoarele și afișajele inteligente sunt construite în jurul informațiilor și comerțului. Portalul este creat pentru a facilita conectarea cu oamenii care contează cel mai mult: prietenii și familia cei mai apropiați. Iar Portal se concentrează pe conectarea oamenilor – o parte a misiunii Facebook – care în prezent nu este bine deservită de piața dispozitivelor de acasă.”

Provocări privind confidențialitatea în viitor?

Deci, ce oprește Facebook-ul? Ei bine, posibil confidențialitate. Utilizatorii s-au dovedit în mod surprinzător de dispuși să accepte gadgeturi care „ascultă mereu” de la companii precum Google cu un interes personal pentru datele utilizatorilor. Dar un dispozitiv care te urmărește și te ascultă este și mai invaziv. În plus, reputația Facebook încă suferă după scandalul Cambridge Analytica de anul trecut.

Adăugarea de inteligență la camera de chat video Portal (Facebook)

Cu doar câteva zile înainte de publicarea acestui articol, Washington Post raportat că Facebook negociază un acord record, în valoare de mai multe miliarde de dolari, cu FTC pentru delictele sale privind confidențialitatea. Cu o reacție în creștere din partea multor foști utilizatori, încă nu a fost dezvăluit dacă Facebook are o lovitură în stil Amazon Echo pe mâini – sau un flop în stil Amazon Fire Phone.

Facebook ne-a asigurat că nu ascultă, vizualizează și nu păstrează conținutul apelurilor video Portal, care sunt în plus criptate pentru a evita interceptarea. Faptul că A.I. al lui Portal. smarts rulează local pe dispozitiv și nu pe Facebook servere, înseamnă, de asemenea, că aceste informații nu părăsesc casa dvs. Comenzile vocale sunt trimise companiei numai după ce spui „Hei Portal”, iar utilizatorii își pot șterge oricând istoricul vocal din jurnalul de activitate al Facebook.

Dar nu se poate ocoli faptul că există încă un anumit grad de colectare a datelor. „Deși nu ascultăm, vizualizăm sau păstrăm conținutul apelurilor dvs. video pe portal și nu folosim aceste informații pentru a viza anunțuri, procesați unele informații despre utilizarea dispozitivului pentru a înțelege cum este utilizat Portal și pentru a îmbunătăți produsul”, notează Facebook. (Politica de confidențialitate a portalului poate fi citit aici.)

Portalul oferă o tehnologie foarte inteligentă, cu implicații masive pentru viitorul chat-ului video. Nu există nicio îndoială că compania a reușit să realizeze ceva foarte impresionant din punct de vedere tehnologic. Dar dacă poate convinge potențialii clienți că aceasta este o soluție de care au nevoie în viața lor se va dovedi, în cele din urmă, a fi adevărata realizare.

Recomandările editorilor

  • Citiți „scriptura sintetică” ciudat de frumoasă a unui A.I. care crede că este Dumnezeu
  • Supermodel lingvistic: cum GPT-3 introduce în liniște A.I. revoluţie
  • Am folosit un A.I. instrument de design pentru a veni cu un nou logo. Iată ce s-a întâmplat
  • I.A. neuro-simbolic. este viitorul inteligenței artificiale. Iată cum funcționează
  • Revizuirea ascensiunii A.I.: Cât de departe a ajuns inteligența artificială din 2010?