Šis mažas jutiklis visam laikui pakeis jūsų telefono kamerą

„Manome, kad yra reali galimybė išmaniajame telefone sukurti ir panaudoti spektrinį vaizdą. Nepaisant visos pažangos, padarytos naudojant skirtingas kameras ir išmaniojo telefono skaičiavimo galią, nė vienas iš tikrųjų negali nustatyti tikrosios nuotraukos spalvos.

Štai taip Spektriškumas Generalinis direktorius Vincentas Mouretas neseniai duodamas interviu apibūdino bendrovės misiją skaitmeninių tendencijų srityje, taip pat priežastį, kodėl ji kuria miniatiūrinį spektrinio vaizdo jutiklį, kuris yra paruoštas naudoti išmanusis telefonas. Bet kas tiksliai yra spektrinis jutiklis ir kaip jis veikia? Pasirodo, jis gali padaryti daug daugiau nei tiesiog užfiksuoti gražias spalvas.

Ar kada nors matėte šią spalvą?

Prieš pereidami prie viso to, pakalbėkime apie tai, ką Spectricity S1 daugiaspektrinis vaizdo jutiklis daro fotoaparatams. Daugumoje telefonų kamerų naudojami trijų spalvų RGB (raudonos, žalios ir mėlynos) jutikliai, tačiau Spectricity S1 jutiklis žiūri toliau į matoma šviesa ir beveik infraraudonųjų spindulių diapazonas, kad būtų atkurtos natūralesnės, nuoseklesnės spalvos ir žymiai patobulinta balta spalva pusiausvyrą.

"Standartinė kamera, integruota į išmanųjį telefoną, turi RGB jutiklį, kuris mato raudoną, žalią ir mėlyną spalvą", - sakė Mouret. „Pridedame filtrus, kad sukurtume iki 16 skirtingų vaizdų su skirtingomis spalvomis, skirtingais bangos ilgiais šviesa, šviesa, sklindanti iš skirtingų šaltinių, ir atspindėta šviesa, sklindanti iš objekto scena. Dėl šių skirtingų vaizdų, palyginti su standartiniu RGB, galite nustatyti daugybę skirtingų savybių.

Tai reiškia, kad nepaisant apšvietimo sąlygų, telefone su S1 jutikliu nufotografuotų vaizdų spalvos bus nuoseklesnės, kaip matote toliau pateiktame paveikslėlio pavyzdyje. Mūsų pokalbio metu mačiau gyvą demonstraciją, kuri atkartojo spalvų atkūrimą ir nuoseklumas matomas pavyzdyje, tačiau verta paminėti, kad jutiklis buvo valdomas kompiuteriu, o ne a išmanusis telefonas.

„Su Xiaomi, Samsung, Apple ir Huawei fotoaparatais pamatysite, kad skirtingomis apšvietimo sąlygomis spalvos labai skiriasi. Toje pačioje scenoje, darytoje su mūsų spektriniu vaizdu, yra nedideli skirtumai, bet nedideli. Vaizdų spalvos yra spalvos, kurias matome plika akimi. Matote, kad visi išmanieji telefonai gamina labai skirtingas spalvas.

Šis spalvų tikslumas taip pat pagerins išmaniųjų telefonų kamerų galimybę geriau atkurti skirtingus odos tonus. Kitame vaizdo pavyzdyje S1 jutiklis taip pat parodė reikšmingus patobulinimus.

„Galite matyti, kad odos tonai visiškai skiriasi priklausomai nuo apšvietimo sąlygų“, - pažymėjo Mouret. „Sprendimas yra naudoti spektrinį vaizdą, kad būtų galima išanalizuoti apšvietimo sąlygas, kad tikrai būtų suteiktas tinkamas tonas. Tai vienintelis būdas. Galite įdėti daug dirbtinio intelekto, bet to nepakanka. Turite turėti papildomos aparatinės įrangos.

Deja, Mouret neturėjo Google Pixel telefoną, kad galėtumėte palyginti S1 jutiklį Google Real Tone skaičiavimo technologija, kuris žada padaryti kažką panašaus, tik iki naudojant programinės įrangos patobulinimus.

Ar tai jutiklis, ar kamera?

Atrodo, kad tokio spektrinio vaizdo jutiklio, kaip S1, pranašumai yra akivaizdūs, o kas nenori efektyvesnio baltos spalvos balanso ir natūralių, nuoseklių spalvų savo nuotraukose? Tačiau tai, kaip Mouret apibūdino S1 galimybes, privertė jį atrodyti labiau kaip fotoaparatą, o ne jutiklį. Kuris? Ar jis tikrai tilps išmaniajame telefone? Jei taip, kokių pakeitimų reikės?

Spektriškumo taikymo inžinierius Michaelas Jacobsas, paleidęs demonstraciją, kurią žiūrėjau, paaiškino, kas iš tikrųjų yra S1.

„Tai tikrai papildomas jutiklis, labai panašus į gylio jutiklį arba 3D jutiklį, naudojamą su RGB kamera“, – patvirtino jis.

Tačiau tai daro techniškai fotografuokite, tik ne tas, kurias norėtumėte naudoti atskirai, kaip paaiškino Mouret:

„Mūsų vaizdo jutiklis turi VGA raišką, 800 x 600 pikselių. Turite sujungti šį mažesnį spektrinį vaizdą su RGB vaizdu. Pats modulis tikrai labai mažas. Jis sukurtas taip, kad būtų integruotas į išmanųjį telefoną. Taigi jis yra 5 mm x 5 mm x 6 mm“, – sakė Mouret, prieš pasakodamas daugiau apie jutiklio konstrukciją. „Tai nėra lengva, bet, sakyčiau, nieko labai sudėtingo“, – paaiškino jis, sakydamas, kad modulis sukurtas naudojant tuos pačius metodus, kaip ir įprasti CMOS jutikliai. „Kalbant apie bendras išlaidas, visas modulis kainuos tiek pat, kiek ir didelės apimties standartinė kamera.

Šiuo metu jutiklis bus integruotas su standartiniu vaizdo signalo procesoriumi (ISP), kurį naudoja išmaniųjų telefonų procesoriai iš „Qualcomm“ ir „MediaTek“, tačiau norint veikti, reikės papildomos programinės įrangos.

S1 daugiaspektrinis vaizdo jutiklis nėra vienkartinis ponis, o iš tikrųjų turi intriguojančią antrąją funkciją, nes gali atpažinti ir analizuoti odos biomarkerius. Tai reiškia, kad jis gali pasakyti, ar jis „mato“ realų asmenį, o tai gali būti panaudota saugos programoms – pavyzdžiui, ji žino jei kas nors dėvi kaukę, kad nuslėptų savo tapatybę – odos priežiūra ir net sveikatos priežiūros programose kartu su AI ir kitais programinė įranga. Jis taip pat gali būti naudojamas portreto režimo nuotraukoms patobulinti.

Kada jis bus naudojamas telefone?

Gamintojai jau kurį laiką stengėsi pagerinti spalvų atkūrimą telefonuose, grįždami prie LG G5 2016 m., kuris naudojo specialų spalvų spektro jutiklį kartu su lazerinio automatinio fokusavimo jutikliu, kad pagerintų spalvų veikimą. „Huawei“ pasirinko kitokį požiūrį ir atsisakė RGB jutiklio P30 Pro RYYB jutiklio naudai, stengiantis geriau atkurti spalvas ir pagerinti našumą esant prastam apšvietimui. Olimpas ir Imec taip pat eksperimentavo su beveik infraraudonųjų spindulių RGB jutikliais įvairioms programoms.

Spectricity S1 jutiklis yra pirmasis pasaulyje ir eina kitokia kryptimi nei šie pavyzdžiai. Remiantis demonstracine versija ir pavyzdiniais vaizdais, tai daug žada, bet kada turėtume tikėtis jį pamatyti telefone?

"Iš pradžių jis bus pristatytas aukščiausios klasės telefonuose", - sakė Mouret. „2024 m. jis bus mažas, 2025 m. didesnis, o nuo 2026 m. jis bus labiau paplitęs.

Mouret taip pat tikisi, kad pirmieji pavyzdžiai bus iš Kinijos išmaniųjų telefonų gamintojų, o ne iš tokių kompanijų kaip „Samsung“ ir „Apple“. Tačiau Mouret tikisi, kad tai pasikeis ateityje ir ateityje CES 2023 pranešimas spaudai dėl S1 jutiklio jis nesulaikė savo lūkesčių, sakydamas:

„Tikimės, kad pirmieji išmaniųjų telefonų modeliai su S1 bus išleisti 2024 m., o per ateinančius metus tikimės, kad visi išmanieji telefonai turės mūsų technologiją.

taip, visi išmanieji telefonai. Tai didelis tikslas, tačiau jei demonstracinėje versijoje matytas našumas yra toks, kokį galų gale pamatysime iš telefono kameros su S1 šalia jos, nedaugelis gamintojų norės likti nuošalyje.

Redaktorių rekomendacijos

• Ar 450 USD kainuojantis telefonas gali įveikti „Samsung Galaxy S23“ kameras? Tai arti
• Jūs nesate pasiruošę šiam Galaxy S23 vs. „iPhone 14 Pro“ fotoaparato testas
• Naujasis „Xiaomi“ telefonas turi 200 MP kamerą, o jo nuotraukos yra stulbinančios
• Apple Ceramic Shield gali pakeisti jūsų nuomonę apie iPhone 14 ekrano apsaugą
• OnePlus 10T vs. Nieko Telefono 1 kameros mūšis neturėtų būti toks artimas