"Usume, et nutitelefonis spektraalkujutise väljatöötamiseks ja kasutamiseks on olemas tõeline võimalus. Vaatamata kõikidele edusammudele, mida erinevate kaamerate ja nutitelefonide arvutusvõimsusega on saavutatud, ei suuda ükski pildi tegelikku värvi tuvastada.
Sisu
- Kas olete seda värvi kunagi näinud?
- Kas see on sensor või kaamera?
- Millal seda telefonis kasutatakse?
Nii Spektrilisus Tegevjuht Vincent Mouret kirjeldas hiljutises intervjuus ettevõtte missiooni Digital Trendsi vallas ning põhjust, miks ettevõte valmistab miniatuurset spektraalset pildiandurit, mis on kasutamiseks valmis nutitelefoni. Aga mis täpselt on spektraalandur ja kuidas see töötab? Selgub, et see võib teha palju enamat kui lihtsalt jäädvustada ilusaid värve.
Soovitatavad videod
Kas olete seda värvi kunagi näinud?
Enne kui jõuame selle kõige juurde, räägime sellest, mida Spectricity S1 multispektraalne pildisensor kaamerate jaoks teeb. Enamik telefonikaameraid kasutab kolmevärvilisi RGB (punane, roheline ja sinine) andureid, kuid Spectricity S1 andur vaatab kaugemale. nähtav valgus ja peaaegu infrapuna vahemik, et reprodutseerida loomulikumaid ja ühtlasemaid värve ning oluliselt täiustatud valget värvi tasakaalu.
Seotud
- See juhtub, kui võrrelda 4 telefoni 800 MP kaamera testis
- Testisin Galaxy S23 Ultra ja iPhone 14 Pro kaameraid. Ainult üks on võitja
- Vere hapnikuseire tulevik on teie telefoni kaameras
"Nutitelefoni integreeritud standardkaameral on RGB-andur, mis näeb punast, rohelist ja sinist, " ütles Mouret. "Lisame filtreid, et luua kuni 16 erinevat erinevat värvi ja erineva lainepikkusega pilti valgus, erinevatest allikatest tulev valgus ja objekti objektilt peegeldunud valgus stseen. Tänu nendele erinevatele piltidele saate tuvastada palju erinevaid omadusi võrreldes tavalise RGB-ga.
See tähendab, et olenemata valgustingimustest on S1-sensoriga telefoniga tehtud piltidel ühtlasemad värvid, nagu näete alloleval näitepildil. Meie vestluse ajal nägin ma otseülekannet, mis kordas värvide reprodutseerimist ja järjepidevus on näites näha, kuid tasub märkida, et andurit juhtis arvuti, mitte a nutitelefoni.
"Xiaomi, Samsungi, Apple'i ja Huawei kaamerate puhul näete, et värvid on erinevates valgustingimustes väga erinevad. Meie spektraalkujutisega tehtud samas stseenis on väikseid erinevusi, kuid väiksemaid. Piltide värvid on värvid, mida meie palja silmaga näeb. Näete, et kõik nutitelefonid toodavad väga erinevaid värve.
See värvitäpsus parandab ka nutitelefonide kaamerate võimet erinevaid nahatoone paremini reprodutseerida. Teisel näitepildil näis, et S1 andur näitas ka siin märkimisväärseid täiustusi.
"Näete, et nahatoonid on olenevalt valgustingimustest täiesti erinevad, " märkis Mouret. «Lahendus on spektraalpildistaja abil valgusolude analüüsimiseks, et tõesti õige toon anda. See on ainus viis. Saate selle taha panna palju tehisintellekti, kuid sellest ei piisa. Teil peab olema lisariistvara."
Kahjuks ei olnud Mouretil a Google Pixel telefon käepärast, et S1 andurit võrrelda Google'i Real Tone arvutustehnoloogia, mis lubab midagi sarnast teha, ainult poolt tarkvara täiustuste kasutamine.
Kas see on sensor või kaamera?
Spektraalse pildianduri, nagu S1, eelised näivad olevat selged ja kes ei tahaks oma fotodelt tõhusamat valge tasakaalu ja loomulikke ühtseid värve? Kuid see, kuidas Mouret kirjeldas S1 võimet, pani selle kõlama pigem kaamera kui anduri moodi. Kumb see on? Kas see tõesti mahub nutitelefoni sisse? Kui jah, siis milliseid muudatusi on vaja?
Spektrirakenduse insener Michael Jacobs, kes juhtis demo, mida ma vaatasin, selgitas, mis S1 tegelikult on.
"See on tõesti kaasandur, mis on väga sarnane RGB-kaameraga kasutatava sügavusanduriga või 3D-sensoriga," kinnitas ta.
Siiski teeb tehniliselt pildistage, mitte neid, mida soovite eraldi kasutada, nagu Mouret selgitas:
“Meie pildisensor on VGA eraldusvõimega, 800 x 600 pikslit. Peate kombineerima selle väiksema spektripildi RGB-pildiga. Moodul ise on tõesti väga väike. See on loodud nutitelefoniga integreerimiseks. Nii et see on 5 mm x 5 mm x 6 mm, ”rääkis Mouret mulle, enne kui anduri ehituse kohta lähemalt rääkis. "See pole lihtne, kuid ma ütleksin, et see pole midagi väga keerulist," selgitas ta, öeldes, et moodul on ehitatud samadel meetoditel nagu tavalised CMOS-andurid. "Üldkulude osas on kogu moodul sama hinnaga kui suure mahuga standardkaamera."
Praegu integreerub andur standardse pildisignaaliprotsessoriga (ISP), mida kasutavad Qualcommi ja MediaTeki nutitelefonide protsessorid, kuid selle tööks on vaja täiendavat tarkvara.
S1 multispektraalne pildisensor ei ole ühe trikiga poni ja sellel on tegelikult intrigeeriv teine funktsioon, kuna see suudab tuvastada ja analüüsida naha biomarkereid. See tähendab, et see suudab kindlaks teha, kas see "näeb" päris inimest, mida saaks kasutada turvarakenduste jaoks – näiteks teab ta kui keegi kannab maski oma identiteedi varjamiseks – nahahoolduseks ja isegi terviserakendustes kombineerituna tehisintellektiga ja muude tarkvara. Seda saab kasutada ka portreerežiimi fotode täiustamiseks.
Millal seda telefonis kasutatakse?
Tootjad on juba mõnda aega töötanud selle nimel, et parandada telefonide värvide taasesitamist, pöördudes tagasi selle juurde LG G5 aastal 2016, mis kasutas värvide jõudluse parandamiseks koos laserautofookuse anduriga spetsiaalset värvispektri sensorit. Huawei kasutas teistsugust lähenemist ja loobus RGB-andurist P30 Pro RYYB sensori kasuks, püüdes paremini reprodutseerida värve ja parandada hämaras valguses. Olympus ja Imec on katsetanud ka lähi-infrapuna RGB andureid erinevate rakenduste jaoks.
Spectricity S1 andur on maailmas esimene ja läheb nendest näidetest erinevas suunas. Demo ja näidispiltide põhjal on see paljulubav – aga millal peaksime seda telefonis nägema?
"Alguses tutvustatakse seda tipptasemel telefonides, " ütles Mouret. "2024. aastal on see väike maht, 2025. aastal suurem ja alates 2026. aastast on see laiemalt levinud."
Mouret loodab ka, et esimesed näited tulevad Hiina nutitelefonide tootjatelt, mitte firmadelt nagu Samsung ja Apple. Kuid Mouret loodab, et see muutub tulevikus ja tulevikus CES 2023 pressiteade S1 anduri puhul ei hoidnud ta oma ootusi tagasi, öeldes:
"Ootame, et esimesed S1-ga nutitelefonimudelid ilmuvad 2024. aastal ja eeldame, et kõik nutitelefonid hõlmavad meie tehnoloogiat järgmiste aastate jooksul."
Jah, kõik nutitelefonid. See on suur eesmärk, kuid kui demos nähtud jõudlus on see, mida näeme lõpuks telefonikaamerast, mille kõrval on S1, tahavad vähesed tootjad maha jääda.
Toimetajate soovitused
- Kas 450-dollarine telefon võidab Samsung Galaxy S23 kaameraid? See on lähedal
- Te pole selleks Galaxy S23 vs. iPhone 14 Pro kaamera test
- Xiaomi uuel telefonil on 200 MP kaamera ja selle fotod on vapustavad
- Apple'i Ceramic Shield võib teie meelt iPhone 14 ekraanikaitse osas muuta
- OnePlus 10T vs. Nothing Phone 1 kaameralahing ei tohiks olla nii lähedal
