Овај мали сензор ће заувек променити камеру вашег телефона

„Верујемо да постоји права прилика да се развије и користи спектрални снимач слике у паметном телефону. Упркос свом напретку који је направљен са различитим камерама и рачунарском снагом паметног телефона, нико не може заиста да идентификује праву боју слике.”

Овако Спектричност Извршни директор Винцент Моурет описао је мисију компаније Дигитал Трендс у недавном интервјуу, као и разлог зашто прави минијатуризовани спектрални сензор слике који је спреман за употребу у смартфон. Али шта је тачно спектрални сензор и како функционише? Испоставило се да може учинити много више од снимања лепих боја.

Да ли сте икада видели ову боју?

Пре него што дођемо до свега тога, хајде да разговарамо о томе шта Спецтрицити-ов С1 мултиспектрални сензор слике ради за камере. Већина телефонских камера користи РГБ сензоре у три боје (црвени, зелени и плави), али Спецтрицити С1 сензор гледа даље у видљиво светло и блиски инфрацрвени опсег за репродукцију природнијих, конзистентнијих боја, заједно са знатно побољшаном белом баланс.

„Стандардна камера интегрисана у паметни телефон има РГБ сензор који види црвену, зелену и плаву“, рекао је Моурет. „Додамо филтере за креирање до 16 различитих слика са различитим бојама, различитим таласним дужинама светлост, светлост која долази из различитих извора, и рефлектована светлост која долази од објекта сцена. Можете идентификовати много различитих својстава захваљујући овим различитим сликама у поређењу са стандардним РГБ-ом.”

То значи да ће без обзира на услове осветљења, слике снимљене телефоном са С1 сензором имати конзистентније боје, као што можете видети на слици испод. Током нашег разговора видео сам демонстрацију уживо која је реплицирала репродукцију боја и доследност која се види у примеру, али вреди напоменути да је сензором управљао рачунар, а не а смартфон.

„Видећете да се код Ксиаоми, Самсунг, Аппле и Хуавеи камера боје веома разликују у различитим условима осветљења. У истој сцени снимљеној са нашим спектралним снимачем, постоје мале разлике, али мање. Боје на сликама су боје које видимо голим оком. Можете видети да сви паметни телефони производе веома различите боје."

Ова тачност боја ће такође побољшати способност камера паметних телефона да боље репродукују различите тонове коже. На другом примеру слике, С1 сензор је показао значајна побољшања и овде.

„Можете да видите да су тонови коже потпуно различити у зависности од услова осветљења“, истакао је Моурет. „Решење је да се користи спектрални снимач за анализу услова осветљења, да би се заиста дао прави тон. Ово је једини начин. Можете ставити много АИ иза тога, али то није довољно. Морате имати додатни хардвер."

Нажалост, Моурет није имао а Гоогле Пикел телефон при руци за упоређивање С1 сензора Гоогле-ова рачунарска технологија Реал Тоне, који обећава да ће урадити нешто слично, само по коришћење софтверских побољшања.

Да ли је то сензор или камера?

Чини се да су предности спектралног сензора слике као што је С1 јасне, а ко не жели ефикаснији баланс белог и природне, конзистентне боје на својим фотографијама? Али начин на који је Моурет описао способност С1 учинио је да звучи више као камера него као сензор. Која је то? Може ли се заиста уклопити у паметни телефон? Ако јесте, које модификације ће бити потребне?

Инжењер Спецтрицити апликације Мајкл Џејкобс, који је водио демо који сам гледао, објаснио је шта је заправо С1.

„То је заиста пратећи сензор, веома сличан сензору дубине или 3Д сензору који се користи са РГБ камером“, потврдио је он.

Међутим, јесте технички снимајте фотографије, само не оне које бисте желели да користите појединачно, као што је Моурет објаснио:

„Наш сензор слике има ВГА резолуцију, 800 к 600 пиксела. Морате да комбинујете ову мању спектралну слику са РГБ сликом. Сам модул је заиста веома мали. Дизајниран је да се интегрише у паметни телефон. Дакле, то је 5 мм са 5 мм са 6 мм“, рекао ми је Моурет, пре него што је рекао више о томе како је сензор направљен. „Није лако, али није ништа софистицирано, рекао бих“, објаснио је он, рекавши да је модул направљен коришћењем истих метода као и обични ЦМОС сензори. „У погледу укупне цене, комплетан модул ће коштати исту цену као стандардна камера велике запремине.“

Тренутно, сензор ће се интегрисати са стандардним процесором сигнала слике (ИСП) који користе процесори паметних телефона компаније Куалцомм и МедиаТек, али ће за рад бити потребан додатни софтвер.

С1 мултиспектрални сензор слике није пони са једним триком, и заправо има интригантну другу функцију, у томе што може да препозна и анализира биомаркере коже. То значи да је у стању да каже да ли „види“ праву особу, што би се могло користити за безбедносне апликације – на пример, зна ако неко носи маску да би прикрио свој идентитет — негу коже, па чак и у здравственим апликацијама када се комбинује са вештачком интелигенцијом и другим софтвер. Такође се може користити за побољшање фотографија у портретном режиму.

Када ће се користити у телефону?

Произвођачи већ неко време раде на побољшању репродукције боја на телефонима, враћајући се на ЛГ Г5 2016. године, који је користио наменски сензор спектра боја поред свог ласерског сензора аутофокуса за побољшање перформанси боја. Хуавеи је заузео другачији приступ и напустио РГБ сензор на П30 Про у корист РИИБ сензора, у његовом настојању да боље репродукује боје и побољша перформансе при слабом осветљењу. Олимпус и Имец су такође експериментисали са скоро инфрацрвеним РГБ сензорима за различите примене.

Спецтрицити С1 сензор је први на свету и иде у другом правцу од ових примера. На основу демонстрације и примера слика, показује прилично обећање - али када треба да очекујемо да га видимо на телефону?

„У почетку ће бити представљен на врхунским телефонима“, рекао је Моурет. „То ће бити мали обим 2024., већи 2025., а онда ће почевши од 2026. бити распрострањенији.

Моурет такође очекује да ће први примери доћи од кинеских произвођача паметних телефона, а не од компанија попут Самсунга и Епла. Међутим, Моурет очекује да ће се то променити у будућности, иу будућности Саопштење за штампу ЦЕС 2023 за сензор С1, није се суздржавао од својих очекивања, рекавши:

„Очекујемо да ће први модели паметних телефона са С1 бити објављени 2024. и очекујемо да ће сви паметни телефони укључити нашу технологију у наредним годинама.

Да, сви паметни телефони. То је велика мета, али ако су перформансе које смо видели у демо-у оно што ћемо на крају видети са телефонске камере са С1 поред ње, мали број произвођача ће желети да буде остављен.

Препоруке уредника

• Може ли телефон од 450 долара победити камере Самсунг Галаки С23? То је близу
• Нисте спремни за овај Галаки С23 вс. Тест камере иПхоне 14 Про
• Ксиаоми-јев нови телефон има камеру од 200МП — и његове фотографије су запањујуће
• Аппле-ов керамички штит може вам променити мишљење о заштити екрана за иПхоне 14
• ОнеПлус 10Т вс. Ништа Телефон 1 битка камере не би требало да буде тако близу