यह छोटा सा सेंसर आपके फोन के कैमरे को हमेशा के लिए बदलने वाला है

“हमारा मानना ​​है कि स्मार्टफोन में स्पेक्ट्रल इमेजर विकसित करने और उपयोग करने का एक वास्तविक अवसर है। विभिन्न कैमरों और स्मार्टफोन की कंप्यूटिंग शक्ति के साथ हुई सभी प्रगति के बावजूद, कोई भी वास्तव में तस्वीर के असली रंग की पहचान नहीं कर सकता है।

यह कैसे है विशिष्टता सीईओ विंसेंट मौरेट ने हाल ही में एक साक्षात्कार में डिजिटल ट्रेंड्स के लिए कंपनी के मिशन का वर्णन किया, साथ ही इसका कारण भी बताया कि वह एक लघु वर्णक्रमीय छवि सेंसर क्यों बना रहा है जो उपयोग के लिए तैयार है। स्मार्टफोन. लेकिन वर्णक्रमीय सेंसर वास्तव में क्या है, और यह कैसे काम करता है? यह पता चला है, यह सुंदर रंगों को कैद करने के अलावा और भी बहुत कुछ कर सकता है।

क्या आपने कभी यह रंग देखा है?

इससे पहले कि हम यह सब करें, आइए बात करें कि स्पेक्ट्रिकिटी का S1 मल्टीस्पेक्ट्रल इमेज सेंसर कैमरों के लिए क्या करता है। अधिकांश फ़ोन कैमरे तीन-रंग वाले RGB (लाल, हरा और नीला) सेंसर का उपयोग करते हैं, लेकिन स्पेक्ट्रिकिटी S1 सेंसर आगे दिखता है अधिक प्राकृतिक, अधिक सुसंगत रंगों के साथ-साथ काफी बेहतर सफेद रंग को पुन: पेश करने के लिए दृश्य प्रकाश और निकट-अवरक्त रेंज संतुलन।

मौरेट ने कहा, "स्मार्टफोन में एकीकृत एक मानक कैमरे में एक आरजीबी सेंसर होता है जो लाल, हरा और नीला देखता है।" “हम अलग-अलग रंगों, अलग-अलग तरंग दैर्ध्य के साथ 16 अलग-अलग छवियां बनाने के लिए फ़िल्टर जोड़ते हैं प्रकाश, विभिन्न स्रोतों से आने वाला प्रकाश, और वस्तु से आने वाला परावर्तित प्रकाश दृश्य। आप मानक आरजीबी की तुलना में इन विभिन्न छवियों के कारण कई अलग-अलग गुणों की पहचान कर सकते हैं।

इसका मतलब यह है कि प्रकाश की स्थिति चाहे जो भी हो, S1 सेंसर वाले फ़ोन द्वारा ली गई छवियों में अधिक सुसंगत रंग होंगे, जैसा कि आप नीचे दी गई उदाहरण छवि में देख सकते हैं। हमारी बातचीत के दौरान, मैंने एक लाइव प्रदर्शन देखा जिसमें रंग पुनरुत्पादन को दोहराया गया था उदाहरण में देखी गई स्थिरता, लेकिन यह ध्यान देने योग्य है कि सेंसर एक पीसी द्वारा संचालित था, न कि एक पीसी द्वारा स्मार्टफोन।

“आप Xiaomi, Samsung, Apple और Huawei कैमरों के साथ देखेंगे कि विभिन्न प्रकाश स्थितियों में रंग बहुत भिन्न होते हैं। हमारे स्पेक्ट्रल इमेजर से लिए गए एक ही दृश्य में, थोड़ा अंतर है, लेकिन मामूली अंतर है। छवियों में मौजूद रंग हमारी नंगी आँखों से देखे गए रंग हैं। आप देख सकते हैं कि सभी स्मार्टफ़ोन बहुत अलग-अलग रंग उत्पन्न करते हैं।

यह रंग सटीकता स्मार्टफोन कैमरों की विभिन्न त्वचा टोन को बेहतर ढंग से पुन: पेश करने की क्षमता में भी सुधार करेगी। एक अन्य उदाहरण छवि में, S1 सेंसर यहां भी काफी सुधार दिखाता हुआ दिखाई दिया।

मॉरेट ने बताया, "आप देख सकते हैं कि रोशनी की स्थिति के आधार पर त्वचा का रंग बिल्कुल अलग होता है।" “समाधान वास्तव में सही टोन देने के लिए, प्रकाश की स्थिति का विश्लेषण करने के लिए एक वर्णक्रमीय इमेजर का उपयोग करना है। यही एक रास्ता है। आप इसके पीछे बहुत सारा AI लगा सकते हैं, लेकिन यह पर्याप्त नहीं है। आपके पास कुछ अतिरिक्त हार्डवेयर होने चाहिए।"

दुर्भाग्य से, मौरेट के पास नहीं था गूगल पिक्सेल S1 सेंसर की तुलना करने के लिए फ़ोन हाथ में है Google की रियल टोन कम्प्यूटेशनल तकनीक, जो कुछ ऐसा ही करने का वादा करता है, केवल द्वारा सॉफ़्टवेयर संवर्द्धन का उपयोग करना.

क्या यह एक सेंसर है, या एक कैमरा?

एस1 जैसे वर्णक्रमीय छवि सेंसर के लाभ स्पष्ट प्रतीत होते हैं, और कौन अपनी तस्वीरों में अधिक प्रभावी सफेद संतुलन और प्राकृतिक, सुसंगत रंग नहीं चाहता है? लेकिन जिस तरह से मौरेट ने S1 की क्षमता का वर्णन किया, उससे यह एक सेंसर की तुलना में कैमरे की तरह अधिक लगता है। जो यह है? क्या यह सचमुच स्मार्टफोन के अंदर फिट हो सकता है? यदि हां, तो किन संशोधनों की आवश्यकता होगी?

स्पेक्ट्रिकिटी एप्लिकेशन इंजीनियर माइकल जैकब्स, जिन्होंने मेरे द्वारा देखा गया डेमो चलाया, ने बताया कि S1 वास्तव में क्या है।

उन्होंने पुष्टि की, "यह वास्तव में एक साथी सेंसर है, जो गहराई सेंसर या आरजीबी कैमरे के साथ उपयोग किए जाने वाले 3डी सेंसर के समान है।"

हालाँकि, ऐसा होता है तकनीकी तौर पर फ़ोटो लें, केवल वे नहीं जिन्हें आप व्यक्तिगत रूप से उपयोग करना चाहेंगे, जैसा कि मौरेट ने समझाया:

“हमारे इमेज सेंसर का वीजीए रिज़ॉल्यूशन 800 x 600 पिक्सल है। आपको इस छोटी वर्णक्रमीय छवि को RGB छवि के साथ संयोजित करने की आवश्यकता है। मॉड्यूल स्वयं वास्तव में बहुत छोटा है। इसे स्मार्टफोन में एकीकृत करने के लिए डिज़ाइन किया गया है। तो यह 5 मिमी गुणा 5 मिमी गुणा 6 मिमी है,'' सेंसर कैसे बनाया जाता है, इसके बारे में और अधिक बताने से पहले मौरेट ने मुझे बताया। "यह आसान नहीं है, लेकिन मैं कहूंगा कि यह बहुत परिष्कृत भी नहीं है," उन्होंने समझाया, और कहा कि मॉड्यूल नियमित सीएमओएस सेंसर के समान तरीकों का उपयोग करके बनाया गया है। "कुल लागत के संदर्भ में, पूरे मॉड्यूल की लागत उच्च-वॉल्यूम मानक कैमरे के समान होगी।"

अभी, सेंसर क्वालकॉम और मीडियाटेक के स्मार्टफोन प्रोसेसर द्वारा उपयोग किए जाने वाले मानक इमेज सिग्नल प्रोसेसर (आईएसपी) के साथ एकीकृत होगा, लेकिन इसे संचालित करने के लिए अतिरिक्त सॉफ्टवेयर की आवश्यकता होगी।

S1 मल्टीस्पेक्ट्रल इमेज सेंसर एक चाल वाली चीज़ नहीं है, और वास्तव में इसका एक दिलचस्प दूसरा कार्य है, जिसमें यह त्वचा बायोमार्कर को पहचान और विश्लेषण कर सकता है। इसका मतलब यह है कि यह यह बताने में सक्षम है कि क्या यह किसी वास्तविक व्यक्ति को "देख" रहा है, जिसका उपयोग सुरक्षा अनुप्रयोगों के लिए किया जा सकता है - उदाहरण के लिए, यह जानता है अगर कोई अपनी पहचान छुपाने के लिए मास्क पहन रहा है - त्वचा की देखभाल, और यहां तक ​​कि एआई और अन्य के साथ संयुक्त होने पर स्वास्थ्य अनुप्रयोगों में भी सॉफ़्टवेयर। इसका उपयोग पोर्ट्रेट मोड फ़ोटो को बेहतर बनाने के लिए भी किया जा सकता है।

फ़ोन में इसका उपयोग कब किया जाएगा?

निर्माता पिछले कुछ समय से फोन पर रंग पुनरुत्पादन को बेहतर बनाने के लिए काम कर रहे हैं एलजी जी5 2016 में, जिसने रंग प्रदर्शन को बेहतर बनाने के लिए अपने लेजर ऑटोफोकस सेंसर के साथ एक समर्पित रंग स्पेक्ट्रम सेंसर का उपयोग किया। हुआवेई ने एक अलग दृष्टिकोण अपनाया और आरजीबी सेंसर को छोड़ दिया P30 प्रो रंगों को बेहतर ढंग से प्रस्तुत करने और कम रोशनी में प्रदर्शन को बेहतर बनाने के प्रयास में, RYYB सेंसर के पक्ष में। ओलिंप और इमेक विभिन्न अनुप्रयोगों के लिए निकट-अवरक्त आरजीबी सेंसर के साथ भी प्रयोग किया है।

स्पेक्ट्रिकिटी S1 सेंसर दुनिया का पहला है और इन उदाहरणों से अलग दिशा में जाता है। डेमो और उदाहरण छवियों के आधार पर, यह काफी आशाजनक दिख रहा है - लेकिन हमें इसे फोन पर कब देखने की उम्मीद करनी चाहिए?

मौरेट ने कहा, "शुरुआत में इसे हाई-एंड फोन पर पेश किया जाएगा।" "यह 2024 में छोटी मात्रा में होगा, 2025 में अधिक मात्रा में होगा, और फिर 2026 में शुरू होकर, यह अधिक व्यापक होगा।"

मौरेट को यह भी उम्मीद है कि पहला उदाहरण चीनी स्मार्टफोन निर्माताओं से आएगा, न कि सैमसंग और ऐप्पल जैसी कंपनियों से। हालाँकि, मॉरेट को उम्मीद है कि भविष्य में इसमें बदलाव आएगा सीईएस 2023 प्रेस विज्ञप्ति S1 सेंसर के लिए, उन्होंने यह कहते हुए अपनी उम्मीदों पर पानी नहीं फेरा:

"हमें उम्मीद है कि S1 के साथ पहला स्मार्टफोन मॉडल 2024 में जारी किया जाएगा, और हम उम्मीद करते हैं कि आने वाले वर्षों में सभी स्मार्टफोन में हमारी तकनीक शामिल होगी।"

हाँ, सभी स्मार्टफोन. यह एक बड़ा लक्ष्य है, लेकिन अगर डेमो में हमने जो प्रदर्शन देखा, वह अंततः हम एस1 के साथ फोन कैमरे से देखेंगे, तो कुछ निर्माता पीछे रहना चाहेंगे।

संपादकों की सिफ़ारिशें

• क्या $450 का फ़ोन सैमसंग गैलेक्सी S23 के कैमरों को मात दे सकता है? यह करीब है
• आप इस गैलेक्सी S23 बनाम के लिए तैयार नहीं हैं। आईफोन 14 प्रो कैमरा टेस्ट
• Xiaomi के नए फ़ोन में 200MP का कैमरा है - और इसकी तस्वीरें आश्चर्यजनक हैं
• Apple का सिरेमिक शील्ड iPhone 14 स्क्रीन प्रोटेक्टर के बारे में आपका मन बदल सकता है
• वनप्लस 10T बनाम कुछ भी नहीं फोन 1 कैमरा लड़ाई इतनी करीबी नहीं होनी चाहिए