Bu küçük sensör telefonunuzun kamerasını sonsuza kadar değiştirmek üzere

"Akıllı telefonda spektral görüntüleyici geliştirmek ve kullanmak için gerçek bir fırsat olduğuna inanıyoruz. Farklı kameralar ve akıllı telefonların bilgi işlem gücüyle kaydedilen tüm ilerlemelere rağmen, hiçbiri bir resmin gerçek rengini gerçekten belirleyemiyor."

Bu nasıl Spesifikasyon CEO Vincent Mouret yakın zamanda yapılan bir röportajda şirketin Dijital Trendler misyonunu ve aynı zamanda neden dijital ortamda kullanıma hazır minyatürleştirilmiş bir spektral görüntü sensörü ürettiğini anlattı. akıllı telefon. Peki spektral sensör tam olarak nedir ve nasıl çalışır? Görünüşe göre güzel renkleri yakalamaktan çok daha fazlasını yapabiliyor.

Bu rengi hiç gördünüz mü?

Tüm bunlara geçmeden önce Spectricity'nin S1 multispektral görüntü sensörünün kameralar için neler yaptığından bahsedelim. Çoğu telefon kamerası üç renkli RGB (kırmızı, yeşil ve mavi) sensörler kullanır ancak Spectricity S1 sensörü, Önemli ölçüde iyileştirilmiş beyazın yanı sıra daha doğal, daha tutarlı renkler üretmek için görünür ışık ve yakın kızılötesi aralığı denge.

Mouret, "Akıllı telefona entegre edilmiş standart bir kameranın kırmızı, yeşil ve maviyi gören bir RGB sensörü vardır" dedi. “Farklı renklerde, farklı dalga boylarında 16’ya kadar farklı görüntü oluşturmak için filtreler ekliyoruz. ışık, farklı kaynaklardan gelen ışık ve nesneden yansıyan ışık sahne. Standart bir RGB ile karşılaştırıldığında bu farklı görüntüler sayesinde birçok farklı özelliği tanımlayabilirsiniz.”

Bunun anlamı, aşağıdaki örnek resimde de görebileceğiniz gibi, aydınlatma koşulları ne olursa olsun, S1 sensörlü bir telefonla çekilen görüntülerin tamamında daha tutarlı renklere sahip olacağıdır. Konuşmamız sırasında renk üretimini taklit eden canlı bir gösteri gördüm ve örnekte görülen tutarlılık, ancak sensörün bir bilgisayar tarafından değil bir bilgisayar tarafından çalıştırıldığını belirtmekte fayda var. akıllı telefon.

"Xiaomi, Samsung, Apple ve Huawei kameralarında renklerin farklı aydınlatma koşullarında çok farklı olduğunu göreceksiniz. Spektral görüntüleyicimizle çekilen aynı sahnede ufak farklılıklar var, ancak küçük farklılıklar var. Görüntülerdeki renkler çıplak gözümüzün gördüğü renklerdir. Tüm akıllı telefonların çok farklı renkler ürettiğini görüyorsunuz.”

Bu renk doğruluğu aynı zamanda akıllı telefon kameralarının farklı cilt tonlarını daha iyi üretme yeteneğini de geliştirecek. Başka bir örnek görüntüde S1 sensörünün burada da önemli gelişmeler gösterdiği ortaya çıktı.

Mouret, "Işıklandırma koşullarına bağlı olarak ten tonlarının tamamen farklı olduğunu görebilirsiniz" dedi. "Çözüm, aydınlatma koşullarını analiz etmek ve gerçekten doğru tonu vermek için spektral bir görüntüleyici kullanmaktır. Bu tek yoldur. Arkasına çok fazla yapay zeka koyabilirsiniz, ancak bu yeterli değildir. Bazı ek donanımlara ihtiyacınız var.”

Ne yazık ki Mouret'nin Google Piksel S1 sensörünü karşılaştırmak için elinizdeki telefon Google'ın Real Tone hesaplama teknolojisibenzer bir şey yapmayı vaat eden, yalnızca yazılım geliştirmelerini kullanma.

Sensör mü yoksa kamera mı?

S1 gibi bir spektral görüntü sensörünün faydaları açık görünüyor ve kim fotoğraflarında daha etkili beyaz dengesi ve doğal, tutarlı renkler istemez ki? Ancak Mouret'in S1'in yeteneğini tanımlama şekli, onun bir sensörden çok bir kameraya benzemesini sağlıyordu. Hangisi? Gerçekten bir akıllı telefonun içine sığabilir mi? Eğer öyleyse, hangi değişikliklere ihtiyaç duyulacak?

İzlediğim demoyu çalıştıran Spectricity uygulama mühendisi Michael Jacobs, S1'in gerçekte ne olduğunu açıkladı.

"Bu gerçekten yardımcı bir sensör, derinlik sensörüne veya RGB kamerayla kullanılan 3D sensöre çok benziyor" diye onayladı.

Ancak bunu yapar teknik olarak Mouret'in açıkladığı gibi, yalnızca tek tek kullanmak isteyeceğiniz fotoğraflar değil, fotoğraf çekin:

“Görüntü sensörümüz 800 x 600 piksel VGA çözünürlüğüne sahip. Bu daha küçük spektral görüntüyü bir RGB görüntüsüyle birleştirmeniz gerekir. Modülün kendisi gerçekten çok küçük. Bir akıllı telefona entegre edilecek şekilde tasarlanmıştır. Yani 5 mm x 5 mm x 6 mm” dedi Mouret, sensörün nasıl oluşturulduğu hakkında daha fazla bilgi vermeden önce bana. Modülün normal CMOS sensörleriyle aynı yöntemler kullanılarak oluşturulduğunu söyleyerek, "Kolay değil ama çok da karmaşık bir şey olmadığını söyleyebilirim" dedi. "Genel maliyet açısından, modülün tamamı yüksek hacimli standart bir kamerayla aynı maliyete sahip olacak."

Şu anda sensör, Qualcomm ve MediaTek akıllı telefon işlemcileri tarafından kullanılan standart bir Görüntü Sinyal İşlemcisi (ISP) ile entegre olacak ancak çalışması için ek yazılım gerektirecek.

S1 multispektral görüntü sensörü tek bir hile değildir ve aslında cilt biyobelirteçlerini tanıyabilmesi ve analiz edebilmesi gibi ilgi çekici ikinci bir işleve sahiptir. Bunun anlamı, güvenlik uygulamaları için kullanılabilecek gerçek bir kişiyi "görüp görmediğini" söyleyebilmesidir; örneğin, biliyor Birisi kimliğini gizlemek için maske takıyorsa - cilt bakımında ve hatta yapay zeka ve diğer uygulamalarla birleştirildiğinde sağlık uygulamalarında yazılım. Portre Modu fotoğraflarını geliştirmek için de kullanılabilir.

Telefonda ne zaman kullanılacak?

Üreticiler bir süredir telefonlarda renk üretimini iyileştirmek için çalışıyorlar. LG G5 2016 yılında renk performansını iyileştirmek için lazer otomatik odaklama sensörünün yanında özel bir renk spektrumu sensörü kullandı. Huawei farklı bir yaklaşım benimsedi ve RGB sensöründen vazgeçti. P30 Pro Renkleri daha iyi yeniden üretme ve düşük ışık performansını iyileştirme çabasıyla RYYB sensörü lehine. Olimpos Ve İmec farklı uygulamalar için yakın kızılötesi RGB sensörleriyle de deneyler yaptık.

Spectricity S1 sensörü dünyada bir ilktir ve bu örneklerden farklı bir yöne doğru ilerlemektedir. Demoya ve örnek görsellere göre oldukça umut verici görünüyor ancak bunu bir telefonda ne zaman görmeyi beklemeliyiz?

Mouret, "Başlangıçta ileri teknoloji telefonlarda tanıtılacak" dedi. "2024'te küçük bir hacim olacak, 2025'te daha yüksek bir hacim olacak ve 2026'dan itibaren daha da yaygınlaşacak."

Mouret ayrıca ilk örneklerin Samsung ve Apple gibi şirketlerden değil, Çinli akıllı telefon üreticilerinden gelmesini bekliyor. Ancak Mouret bunun gelecekte değişmesini bekliyor. CES 2023 basın bülteni S1 sensörü için ise beklentilerinden geri durmadı ve şunları söyledi:

"S1'li ilk akıllı telefon modellerinin 2024 yılında piyasaya çıkmasını bekliyoruz ve önümüzdeki yıllarda tüm akıllı telefonların teknolojimizi içermesini bekliyoruz."

Evet, tüm akıllı telefonlar. Bu büyük bir hedef, ancak demoda gördüğümüz performans, sonunda S1'in de bulunduğu bir telefon kamerasından göreceğimiz performanssa, çok az üretici geride kalmak isteyecektir.

Editörlerin Önerileri

• 450 dolarlık bir telefon Samsung Galaxy S23'ün kameralarını yenebilir mi? Yakın
• Bu Galaxy S23 ve Galaxy S23 karşılaştırmasına hazır değilsiniz. iPhone 14 Pro kamera testi
• Xiaomi'nin yeni telefonunda 200 MP kamera var ve fotoğrafları göz kamaştırıyor
• Apple'ın Seramik Kalkanı, iPhone 14 ekran koruyucusu hakkındaki fikrinizi değiştirebilir
• OnePlus 10T vs. Hiçbir Şey Telefon 1'deki kamera savaşı bu kadar yakın olmamalı