החיישן הזעיר הזה עומד לשנות את מצלמת הטלפון שלך לנצח

"אנחנו מאמינים שיש הזדמנות אמיתית לפתח ולהשתמש בדימוי ספקטרלי בסמארטפון. למרות כל ההתקדמות שנעשתה עם מצלמות שונות וכוח המחשוב של סמארטפון, אף אחד לא באמת יכול לזהות את הצבע האמיתי של תמונה".

תוכן

  • ראית פעם את הצבע הזה?
  • זה חיישן או מצלמה?
  • מתי זה ישמש בטלפון?

ככה ספקטריות המנכ"ל וינסנט מוראט תיאר את המשימה של החברה לטרנדים דיגיטליים בראיון שנערך לאחרונה, כמו גם את הסיבה לכך שהיא מייצרת חיישן תמונה ספקטרלית ממוזערת שמוכנה לשימוש ב- סמארטפון. אבל מהו בעצם חיישן ספקטרלי, ואיך הוא עובד? מסתבר שהוא יכול לעשות הרבה יותר מסתם ללכוד צבעים יפים.

סרטונים מומלצים

ראית פעם את הצבע הזה?

צילום ראש המראה את מנכ
מנכ"ל Spectricity וינסנט מוראט (משמאל) ומהנדס האפליקציות מייקל ג'ייקובסספקטריות

לפני שנגיע לכל זה, בואו נדבר על מה שחיישן התמונה הרב-ספקטרלי S1 של Spectricity עושה עבור מצלמות. רוב מצלמות הטלפון משתמשות בחיישני RGB (אדום, ירוק וכחול) בשלושה צבעים, אבל חיישן Spectricity S1 מסתכל יותר לתוך אור נראה וטווח קרוב לאינפרא אדום כדי לשחזר צבעים טבעיים יותר, עקביים יותר, יחד עם לבן משופר במידה ניכרת איזון.

קָשׁוּר

  • זה מה שקורה כאשר אתה משווה 4 טלפונים במבחן מצלמה של 800MP
  • בדקתי את מצלמות ה-Galaxy S23 Ultra ו-iPhone 14 Pro. רק אחד הוא מנצח
  • העתיד של ניטור חמצן בדם טמון במצלמה של הטלפון שלך

"למצלמה רגילה המשולבת בסמארטפון יש חיישן RGB שרואה אדום, ירוק וכחול", אמר Mouret. "אנחנו מוסיפים מסננים כדי ליצור עד 16 תמונות שונות עם צבעים שונים, אורכי גל שונים של אור, אור המגיע ממקורות שונים, והאור המוחזר המגיע מהאובייקט של סְצֵינָה. אתה יכול לזהות מאפיינים רבים ושונים בזכות התמונות השונות הללו בהשוואה ל-RGB סטנדרטי."

המשמעות היא שלא משנה תנאי התאורה, לתמונות שצולמו על ידי טלפון עם חיישן S1 יהיו צבעים עקביים יותר לאורך כל הדרך, כפי שניתן לראות בתמונה לדוגמה למטה. במהלך השיחה שלנו, ראיתי הדגמה חיה ששחזרה את שכפול הצבע ו עקביות שנראית בדוגמה, אבל ראוי לציין שהחיישן הופעל על ידי מחשב אישי ולא על ידי א סמארטפון.

דוגמה לאופן שבו חיישן Spectricity S1 שונה ממצלמות סמארטפונים.
תרשים המראה כיצד חיישן Spectricity S1 שונה ממצלמות סמארטפונים.ספקטריות

"תראה במצלמות שיאומי, סמסונג, אפל ו-Huawei הצבעים שונים מאוד בתנאי תאורה שונים. באותה סצנה שצולמה עם הצילום הספקטרלי שלנו, יש הבדלים קלים, אבל מינוריים. הצבעים מתוך תמונות הם הצבעים הנראים בעינינו הבלתי מזוינת. אתה יכול לראות את כל הסמארטפונים מייצרים צבעים שונים מאוד".

דיוק צבע זה ישפר גם את היכולת של מצלמות סמארטפונים לשחזר טוב יותר גווני עור שונים. בתמונה אחרת לדוגמה, נראה שחיישן S1 הראה שיפורים ניכרים גם כאן.

"אתה יכול לראות שגווני העור שונים לחלוטין בהתאם למצב התאורה", ציין מוראט. "הפתרון הוא להשתמש בדימוי ספקטרלי כדי לנתח את תנאי התאורה, כדי באמת לתת את הטון הנכון. זו הדרך היחידה. אתה יכול לשים הרבה AI מאחורי זה, אבל זה לא מספיק. אתה צריך חומרה נוספת."

לרוע המזל, למורט לא היה א גוגל פיקסל טלפון בהישג יד כדי להשוות איתו את חיישן S1 טכנולוגיית החישוב Real Tone של גוגל, שמבטיחה לעשות משהו דומה, רק על ידי שימוש בשיפורי תוכנה.

זה חיישן או מצלמה?

חיישן תמונה ספקטרלי S1 של Spectricity.
ספקטריות

נראה כי היתרונות של חיישן תמונה ספקטרלי כמו S1 ברורים, ומי לא רוצה איזון לבן יעיל יותר וצבעים טבעיים ועקביים בתצלומים שלו? אבל הדרך שבה Mouret תיאר את היכולת של ה-S1 גרמה לו להישמע יותר כמו מצלמה מאשר חיישן. איזה זה? האם זה באמת יכול להיכנס לסמארטפון? אם כן, אילו שינויים יידרשו?

מהנדס יישומי Spectricity מייקל ג'ייקובס, שהריץ את ההדגמה שבה צפיתי, הסביר מהו ה-S1 בעצם.

"זה באמת חיישן נלווה, דומה מאוד לחיישן עומק או חיישן 3D המשמש עם מצלמת RGB", הוא אישר.

עם זאת, כן באופן טכני צלם תמונות, רק לא כאלו שהיית רוצה להשתמש בהן בנפרד, כפי שהסביר מוראט:

"לחיישן התמונה שלנו יש רזולוציית VGA, 800 על 600 פיקסלים. אתה צריך לשלב את התמונה הספקטרלית הקטנה יותר עם תמונת RGB. המודול עצמו באמת קטן מאוד. הוא תוכנן לשילוב בסמארטפון. אז זה 5 מ"מ על 5 מ"מ על 6 מ"מ," אמר לי מוראט, לפני שאמר יותר על איך החיישן בנוי. "זה לא קל, אבל זה לא משהו מאוד מתוחכם, הייתי אומר," הוא הסביר, ואמר שהמודול בנוי באותן שיטות כמו חיישני CMOS רגילים. "מבחינת העלות הכוללת, המודול השלם יהיה זהה לעלות של מצלמה סטנדרטית בנפח גבוה."

דוגמה להבדלים בין חיישן RGB לחיישן S1 של Spectricity.
גרפיקה המציגה את ההבדל בין חיישן RGB למצלם הספקטרלי Spectricity S1.ספקטריות

נכון לעכשיו, החיישן ישתלב עם מעבד אות תמונה (ISP) סטנדרטי המשמש את מעבדי הסמארטפונים של קוואלקום ו-MediaTek, אך הוא ידרוש תוכנה נוספת לפעולה.

חיישן התמונה הרב-ספקטרלי S1 אינו פוני בטריק אחד, ולמעשה יש לו פונקציה שנייה מסקרנת, בכך שהוא יכול לזהות ולנתח סמנים ביולוגיים של העור. מה שזה אומר הוא שהוא מסוגל לדעת אם הוא "רואה" אדם אמיתי, שיכול לשמש ליישומי אבטחה - למשל, הוא יודע אם מישהו לובש מסכה כדי להסתיר את זהותו - טיפול בעור, ואפילו ביישומי בריאות בשילוב עם AI ואחרים תוֹכנָה. זה יכול לשמש גם כדי לשפר תמונות במצב פורטרט.

מתי זה ישמש בטלפון?

מודול המצלמה של Oppo Find N2.
אנדי בוקסאל/טרנדים דיגיטליים

יצרנים עובדים על שיפור רפרודוקציית הצבע בטלפונים במשך זמן מה, וחוזרים ל- LG G5 בשנת 2016, שהשתמש בחיישן ספקטרום צבע ייעודי לצד חיישן המיקוד האוטומטי בלייזר כדי לשפר את ביצועי הצבע. Huawei נקטה בגישה אחרת ונטשה חיישן RGB על P30 Pro לטובת חיישן RYYB, במאמץ שלו לשחזר טוב יותר צבעים ולשפר ביצועים בתאורה נמוכה. אולימפוס ו Imec התנסו גם בחיישני RGB כמעט אינפרא אדום עבור יישומים שונים.

חיישן Spectricity S1 הוא הראשון בעולם והוא הולך לכיוון שונה מהדוגמאות הללו. בהתבסס על ההדגמה והתמונות לדוגמה, הוא מראה הבטחה ניכרת - אבל מתי עלינו לצפות לראות את זה בטלפון?

"בהתחלה, זה יוצג בטלפונים מתקדמים", אמר מוראט. "זה יהיה נפח קטן ב-2024, נפח גבוה יותר ב-2025, ואז החל מ-2026, זה יהיה נפוץ יותר."

מודולי המצלמה של Huawei Mate 50 Pro ו- Apple iPhone 14 Pro.
אנדי בוקסאל/טרנדים דיגיטליים

Mouret גם מצפה שהדוגמאות הראשונות יגיעו מיצרניות סמארטפונים סיניות, ולא מחברות כמו סמסונג ואפל. עם זאת, Mouret מצפה שזה ישתנה בעתיד, וב- הודעה לעיתונות של CES 2023 לחיישן S1, הוא לא התאפק בציפיותיו ואמר:

"אנו מצפים שדגמי הסמארטפונים הראשונים עם ה-S1 ישוחררו ב-2024, ואנו מצפים שכל הסמארטפונים יכללו את הטכנולוגיה שלנו בשנים הקרובות."

כן, כל הסמארטפונים. זה יעד גדול, אבל אם הביצועים שראינו בהדגמה הם מה שנראה בסופו של דבר ממצלמת טלפון עם ה-S1 לצידה, מעט יצרנים ירצו להישאר מאחור.

המלצות עורכים

  • האם טלפון של 450 דולר יכול לנצח את המצלמות של סמסונג גלקסי S23? זה קרוב
  • אתה לא מוכן ל-Galaxy S23 הזה לעומת. בדיקת מצלמת אייפון 14 פרו
  • לטלפון החדש של שיאומי יש מצלמת 200MP - והתמונות שלו מדהימות
  • המגן הקרמי של אפל עשוי לשנות את דעתך לגבי מגן מסך של אייפון 14
  • OnePlus 10T לעומת שום דבר קרב מצלמות טלפון 1 לא אמור להיות כל כך קרוב