Що таке семантичний рендеринг і як він покращує камеру iPhone 11

Найбільші вдосконалення нових iPhone від Apple стосуються камер, і не лише завдяки новим надширококутним об’єктивам на iPhone 11, iPhone 11 Pro, і iPhone 11 Pro Max. Програмне забезпечення, що живить камери, відповідає за значний стрибок у якості зображення завдяки вдосконаленням комп'ютерна фотографія техніки. Одним із найцікавіших є семантичний рендеринг, інтелектуальний підхід до автоматичного налаштування світлих ділянок, тіней і різкості в окремих областях фотографії.

Що таке семантичний рендеринг?

У штучному інтелекті «семантика» означає здатність машини розумно сегментувати інформацію, подібно до того, як це робила б людина. Різні галузі машинного навчання можуть по-різному використовувати семантичну сегментацію, але для фотографії вона починається з розпізнавання об’єкта.

У випадку Apple камера спеціально шукає будь-яких людей у ​​кадрі, але вона йде набагато глибше. Коли iPhone виявляє людину, Apple повідомила Digital Trends, що він додатково розрізняє шкіру, волосся та навіть брови. Потім він може відтворювати ці сегменти по-різному для досягнення найкращих результатів, створюючи портрет, який правильно експонується на фоні.

[/pullquote]Просто сфотографуйте, і телефон виконає роботу за частки секунди. [/pullquote]

Щоб зрозуміти, чому це так важливо, також допоможе зрозуміти, як працює стандартна камера. Незалежно від того, чи це старий iPhone, чи професійна дзеркальна фотокамера, камера зазвичай не знає, що вона знімає. Він знає колір і яскравість будь-якого пікселя, але не може зрозуміти, що насправді знаходиться в кадрі. Наприклад, коли ви вибираєте кольоровий профіль «портрет» на Nikon або Canon, камера лише застосовує налаштування до певних діапазонів кольорів пікселів, які зазвичай зустрічаються у людей; він насправді не знає, присутня людина чи ні.

Такий ефект називається глобальним коригуванням, тобто він застосовується до всієї фотографії однаково. Це також стандартний високий динамічний діапазон, або HDR, фотографії працюють: світлі ділянки зменшуються, тіні підвищуються, а середній контраст може бути посилений — але незалежно від того, що на зображенні. Цей підхід добре працює для таких об’єктів, як пейзажі, але не завжди працює для портретів.

З семантичною передачею, an iPhone 11 може застосовувати локальні, а не глобальні коригування. Це означає, що на яскравому небі можна зменшити яскравість, щоб зберегти колір і деталізацію, тоді як яскравість на обличчі людини буде зменшена не так сильно, зберігаючи глибину об’єкта. Різкість також можна наносити на шкіру та волосся різної сили.

Фотографи роками робили такий вид ретушування вручну в таких програмах, як Adobe Photoshop, але на iPhone 11 ці покращення застосовувалися миттєво.

Як ви його використовуєте? Просто сфотографуйте, і телефон зробить роботу за частки секунди. Знайте, що семантичне відтворення впливає лише на портрети людей; інші типи фотографій отримують стандартну обробку HDR. Він не обмежується портретним режимом — будь-яка фотографія з людиною автоматично стає кандидатом на семантичне відтворення.

Комп’ютерна фотографія, яка включає в себе все, від HDR до портретних режимів із визначенням глибини, дає змогу камерам телефонів подолати фізичні обмеження їхніх маленьких об’єктивів і датчиків. Семантичний рендеринг Apple є однією з наступних еволюцій цих технологій — Google використовує подібне машинне навчання для живлення камери у своїх смартфонах Pixel.

Хоча технологія, яка його використовує, складна, його мета проста. Завдяки тому, що iPhone може розпізнавати, коли він дивиться на людину, він бачить світ трохи більше, ніж ми, завдяки чому зображення виглядають натуральніше та реалістичніше.

Рекомендації редакції

• Я втратив свій iPhone під час відпустки мрії — і це не був кошмар
• Apple може зіткнутися з «серйозною» нестачею iPhone 15 через проблему виробництва, йдеться у звіті
• Я буду розлючений, якщо iPhone 15 Pro не отримає цієї функції
• Я намагався замінити свій GoPro цим новим телефоном і його розумною камерою
• Я користуюся iPhone 14 років. Pixel Fold змусив мене зупинитися

Оновіть свій спосіб життяDigital Trends допомагає читачам стежити за динамічним світом технологій завдяки всім останнім новинам, цікавим оглядам продуктів, проникливим редакційним статтям і унікальним у своєму роді коротким оглядам.