Что такое семантический рендеринг и как он улучшает камеру iPhone 11

iPhone 11 Pro Max задняя тройная камера
Джулиан Чоккатту/Digital Trends

Самые большие улучшения в новых iPhone от Apple заключаются в камерах, и не только благодаря новым сверхширокоугольным объективам. айфон 11, айфон 11 про, и айфон 11 про макс. Программное обеспечение камер обеспечивает значительный скачок в качестве изображения благодаря улучшениям в компьютерная фотография техники. Одним из наиболее интересных является семантический рендеринг — интеллектуальный подход к автоматической настройке светлых участков, теней и резкости в определенных областях фотографии.

Что такое семантический рендеринг?

В искусственном интеллекте «семантика» относится к способности машины разумно сегментировать информацию так же, как это сделал бы человек. В разных отраслях машинного обучения семантическая сегментация может использоваться по-разному, но в случае с фотографией она начинается с распознавания объектов.

В случае Apple камера специально ищет людей в кадре, но она идет на более глубокий уровень. Когда iPhone обнаруживает человека, Apple сообщила Digital Trends, что дополнительно различает кожу, волосы и даже брови. Затем он может визуализировать эти сегменты по-разному для достижения наилучших результатов, создавая портрет, который правильно экспонируется на фоне.

Связанный

  • Это единственные две причины, по которым я в восторге от iPhone 15 Pro.
  • iPhone только что продали за сумасшедшую сумму на аукционе
  • У этого Android-телефона за 600 долларов есть одно большое преимущество перед iPhone.

[/pullquote]Просто сделайте снимок, и телефон сделает всю работу за доли секунды. [/pullquote]

Чтобы понять, почему это так важно, полезно также понять, как работает стандартная камера. Будь то старый iPhone или профессиональная зеркальная камера, камера обычно не знает, что снимает. Он знает цвет и яркость любого пикселя, но не может понять, что на самом деле находится в кадре. Например, когда вы выбираете цветовой профиль «портрет» на Nikon или Canon, камера просто применяет настройки к определенным цветовым диапазонам пикселей, обычно встречающимся у людей; на самом деле он не знает, присутствует человек или нет.

Такой эффект называется глобальной корректировкой, то есть он применяется ко всей фотографии одинаково. Точно так же стандартный расширенный динамический диапазон или HDR, фотографии работают: светлые участки уменьшаются, тени повышаются, контрастность средних частот может быть увеличена, но без учета того, что изображено на изображении. Этот подход хорошо работает для таких объектов, как пейзажи, но не всегда работает для портретов.

портретный режим айфон 11Джулиан Чоккатту/Digital Trends

При семантическом рендеринге айфон 11 может применять локальные, а не глобальные корректировки. Это означает, что яркость яркого неба можно уменьшить, чтобы сохранить цвет и детализацию, в то время как блики на лице человека не будут уменьшаться так сильно, сохраняя глубину объекта. Резкость также можно наносить на кожу и волосы с разной интенсивностью.

Фотографы уже много лет выполняют подобную ретушь вручную в таких программах, как Adobe Photoshop, но улучшения мгновенно применяются на iPhone 11.

Как Вы этим пользуетесь? Просто сделайте снимок, и телефон сделает всю работу за доли секунды. Помните, что семантическая визуализация влияет только на человеческие портреты; другие типы фотографий получают стандартную обработку HDR. Он не ограничивается портретным режимом — любая фотография с изображением человека автоматически становится кандидатом на семантический рендеринг.

Вычислительная фотография, включающая в себя все — от HDR до портретных режимов с распознаванием глубины — позволяет камерам телефонов преодолевать физические ограничения их маленьких объективов и сенсоров. Семантический рендеринг Apple является одним из следующих этапов развития этих технологий — Google использует аналогичное машинное обучение для работы камеры в своих смартфонах Pixel.

Хотя технология, лежащая в его основе, сложна, его цель проста. Давая iPhone возможность узнавать, когда он смотрит на человека, он видит мир немного лучше, чем мы, что позволяет создавать изображения, которые выглядят естественно и более реалистично.

Рекомендации редакции

  • Я потерял свой iPhone во время отпуска своей мечты — и это был не кошмар
  • Apple может столкнуться с «серьезной» нехваткой iPhone 15 из-за проблем с производством, говорится в отчете
  • Я буду в ярости, если iPhone 15 Pro не получит этой функции
  • Я пытался заменить свою GoPro этим новым телефоном и его умной камерой.
  • Я пользуюсь iPhone 14 лет. Pixel Fold заставил меня остановиться

Обновите свой образ жизниDigital Trends помогает читателям быть в курсе быстро меняющегося мира технологий благодаря всем последним новостям, забавным обзорам продуктов, содержательным редакционным статьям и уникальным кратким обзорам.

Категории

Недавний