дуал пиксель автофокус в каких камерах
Dual Pixel — наведение на резкость за доли секунды
В чём преимущества технологии Dual Pixel, всё чаще внедряемой в камеры смартфонов?
Производители компактных устройств всеми силами стараются добиться улучшения качества снимков без увеличения размеров модуля камеры. Для этого вовсю внедряются необычные технологии, которыми раньше не могли похвастать даже зеркальные фотоаппараты. В частности, всё чаще можно встретить в описании смартфона упоминание о Dual Pixel. Что же это за технология?
Суть работы
Обычно в цифровых фотокамерах используется фазовый автофокус, состоящий из так называемых фотодиодов. Беда в том, что эти датчики раньше нельзя было разместить на всей поверхности матрицы. Обычно фотодиодами покрыты около 10% поверхности сенсора, из-за чего камера не может автоматически сфокусироваться на объекте, расположенном где-нибудь в углу.
Технология Dual Pixel заключается в том, что фотодиодом обладает абсолютно каждый пиксель матрицы. Создание такого сенсора становится более дорогим, но зато отныне камера получает возможность сфокусироваться на любом объекте, даже на разместившемся на краю кадра.
Основное преимущество Dual Pixel
На самом деле технологию внедрили не только ради того, чтобы камера идеально «понимала» расположение объекта съемки. Многие пользователи знакомы с тем, как долго некоторые фотоаппараты и смартфоны справляются с автофокусировкой. Это происходит именно из-за того, что фазовому AF приходится работать с недостаточным количеством материала. Системе сложно понять, стал ли объект съемки резким. Если же в работе находится камера Dual Pixel, то она справляется со своей задачей практически мгновенно.
Ускорение автофокусировки особенно заметно при видеосъемке. Фокус от одного объекта к другому может переходить практически мгновенно. Но ещё важнее то, что человек или автомобиль будет уверенно держаться в зоне резкости даже в случае перемещения по кадру. Что касается фотографирования, то этот процесс теперь занимает меньше времени. Также лучшая автофокусировка уменьшает количество смазанных снимков.
Почему появления технологии пришлось ждать так долго?
Производство матрицы для камеры или любого другого портативного устройства имеет ряд технологических сложностей. В частности, современные смартфоны имеют минимальную толщину, из-за чего встраиваемый в них сенсор должен быть маленьким. Но фотоэлементы нельзя уменьшать до бесконечности, иначе матрица перестанет нормально улавливать свет. Если бы каждый пиксель придумали снабжать фотодиодом лет восемь назад, то ничего хорошего из этого не вышло бы. Дело в том, что пиксели на тех матрицах были очень крохотными, а в данном случае их бы пришлось уменьшить ещё сильнее.
К счастью, технологии постепенно совершенствуются. Сейчас смартфоны снабжаются объективом с достаточно широко раскрывающейся диафрагмой, что увеличивает приток света к сенсору. А ещё производителям стали доступны более крупные матрицы. При сохранении прежнего разрешения вполне можно снабдить каждый пиксель фотодиодом. Именно поэтому в последнее время производители смартфонов перестали повышать разрешение камеры — вместо этого была сделана ставка на новую технологию, значительно ускоряющую работу системы автофокусировки.
В каких камерах присутствует технология Dual Pixel?
Многие компании до сих пор используют обычный модуль камеры. И это при том, что впервые технология Dual Pixel стала применяться ещё несколько лет назад. Сначала нововведением оснащались сенсоры для зеркальных и системных фотоаппаратов. Позже эту технологию позаимствовали и создатели смартфонов. В частности, упоминание о Dual Pixel легко можно встретить в описании топовых аппаратов от Samsung. Например, данная технология внедрена в Samsung S8. А вот в недорогих устройствах используется рядовая матрица, без такого полезного улучшения.
Ставку на новую технологию пока делает только южнокорейский гигант. Такая конструкция матрицы запатентована, поэтому у других компаний есть лишь один выход — заказывать модули камеры у Samsung. Пока на это решились только создатели Google Pixel 2. Впрочем, в будущем всё может измениться, так как собственный аналог Dual Pixel разрабатывает компания Sony. Напомним, сейчас это один из самых крупных производителей мобильных модулей камеры.
Стоит ли ради Dual Pixel покупать новый смартфон?
Однозначно нет! Выбирать аппарат с поддержкой новой технологии стоит в том случае, если требуется получение и остальных функций флагмана. Также покупать подобный девайс стоит только если у вас есть достаточная сумма. Не нужно залезать ради какого-нибудь Samsung Galaxy S8 или Google Pixel 2 в кредит.
Пользователь обязательно почувствует поддержку камерой технологии Dual Pixel. Однако это не значит, что съемка станет приносить большее удовольствие. Просто данный процесс будет занимать меньше времени. Что касается качества фотографий, то на этот параметр вышеупомянутая технология влияет лишь косвенно.
Эволюция мобильного автофокуса: от контрастного до Dual Pixel
Привет, Гиктаймс! При съемке на смартфон (да и не только) очень важно, чтобы фотографии получались четкими и ясными. Для этого объект снимка должен быть в фокусе до того, как вы нажмете на кнопку «Сделать фото». В последнее время многие производители смартфонов работают над улучшением технологий автоматической фокусировки, и сегодня мы рассмотрим плюсы и минусы каждой, и чем они отличаются. Как обычно все подробности под катом.
При выборе камерофона многие уделяют внимание количеству мегапикселей — мол, у кого их больше, тот и круче. Однако зачастую важнее и полезнее взглянуть на другие факторы, которые оказывают не менее серьезное влияние на качество фотографий. Среди них — тип автофокуса камеры смартфона. В эту область сейчас активно погрузились Apple, Samsung, LG и другие производители, причем многим действительно удалось значительно продвинуться вперед.
Что такое автофокус, и почему он нам нужен?
При помощи системы автоматической фокусировки камеры объектив настраивается таким образом, чтобы сфокусироваться непосредственно на объекте, обеспечивая тем самым разницу между четким снимком и упущенной возможностью.
Упрощенно принцип работы камеры состоит в том, что лучи света отражаются от фотографируемых объектов и затем попадают на сенсор, который преобразовывает поток фотонов в поток электронов. После этого ток преобразовывается в набор битов, данные обрабатываются и записываются в память камеры. Особой популярностью у производителей смартфонов сейчас пользуются CMOS-сенсоры, которые преобразуют заряд в напряжение прямо в пикселе, обеспечивая впоследствии прямой доступ к содержимому произвольного пикселя.
В теории все работает так: линзы фокусируют свет на сенсоре, сенсор затем создает цифровую фотографию.
В реальности же все происходит не так просто. Угол входящих лучшей света зависит от дистанции, на которой находится фотографируемый объект. На диаграмме ниже продемонстрированы линзы, фокусирующие лучи света на голубом объекте: зеленый и красный объект оказываются не в фокусе и будут размыты на финальном снимке. Если мы хотим сфокусироваться на зеленом или красном объекте, необходимо изменить дистанцию между линзами и сенсором.
На заре камерофоностроения большинство устройств имели фиксированный фокус. В современных же смартфонах предусмотрена возможность регулировать расстояние между линзами и сенсором. Поэтому вы получаете качественные детализированные снимки. Сейчас для реализации автофокуса в смартфонах в основном используют три метода: контрастный, фазовый и лазерный.
Контрастный автофокус
Контрастный автофокус относится к пассивному виду автофокуса. До сих пор это решение применяется в большинстве смартфонов — во многом потому, что является одним из самых простых. При помощи сенсора происходит замер количества света на объекте, после этого он же перемещает линзу в зависимости от контраста. Если контраст максимальный, то и объект съемки находится в фокусе.
Вообще, контрастный автофокус вполне неплохо справляется со своей задачей и имеет большой жирный плюс — он довольно прост и не требует какого-то сложного «железа» для своей работы.
Но есть у него и несколько недостатков. В частности, контрастный автофокус работает медленнее остальных — обычно ему требуется около секунды, чтобы сфокусироваться на объекте. За это время вы можете перехотеть делать снимок, или момент будет упущен, если хотели заснять, к примеру, быстро движущийся объект. Это происходит из-за того, что львиную долю времени занимает процесс «сдвиг точки фокусировки/линз объектива — оценка контрастности — сдвиг — оценка контрастности». Кроме того, у контрастного автофокуса отсутствует возможность следящей фокусировки, да и в условиях плохого освещения он вряд ли вас впечатлит. Поэтому данный тип автофокуса на сегодняшний день используется преимущественно в бюджетных смартфонах, таких как Lenovo A536, ASUS Zenfone Go и других.
Фазовый автофокус: быстрая и продвинутая альтернатива
Одним из первопроходцев здесь была компания Samsung, которая позаимствовала технологию у цифровых зеркальных фотокамер и оснастила фазовым автофокусом свой смартфон Galaxy S5. Суть в том, в данном случае применяются специальные датчики — они ловят проходящий световой поток от разных точек изображения, используя линзы и зеркала. Внутри датчика происходит деление света на две части, каждая из которых попадает на сверхчувствительный сенсор. Расстояние между потоками света измеряется датчиком, после чего он сам определяет, насколько нужно сдвинуть линзу для точной фокусировки. Так, например, Samsung Galaxy S5 требуется всего 0,3 секунды, чтобы сфокусироваться на объекте.
Визуально принцип работы фазового автофокуса представлен ниже.
Первое и главное преимущество фазового автофокуса — он намного быстрее контрастного, это просто must have для съемки движущихся объектов. Кроме того, камера может оценивать движение объекта при помощи датчиков, отсюда получаем возможность следящего автофокуса.
Но есть и минусы. Фазовый автофокус, как и контрастный, также не очень хорошо справляется со своими задачами в условиях недостаточного освещения. Также для него необходимо более мощное «железо», поэтому он, как правило, доступен в смартфонах сегмента high-end. Среди них Huawei Honor 7, Sony Xperia M5 и Samsung Galaxy Note 5, которые, кстати, можно найти в М.Видео.
Одни производители пошли дальше и решили использовать в смартфонах лазерный автофокус (об этом чуть позже), другие же активно занялись совершенствованием технологии фазового автофокуса. Так, например, Apple в своем iPhone 6s и iPhone 6s Plus использует так называемые «фокусные пиксели» — суть в том, что технология использует часть пикселей в качестве фазового сенсора, и съемка на смартфоны от Apple получается действительно быстрой. По сути это тот же самый фазовый автофокус, здесь уже надо отдать должное маркетологам.
А вот технология Dual Pixel, которую компания Samsung применяет в своих смартфонах Galaxy S7 и Galaxy S7 Edge, действительно отличается от фазовой фокусировки в камерах других смартфонов. Она хоть и является разновидностью фазового автофокуса, но все же имеет некоторые отличия и тонкости. В смартфонах фазовый автофокус несколько ограничен — чтобы присвоить каждому пикселю фокусный сенсор, нужно сильно его уменьшить, отсюда получим шумы и нечеткость фотографий. Обычно датчиками оснащают около 10 % светочувствительных точек, некоторые производители, впрочем, не выходят и за 5 %.
В Dual Pixel же каждый пиксель оснащен отдельным датчиком из-за увеличения размеров пикселей. Процессор обрабатывает показания каждого пикселя, но делает это настолько быстро, что автофокусировка все равно занимает десятые доли секунды. В Samsung говорят, что технология Dual Pixel подобна фокусировке при помощи человеческого глаза, но это опять же маркетинговый ход.
Тем не менее надо признать инновационность данного подхода к фазовому автофокусу в современных смартфонах. Сейчас это настоящий эксклюзив для Galaxy S7 и Galaxy S7 Edge.
Лазерный автофокус: самый активный
Как и фазовый, лазерный автофокус относится к активному типу автофокуса. Этим направлением долгое время занималась компания LG, которая сперва реализовала лазерный автофокус в своем смартфоне G3. В основе работы технологии лежит принцип лазерного дальномера: лазерный излучатель освещает объект, а сенсор замеряет расстояние до него и время поступления отраженного лазерного луча.
Одно из главных преимуществ данного автофокуса — время. Как говорят в LG, весь процесс автофокусировки при помощи лазера занимает 0,276 секунды. Значительно быстрее контрастного автофокуса и немного пошустрее, чем фазовый.
Очевидный плюс лазерного автофокуса — он невероятно быстрый и хорошо отрабатывает в условиях недостаточного освещения. Но работает он только на определенной дистанции — самый лучший эффект достигается, если расстояние от смартфона до объекта составляет менее 0,6 метра. А после пяти метров — привет, контрастный автофокус.
Лазерным автофокусом оснащены преимущественно смартфоны LG — к примеру, LG G4. Но есть и исключения: тот же One Plus 2 или Asus Zenfone 2 Laser. Впрочем, у последнего все ясно из названия, да и цена привлекательная для такого набора возможностей.
Двойная камера: смело, но не всем понятно
В какой-то момент производители поняли, что надо бы сделать что-нибудь диковинное, за пределами фазового или лазерного автофокуса. Так на свет появились двойные камеры: для получения четких снимков используется не один, а сразу два объектива. В то время, как одна камера с фиксированным фокусом получает снимок удаленных предметов, другая фокусируется на объектах, которые расположены рядом.
Важное преимущество двойной камеры — возможность быстро сделать снимок, а фокус сделать потом, прямо как в камере Lytro. Но если говорить о более аккуратном фокусе, здесь двойная камера явно проигрывает фазовому фокусу.
Пока что не очень много смартфонов на рынке доступны с двойной камерой — это устройства от HTC (например, One M9+), Honor 6 Plus и другие. Ходят слухи, что и Apple в своем новом iPhone решится на использование двойной камеры.
Технология инфракрасного автофокуса, которую компания Lenovo показала на MWC в прошлом году, работает по сути как лазерный автофокус, но по скорости он примерно в два раза быстрее контрастного. Протестировать её можно на примере Lenovo Vibe Shot.
Что такое двухпиксельный автофокус и как с его помощью делать фотографии
Часть 1. Что такое технология Dual Pixel
Каждый пиксель имеет два фотодиода, и каждый диод имеет линзу над ним отдельно. Каждый раз, когда свет проходит через линзы камеры и диоды, процессор анализирует сигнал для фокусировки каждого диода. Если фокус заархивирован, эти сигналы будут объединены для записи и захвата изображений.
По сравнению с обычными камерами каждый пиксель выполняет двойную роль, что отличает датчики DPAF. Не все двойные пиксели могут выполнять две задачи одновременно. Чтобы быть более конкретным, некоторые пиксели могут фокусировать точку изображения, а другие могут делать снимки. Например, почти 80% пикселей в датчиках изображения Canon могут играть двойную роль.
По правде говоря, автофокус с двумя пикселями хорошо работает с видео. Вы можете получить быстрый DPAF, не увеличивая и не увеличивая объектив для установки фокуса. Кроме того, вы можете переключать фокусировку между объектами вручную с помощью сенсорного экрана в режиме live view. Если вы хотите сделать фотоснимки, вы можете нажать на заднюю часть ЖК-экрана камеры.
Часть 2: стоит ли использовать Dual Pixel
С помощью DPAF с определением фазы ваша камера может устанавливать фокус и мгновенно реагировать. Вы можете постоянно записывать движущийся объект в фокусе. Вот почему DPAF поддерживается некоторыми телефонными камерами. Технология DPAF также помогает имитировать боке. Из-за камер смартфонов глубина резкости в некоторых телефонных камерах DP огромна. Для достижения аналогичного эффекта Apple и другие производители телефонов выпускают двойные камеры.
Часть 3: Какие камеры имеют автофокус Dual Pixel
Если вы хотите получить датчик с двумя пикселями, вы можете выбрать одну из следующих камер. Это доступные двухпиксельные камеры Canon, которые вы можете приобрести.
Кинокамеры Canon C100, C200, C300
Беззеркальные камеры Canon M5, M6, M50
Цифровые зеркальные фотоаппараты Canon 1 DX Mark II, 5D Mark IV, 6D Mark II, 7D Mark II, 70D, 77D, 80D, Rebel T71 (EOS 800D), Rebel SL2 (EOS 200D)
Цифровые зеркальные фотоаппараты Nikon D850, D3500, D5600, COOLPIX B500
Камкордеры Sony DSC-HD с разрешением 80 мегапикселей, AX 43 4K, ax 53 4K
Есть также некоторые телефоны с двумя пикселями, которые имеют аналогичную функцию. Если вы не хотите покупать дорогую цифровую камеру, вы также можете приобрести телефоны с двойной камерой.
Телефоны Samsung Galaxy S7, S7 Edge, S8, S8 +, S9
Смартфоны Google Pixel 2
Вышеупомянутые мобильные телефоны имеют встроенные двухпиксельные датчики. Датчики DPAF помогают эффективно выполнять двухпиксельную автофокусировку.
Часть 4: Как подправить двухпиксельные изображения Canon
Независимо от того, используете ли вы зеркальную камеру или телефон с камерой для съемки фотографий, вам все равно нужно использовать редактор фото применять Photo Effects. Чтобы быстро ретушь изображений и аналоговые кинематографические эффекты, Вы можете запустить WidsMob Retoucher чтобы сделать вашу фотографию уникальной. Это универсальный фоторедактор для всех фотографов. Вы можете снизить уровень шума, ретушь портрет, применяйте эффекты LOMO и другие пакеты фильмов простым щелчком. Все фотоэффекты упрощены до слайдеров и опций. Таким образом, вы можете легко придать своей фотографии художественный вид.
1. Удалите шумы и восстановите детали, вызванные высоким ISO, слабое освещение, короткая выдержка и многое другое.
2. Аналоговые профили пленки и зернистость пленки, включая Kodak, Fuji, Ilford и т. Д.
3. Настройте профиль цветопередачи и цветовые режимы, чтобы смешивать великолепные фотографии.
4. Увеличивайте или уменьшайте основные параметры вашей картинки.
5. Добавьте эффекты LOMO с непрозрачностью цвета, виньетирования и рыбий глаз.
6. Гладкая и белая кожа всех портретов на захваченном изображении.
Шаг 1. Запустите WidsMob Retoucher. Нажмите Импортировать чтобы добавить свою картинку в фоторедактор. Или вы можете перетащить его прямо в основной интерфейс.
Шаг 2: в Регулировка раздел, вы можете настроить фильтры изображений с помощью ползунков. Окно предварительного просмотра в реальном времени может показать вам все подробности.
Шаг 3: На этой картинке нет портрета. Таким образом, пропустите Портрет раздел. Вы можете уменьшить шум изображения и применить эффект виньетирования. в Пленка раздел, вы можете изменить Профиль цветопередачи, Цветовые режимы и Зернистость гибко.
Шаг 4. Вы можете переместить ползунок рядом с B / A, ниже, чтобы проверить подробности. Наконец, нажмите Поделиться or Сохраните для экспорта обработанного изображения. Вы можете поделиться им в Twitter, Facebook, Flickr и других. Или вы можете сохранить его как JPEG или TIFF с регулируемыми параметрами качества.
Для получения быстрой автофокусировки и четкости изображения важны двухпиксельные датчики. Независимо от того, хотите ли вы снимать фотографии или записывать видео, вы можете сэкономить время и получить лучший результат с помощью технологии двойной пиксельной автофокусировки.
Что такое PDAF и Dual Pixel? Или как работает автофокус на смартфонах
В первой части статьи мы подробно рассмотрели базовые понятия о том, что такое матрица, каким образом она формирует изображение. В частности, было рассказано о популярных технологиях Quad Bayer и Tetracell, которые используются на современных смартфонах в матрицах с высоким разрешением (от 48 мегапикселей).
В этой части мы затронем еще несколько интересных технологий, связанных с процессом фокусировки и получения изображения. Понимание этих вещей не только удовлетворит праздное любопытство, но и принесет практический смысл, позволяя вам более осознанно подходить к выбору смартфона с хорошей камерой даже в средне-бюджетном ценовом сегменте.
Перед тем, как приступить к основной теме, хочу предупредить, что многое, о чем будет говорится ниже я привожу лишь в качестве иллюстрации. Принцип работы некоторых систем я буду сильно упрощать, чтобы статья была понятной и доступной широкому кругу читателей.
Как смартфоны научились фокусироваться и делать изображение резким
Вы задумывались над тем, как смартфон понимает, какую часть изображения необходимо сделать резкой и как именно он это делает?
Аналогия с нашими глазами здесь не совсем уместна, так как глаза делают резким то изображение, которое мы хотим разглядеть. В отличие от смартфона мы отлично распознаем то, что видим, фокусируясь на желаемом предмете. А вот для смартфона наша фотография — это бессмысленный набор цветных точек. И камера не понимает, на чём ей следовало фокусироваться, чтобы не испортить очередной кадр.
Конечно, существует такое понятие, как семантическая сегментация. Но несмотря на активное развитие машинного обучения и нейронных сетей, современные смартфоны еще не научились определять предметы на фото так же хорошо, как это делают люди, чтобы использовать для фокусировки искусственный интеллект.
Четкая или размытая фотография?
Для того, чтобы фотография получилась четкой, необходимо соблюсти всего одно условие — лучи света, отраженные от снимаемого объекта, должны пересекаться в точке на матрице.
Чтобы лучше это понять, вспомним, как вообще свет попадает на матрицу и формирует там изображение. Представим, что мы хотим сфотографировать цветок. Внутри камеры смартфона вначале располагается объектив с линзами, а затем матрица:
Лучи света, отраженные от каждой точки этого цветка, попадают на матрицу смартфона, проходя через линзы объектива. И когда лучи света проходят через объектив, они преломляются, пересекаясь в одной точке. В этой точке изображение и будет максимально резким и четким.
К примеру, вот как свет, отраженный от красного лепестка, оказался на матрице смартфона:
Не обращайте внимание на то, что картинка на матрице получилась перевернутой. Ведь текст, который вы сейчас читаете (как и весь окружающий мир), вы точно также видите перевернутыми. Просто мозг скрывает это от вас, «на лету» переворачивая обратно сформированное на сетчатке глаза изображение.
Хрусталики наших глаз напоминают по форме линзу, выпуклую с двух сторон — как та, что используется в объективе камеры смартфона и показана на наших картинках. А когда через такую линзу проходят лучи света, они, как уже было сказано, преломляются под определенными углами, из-за чего изображение получается перевернутым. Эти углы подчиняются определенным правилам (законам физики). Они очень просты для понимания, но в рамках этой статьи мы не будем их рассматривать, чтобы сэкономить время.
Ровно таким же образом на матрице формируются и другие части нашего цветка, например, зеленый стебель:
В рассмотренном примере цветок на матрице получился четким, то есть, в фокусе. Но если бы наш цветок находился чуть дальше, лучи проходили бы через линзу немножко под другим углом, соответственно, угол преломления также слегка бы отличался и пересекались бы эти лучи еще до попадания на матрицу. А на матрицу вместо одной точки падало бы множество лучей, накладываясь друг на друга с небольшим смещением, что делало бы общую картинку размытой (не в фокусе):
В реальной жизни, когда объект отдаляется от нашего глаза, мозг просто слегка изменяет форму хрусталика, растягивая его или, наоборот, сжимая. Из-за этого меняется угол преломления лучей, которые в итоге пересекаются в одной точке прямо на сетчатке. А те объекты, что находятся ближе или дальше, оказываются размытыми, так как лучи света, отраженные от них, пересекаются еще до сетчатки или в условной точке за нею.
Но смартфон не может изменять форму линзы, растягивая ее, как хрусталик, ведь она сделана из стекла. Вместо этого смартфон перемещает линзу внутри объектива вперед или назад таким образом, чтобы лучи снова пересеклись в одной точке — на матрице. Проблема со смартфоном заключается лишь в том, как определить, в какую сторону двигать эти линзы и как понять, что нужный объект уже в фокусе.
Контрастный автофокус (CDAF). Или определяем резкость «на глаз»
Еще недавно смартфоны вообще не умели фокусироваться. К примеру, первые два поколения iPhone не имели системы автофокусировки. Она появилась лишь в 2009 году с выпуском iPhone 3GS.
Сегодня все бюджетные и многие средне-бюджетные смартфоны используют самый старый, простой и надежный метод фокусировки под названием контрастный автофокус.
Суть его работы очень проста. Вы выбираете пальцем на экране смартфона нужную область фокусировки или смартфон самостоятельно выбирает центральную часть кадра, после чего камера пытается сделать так, чтобы объект в этой части кадра был в фокусе.
Но делает он это не так как люди. Мы понимаем, что цветок находится в фокусе, когда отчетливо видим его очертание, смартфон же просто оценивает гистограмму изображения (график распределения яркости). Ведь, как уже было сказано ранее, для смартфона все предметы — это просто пятна различной яркости.
Лучше всего это понять на следующем примере. Ниже вы можете увидеть изображение одного и того же цветка с разной степенью резкости, а под каждым цветком — его гистограмму (график распределения яркости), с которой и работает смартфон:
По горизонтали на маленьких гистограммах представлены уровни яркости изображения — от ее полного отсутствия слева (черный цвет) до самого яркого участка справа (белый цвет). А по вертикали отображается количество пикселей в кадре соответствующей яркости.
А теперь обратите внимание на закономерность — чем более размыта картинка, тем меньше здесь контрастных четких контуров темного цвета. На самом размытом цветке (первый слева) вообще отсутствуют черные/темные цвета, то есть, контуров нет вообще и график очень сильно смещен вправо.
Что же делает смартфон? Он берет небольшой участок изображения (на котором мы хотим сфокусироваться или же центральную часть кадра) и оценивает его гистограмму. Затем смартфон начинает передвигать лизну внутри объектива вперед и анализирует, как меняется распределение яркости. Если контраст падает (то есть, разброс по яркости уменьшается), смартфон начинает передвигать линзу в обратную сторону, пока не найдет самый высокий контраст. А в конце, чтобы наверняка не промахнуться, передвигает линзу еще немножко дальше. Если контраст снова начинает падать — возвращается обратно в ту позицию, где контраст был максимальным.
Что не так с контрастным автофокусом и почему он используется только на дешевых смартфонах?
Я думаю, вы уже догадались по описанию работы контрастного автофокуса, что с ним не так. Смартфон понятия не имеет, четкая ли сейчас картинка и в каком направлении нужно переместить объектив, чтобы еще увеличить резкость.
Для этого он начинает просто передвигать линзу вперед-назад, чтобы оценить, меняется ли контраст сцены. А в это время мы видим на экране «прыгающий» автофокус. То есть, изображение на доли секунды становится то размытым, то снова резким.
Если при съемке фотографий это не является проблемой, то при записи видео контрастный автофокус может хорошенько подпортить результат. Вероятно, вы не раз замечали, как картинка на видео периодически «дергается» и фокус то пропадает на мгновение, то снова появляется. Когда вы снимаете видео на смартфоне с контрастным автофокусом и вся сцена идеально сфокусирована, смартфон все равно будет периодически передвигать линзу, чтобы убедиться, что в данный момент времени картинка максимально резкая. И это будет хорошо заметно на записи.
Другими словами, контрастный автофокус очень плохо справляется с видеозаписью и вам следует об этом помнить, если вы любите снимать видео на смартфоне.
А продолжают его использовать по той причине, что это самый простой и дешевый метод фокусировки, не требующий никакого дополнительного оборудования. Но если вы хотите иметь более быстрый и качественный автофокус, необходимо при выборе смартфона искать в его характеристиках аббревиатуру PDAF.
Что такое PDAF (или фазовый автофокус) на современных смартфонах?
Сам термин PDAF (Phase-Detection Autofocus) переводится с английского, как фазовый автофокус. Впервые этот метод фокусировки появился на зеркальных фотоаппаратах достаточно давно. Но первым в мире смартфоном с PDAF автофокусом, если мне не изменяет память, стал Samsung Galaxy S4, вышедший в 2014 году. Затем последовал iPhone 6 от компании Apple и с тех пор все флагманские смартфоны стали выпускаться с PDAF.
Принцип работы фазового автофокуса выглядит следующим образом. Когда объект находится в фокусе, отраженные от него лучи света будут в равной степени освещать противоположные стороны объектива. Если объект не в фокусе, лучи света по-разному проходят через края линзы.
Другими словами, чтобы сфокусироваться, камера должна получить два изображения одного и того же кусочка кадра — одно изображение с левой половины линзы, а другое — с правой. Если изображения будут немного смещены относительно друг друга, значит, снимаемый объект не в фокусе.
Рассмотрим простой пример:
Здесь мы видим изображение, полученное с одной стороны линзы (A) и с противоположной (B). Если эти сигналы сравнить, то мы увидим небольшое смещение (C). Так как камера хорошо знает свои параметры (размер объектива и линз, фокусное расстояние), ей не составляет труда определить расстояние, на которое нужно переместить линзу, чтобы сигналы с противоположных сторон объектива совпадали.
В этом и заключается главное преимущество фазового автофокуса над контрастным. При фазовом автофокусе камере достаточно одного кадра, чтобы рассчитать, в какую сторону и как далеко нужно переместить линзу. А при контрастном автофокусе, каким бы идеальным он ни был, приходится проверять множество кадров при разных положениях линзы, чтобы поймать самый высокий контраст.
Неужели у смартфона две матрицы!?
Действительно, каким образом смартфон получает две картинки с противоположных сторон линзы? Ведь, когда свет проходит через объектив, он освещает всю матрицу сразу. Все верно, но здесь есть один небольшой трюк.
В типичной матрице с PDAF автофокусом не все пиксели используются для получения картинки. Среди «обычных» пикселей встречаются пиксели PDAF, которые не участвуют в построении изображения, а служат лишь для фокусировки. Чтобы понять, в чем разница между этими пикселями, давайте посмотрим на их схематическое изображение:
Слева изображен обычный пиксель. Здесь мы видим, как лучи света с противоположных сторон объектива (A и B) падают на микролинзу (C), прикрывающую сам фотодиод (E). Затем идет цветной фильтр (D), который пропускает только свет определенного цвета (в данном случае, красного). Если все это кажется вам немного сложным, почитайте первую часть статьи.
Справа изображен PDAF-пиксель, который имеет ряд отличий. Прежде всего, здесь нет цветного фильтра по нескольким причинам. Во-первых, цвет совершенно не играет никакой роли при оценке смещения изображения, а во-вторых, цветной фильтр пропускает только треть света, падающего на микролинзу.
Черная область на картинке справа (D) — это перекрытие половины фотодиода, которое блокирует весь свет, падающий с левой половины линзы объектива. То есть, этот пиксель содержит только те лучи света, что прошли через правую половину объектива. Если мы возьмем еще один PDAF-пиксель и перекроем другую половину его фотодиода, он будет содержать только те лучи, что прошли также через другую половину объектива. Такая пара PDAF-пикселей и содержит информацию с противоположных сторон объектива, которую мы можем теперь сравнивать.
Таких пар PDAF-пикселей на самом деле достаточно много «разбросано» по всей матрице — десятки тысяч. И каждый из них не содержит никакой информации о фотографии. Если ничего не предпринимать, на любом снимке со смартфона при детальном рассмотрении можно было бы отыскать десятки тысяч маленьких черных точек.
Но, к счастью, вы их не найдете. Смартфон прекрасно «знает» позицию каждого PDAF-пикселя и после съемки «зарисовывает» черные точки, примерно подбирая нужный цвет. Если на готовой фотографии PDAF-пиксель окружают зеленые точки, смартфон предполагает, что и на месте PDAF-пикселя должна была быть зеленая точка.
Что такое Dual Pixel от компании Samsung?
Это маленькая революция в области фокусировки камер. Правда, придуманная не компанией Samsung и не для смартфонов.
Впервые автофокус Dual Pixel был представлен компанией Canon в 2013 году с анонсом зеркальной камеры Canon EOS 70D. А спустя 3 года ту же технологию компания Samsung принесла в мир мобильных камер. Первым в мире смартфоном с Dual Pixel PDAF стал Samsung Galaxy S7.
Что интересно, на iPhone этой технологии до сих пор нет. Там используется гибридный автофокус — вначале смартфон примерно «прицеливается» с помощью PDAF, а затем доводит резкость контрастным автофокусом. Дело в том, что точность PDAF-автофокуса при столь редком «вкраплении» PDAF-пикселей ниже точности контрастного автофокуса, хотя он и быстрее. Поэтому, PDAF используется на iPhone лишь для того, чтобы понять, в какую сторону двигать линзы, чтобы фокус не прыгал туда-сюда, как на дешевых бюджетных камерах.
Такой же принцип используется и на других средне-бюджетных аппаратах с PDAF, но без Dual Pixel.
Каждый пиксель — это и PDAF, и обычный пиксель одновременно!
При использовании технологии Dual Pixel, каждый пиксель на матрице (или 80-90% всех пикселей) используется для работы фазового автофокуса. Но в таком случае, кто же тогда будет делать снимок, если все пиксели используются для фокусировки?
Давайте схематически изобразим Dual Pixel и все вопросы сами отпадут:
Здесь мы видим те же лучи света с противоположных сторон объектива (A и B), микролинзу (C) и цветной фильтр (D). Однако дальше картина немного отличается. Вместо одного фотодиода, собирающего весь свет, размещаются 2 отдельных фотодиода (E и F). А микролинза спроектирована так, чтобы на каждый отдельный фотодиод конкретного пикселя попадала только часть лучей с одной из сторон объектива.
Таким образом, каждый пиксель содержит информацию о фазе световых лучей. Здесь больше нет никаких перекрытий фотодиодов, блокирующих 50% всего света. Для фокусировки камера использует информацию с каждого фотодиода по отдельности (левая и правая стороны объектива), а во время съемки, сигналы с двух фотодиодов объединяются в один.
Камера не теряет информацию, так как здесь нет отдельных PDAF-пикселей, не захватывающих изображение. Также областью фокусировки является вся матрица, а не 5% ее пикселей.
В реальности, на матрице Samsung Galaxy S10 или Note10 с разрешением 12 мегапикселей используется 24 миллиона фотодиодов. Но работают они по отдельности только при фокусировке, а во время съемки сигнал обрабатывается совместно, да и линз с цветными фильтрами на такой матрице 12 миллионов.
Получается, на 108-Мп матрице в реальности используется 216 мегапикселей?
Нет. Размер одного пикселя на любой современной матрице с высоким разрешением (48/64/108 Мп) составляет рекордные 0.8 мкм. Если предположить, что каждый пиксель содержит еще по 2 отдельных фотодиода, мы получим размер каждого из них по 0.4 мкм. Но до этого технологии еще не дошли.
Чтобы ответить на этот вопрос, предлагаю взглянуть на реальную фотографию небольшого участка матрицы от Sony под микроскопом:
То, что вы видите — это реальные микролинзы, прикрывающие пиксели. Под ними расположены цветные фильтры и фотодиоды. Обратите внимание на крупный пузырек в центре кадра. Это микролинза PDAF-пикселя, скрывающая под собою два фотодиода.
Если мы посмотрим под микроскопом на матрицу Samsung, то увидим немножко другую картину:
Здесь уже показан вид сверху. Но мы не видим никаких больших пузырьков, как у Sony, а вместо этого в центре находятся половинки пикселей. Это и есть «классические» PDAF-пиксели, у которых просто одна половина перекрыта, чтобы на них попадали только те лучи света, что прошли через одну половину объектива.
И пусть вас не смущает то, что на этой матрице идут подряд 4 пикселя, у которых перекрыта правая половина. Все дело в том, что перед вам — Tetracell матрица, у которой 4 пикселя объединяются в один. Соответственно, и PDAF-пиксели размещаются по такому же принципу. Подробно о Tetracell-матрицах было рассказано в первой части статьи.
Вместо заключения…
Надеюсь, эта часть не была слишком перегруженной и дала базовое понимание того, как устроен автофокус на современных смартфонах.
Dual Pixel — это логическое продолжение и развитие технологии PDAF-автофокуса. Если выбирать между смартфоном с PDAF и Dual Pixel, предпочтение следует однозначно отдавать Dual Pixel. К слову, такие матрицы используются далеко не только на флагманах от Samsung. Вы можете встретить технологию Dual Pixel на таких аппаратах, как:
Если вы хотите более детально погрузиться в то, как устроены и работают камеры смартфонов, тогда рекомендую почитать мой цикл статей «Камера смартфонов для чайников«. Там вы найдете ответы на все вопросы, связанные с камерами и узнаете много всего нового и интересного.
Автор статьи: Алексей Сало, главный редактор Deep-Review; Фото на обложке (c) Thor Alvis, все иллюстрации в статье принадлежат Deep-Review.
P.S. Не забудьте подписаться в Telegram на первый научно-популярный сайт о мобильных технологиях — Deep-Review, чтобы не пропустить очень интересные материалы, которые мы сейчас готовим!
Как бы вы оценили эту статью?
Нажмите на звездочку для оценки
Внизу страницы есть комментарии.
Напишите свое мнение там, чтобы его увидели все читатели!
Если Вы хотите только поставить оценку, укажите, что именно не так?