TrueDepth

TrueDepth — это система камер и датчиков, разработанная компанией Apple, предназначенная для распознавания лиц и создания трёхмерных карт лица пользователя. Впервые представлена в 2017 году вместе со смартфоном iPhone X, где стала основой для технологии биометрической аутентификации Face ID. Система использует комбинацию инфракрасных проекторов, камер и датчиков для построения точной трёхмерной модели лица, что обеспечивает высокий уровень безопасности при разблокировке устройства, авторизации платежей и других операциях, требующих верификации личности.

История

Разработка TrueDepth началась в рамках стратегии Apple по отказу от традиционного датчика Touch ID (сканера отпечатков пальцев) в пользу более продвинутой системы биометрической идентификации. В 2013 году Apple приобрела израильскую компанию PrimeSense, специализировавшуюся на технологиях 3D-сенсоров и глубинного восприятия. Приобретение обошлось в 360 миллионов долларов США. Технологии PrimeSense, ранее использовавшиеся в игровых контроллерах Microsoft Kinect, легли в основу инфракрасного проектора и камеры TrueDepth.

Первый коммерческий продукт с системой TrueDepth — iPhone X — был анонсирован 12 сентября 2017 года и поступил в продажу 3 ноября 2017 года. Вместе с ним была представлена функция Face ID, заменившая Touch ID в качестве основного метода аутентификации. В последующие годы система TrueDepth была интегрирована во все новые модели iPhone (начиная с iPhone XS, XR, 11, 12, 13, 14, 15 и 16), а также в iPad Pro (начиная с третьего поколения, выпущенного в 2018 году). В 2023 году Apple начала постепенно заменять традиционный вырез («чёлка») в верхней части экрана на динамический остров (Dynamic Island), однако сама система TrueDepth осталась неизменной по своей сути.

Устройство и принцип работы

Система TrueDepth состоит из нескольких компонентов, расположенных в верхней части передней панели устройства:

• Инфракрасный проектор (dot projector) — проецирует на лицо пользователя более 30 000 невидимых инфракрасных точек.
• Инфракрасная камера (infrared camera) — считывает отражённый от лица инфракрасный узор.
• Фронтальная камера (TrueDepth camera) — стандартная камера для фото и видео (обычно 12 Мп), используется для распознавания лиц в условиях видимого света.
• Датчик освещённости (ambient light sensor) — определяет уровень внешнего освещения для корректировки работы системы.
• Датчик приближения (proximity sensor) — отключает экран при поднесении устройства к уху во время звонка.

Принцип работы Face ID

Процесс аутентификации включает несколько этапов:

1. Обнаружение лица — устройство активирует инфракрасный проектор и камеру при обнаружении лица в поле зрения (с помощью фронтальной камеры и датчика приближения).
2. Проецирование точек — проектор наносит на лицо пользователя сетку из более 30 000 инфракрасных точек.
3. Считывание узора — инфракрасная камера фиксирует искажения точек, вызванные рельефом лица (нос, скулы, глаза, губы).
4. Построение 3D-модели — на основе данных о положении точек создаётся трёхмерная карта лица, которая сравнивается с сохранённым шаблоном.
5. Верификация — если совпадение превышает заданный порог (обычно 99,9 %), устройство разблокируется. Система использует нейронный процессор (Neural Engine) в чипе A11 Bionic и более новых для обработки данных в реальном времени.

Система способна адаптироваться к изменениям внешности: росту бороды, усам, очкам, шляпам, а также к изменениям, связанным с возрастом. Для обучения используется машинное обучение на устройстве, без передачи данных в облако.

Функции и возможности

Помимо аутентификации Face ID, система TrueDepth используется для ряда других функций:

• Animoji и Memoji — создание анимированных эмодзи и персонализированных аватаров, которые повторяют мимику пользователя в реальном времени (движения губ, бровей, глаз, моргание).
• Портретный режим (Portrait Mode) — создание эффекта размытого фона (боке) на передней камере за счёт данных глубины.
• Портретное освещение (Portrait Lighting) — имитация различных схем освещения (естественный свет, контурный, студийный, сценический и др.).
• Улучшенная фронтальная камера — автоматическая фокусировка и коррекция экспозиции на основе данных глубины.
• Биометрическая защита приложений — использование Face ID для авторизации в сторонних приложениях (банки, менеджеры паролей, социальные сети).
• Apple Pay — подтверждение платежей через Face ID.
• Автозаполнение паролей — автоматическое заполнение логинов и паролей в Safari и других приложениях.
• Создание объёмных моделей — в некоторых приложениях (например, для сканирования объектов) используется глубинное восприятие TrueDepth.

Безопасность и конфиденциальность

Apple позиционирует Face ID как одну из самых безопасных систем биометрической аутентификации среди потребительских устройств. По заявлениям компании, вероятность случайного совпадения с другим лицом составляет 1 к 1 000 000 (для Touch ID — 1 к 50 000). Система защищена от атак с использованием фотографий, масок, видеозаписей и спящих людей, так как требует наличия живого человека с открытыми глазами.

Данные лица (шаблон) хранятся в зашифрованном виде в Secure Enclave — выделенном сопроцессоре на чипе. Они не передаются в облачные сервисы Apple (iCloud) и не доступны приложениям. При попытке взлома или после пяти неудачных попыток распознавания система блокируется и требует ввода пароля.

Критика и ограничения

Несмотря на высокую точность, система TrueDepth имеет ряд ограничений:

• Зависимость от освещения — при очень ярком солнечном свете или полной темноте (хотя инфракрасная подсветка работает в темноте) возможны сбои.
• Проблемы с близнецами и родственниками — хотя вероятность совпадения низка, зафиксированы случаи, когда система ошибочно распознавала близнецов или членов семьи с очень похожими чертами лица.
• Необходимость визуального контакта — пользователь должен смотреть на экран; при закрытых глазах или отведённом взгляде разблокировка не происходит (если не отключена функция «Требовать внимание»).
• Проблемы с аксессуарами — некоторые солнцезащитные очки, маски, медицинские маски (особенно в период пандемии COVID-19) могут препятствовать распознаванию. В iOS 15.4 Apple добавила возможность разблокировки в маске (с использованием дополнительного сканирования области вокруг глаз).
• Износ компонентов — инфракрасный проектор и камера могут выходить из строя при падениях, попадании влаги или механических повреждениях. Ремонт модуля TrueDepth часто требует замены всего дисплейного модуля, что увеличивает стоимость ремонта.

Интересные факты

• Система TrueDepth использует инфракрасный свет с длиной волны 940 нм, который невидим для человеческого глаза, но безопасен для зрения.
• Первоначально Apple планировала разместить сканер отпечатков пальцев под экраном, но отказалась от этой идеи в пользу Face ID из-за сложности реализации и меньшей надёжности.
• В 2019 году Apple подала патент на технологию, позволяющую использовать TrueDepth для сканирования вен лица, что могло бы повысить точность аутентификации.
• В 2020 году, во время пандемии COVID-19, Apple временно ослабила требования к распознаванию в маске, добавив возможность разблокировки с помощью Apple Watch (начиная с iOS 14.5).
• Система TrueDepth также используется в некоторых моделях iPad Pro для создания 3D-сканов объектов с помощью приложения «Измерение» (Measure).

Источники

• Apple Inc. «Face ID Security Guide» (2017–2023).
• Apple Inc. «iPhone X — Technical Specifications» (2017).
• Apple Inc. «iOS 15.4 Release Notes» (2022).
• Патент США US 2019/0129845 A1 «Face Recognition Using Infrared Projector».
• Статья «How Apple’s TrueDepth Camera Works» — сайт iFixit (2017).
• Журнал «Wired» — «The Inside Story of How Apple’s Face ID Was Born» (2017).