Animoji

Animoji — это анимированные цифровые персонажи, созданные на основе эмодзи и управляемые мимикой лица пользователя в реальном времени. Функция была разработана компанией Apple и впервые представлена в 2017 году как часть операционной системы iOS 11 для смартфонов iPhone X. Animoji используют технологию распознавания лиц (Face ID) для отслеживания до 50 различных движений лицевых мышц, включая моргание, поднятие бровей, движение губ и поворот головы, и синхронно переносят эту мимику на выбранного анимированного персонажа.

История

Идея Animoji возникла в контексте развития технологий дополненной реальности (AR) и машинного обучения. Ключевым фактором стало появление в iPhone X фронтальной камеры TrueDepth, способной проецировать более 30 000 невидимых точек на лицо пользователя для создания точной трёхмерной карты. Эта технология, изначально разработанная для разблокировки устройства (Face ID), была адаптирована для игровых и коммуникационных целей.

Презентация Animoji состоялась 12 сентября 2017 года на мероприятии Apple в новом театре Стива Джобса. Первоначально набор включал 12 персонажей: панда, кошка, собака, лиса, единорог, свинья, цыплёнок, инопланетянин, робот, кролик, обезьяна и какашка (poop emoji). Функция была доступна только на iPhone X из-за требований к аппаратному обеспечению.

В 2018 году с выходом iOS 12 Apple представила Memoji — настраиваемые анимированные персонажи, которые пользователь мог создать самостоятельно, выбрав черты лица, причёску, цвет кожи, аксессуары и одежду. Memoji стали более персонализированной альтернативой Animoji, хотя последние остались в системе как готовые шаблоны. В 2019 году с выходом iOS 13 функция была расширена: появилась поддержка стикеров Memoji, которые можно было использовать в iMessage, и возможность синхронизации с Apple Watch.

Технология работы

Animoji базируется на трёх основных компонентах:

1. Камера TrueDepth — модуль, расположенный в верхней части дисплея iPhone (начиная с X) и iPad Pro (с 2018 года). Он включает инфракрасную камеру, точечный проектор и осветитель. Точечный проектор создаёт сетку из 30 000 инфракрасных точек на лице пользователя, а инфракрасная камера считывает их искажения, формируя трёхмерную карту лица.

1. Нейронный движок Neural Engine — специализированный процессор в чипах Apple A11 Bionic и более новых. Он обрабатывает данные с камеры в реальном времени, распознавая 50 ключевых точек мимики (например, положение губ, бровей, век, челюсти). Этот анализ выполняется на устройстве без отправки данных в облако, что обеспечивает конфиденциальность.

1. Рендеринг анимации — на основе полученных данных 3D-модель персонажа деформируется в соответствии с движениями лица пользователя. Анимация синхронизируется с аудиозаписью: если пользователь говорит, персонаж открывает и закрывает рот, а его голосовые связки имитируют звук (но сама запись голоса остаётся человеческой, а не синтезированной).

Набор персонажей

Первоначальный набор Animoji был ограничен 12 персонажами, но с обновлениями iOS он расширялся. По состоянию на iOS 17 (2023 год) доступно около 24 Animoji, включая:

• Животные: кошка, собака, лиса, панда, свинья, кролик, обезьяна, цыплёнок, ёж, тигр, дракон, лягушка, медведь, мышь.
• Фантастические: инопланетянин, единорог, призрак, робот, динозавр.
• Прочие: какашка, клоун, скелет, осьминог, привидение.

Каждый персонаж имеет уникальную 3D-модель, текстуру и анимационные возможности. Например, у робота механически двигаются суставы, а у инопланетянина — антенны.

Применение

Animoji и Memoji используются в нескольких контекстах:

• Сообщения (iMessage): пользователь может записать короткое видео (до 30 секунд) с анимированным персонажем, который повторяет его мимику и голос. Видео отправляется как вложение в iMessage.
• FaceTime: во время видеозвонка можно включить режим Animoji или Memoji, закрывая своё реальное лицо анимированным персонажем. Это позволяет скрыть внешность или добавить юмористический элемент.
• Стикеры: начиная с iOS 13, Memoji генерируют набор статичных стикеров (например, улыбка, злость, слёзы), которые можно вставлять в сообщения.
• Сторонние приложения: разработчики могут интегрировать Animoji через ARKit — фреймворк для дополненной реальности. Например, в игре «Pokémon GO» или приложениях для социальных сетей.

Критика и ограничения

Несмотря на популярность, Animoji подвергались критике по нескольким причинам:

• Аппаратная зависимость: функция требует наличия камеры TrueDepth, что ограничивает её использование только на устройствах Apple с этой технологией (iPhone X и новее, iPad Pro 2018 и новее). Владельцы более старых моделей не могут пользоваться Animoji.
• Качество анимации: хотя технология отслеживает до 50 точек мимики, она не всегда точно передаёт сложные выражения, такие как сарказм или лёгкая улыбка. Некоторые пользователи отмечали, что анимация выглядит «роботизированной».
• Конфиденциальность: хотя Apple утверждает, что данные обрабатываются локально, в 2019 году исследователи обнаружили, что некоторые сторонние приложения могли получать доступ к данным Face ID через ARKit. Apple исправила эту уязвимость в iOS 13.2.
• Сравнение с конкурентами: на Android-устройствах появились аналоги, такие как AR Emoji от Samsung (2018) и 3D Qmoji от LG (2018), которые также используют фронтальную камеру для анимации. Однако качество и точность отслеживания в них часто уступали Apple.

Интересные факты

• Название Animoji является портманто от слов «animation» (анимация) и «emoji» (эмодзи).
• Первоначально в бета-версии iOS 11 Animoji могли записывать видео только до 10 секунд, но после выхода финальной версии лимит был увеличен до 30 секунд.
• В 2018 году Apple выпустила рекламный ролик, в котором Animoji использовались для озвучивания песен — например, панда «пела» хит «All of Me» Джона Ледженда.
• Memoji стали настолько популярны, что в 2020 году Apple добавила возможность создавать Memoji для людей с ограниченными возможностями — например, с инвалидными колясками или слуховыми аппаратами.

Источники

• Apple Inc. «iPhone X — Technical Specifications» (2017).
• Apple Inc. «iOS 11 Preview» (2017).
• Apple Inc. «Use Animoji and Memoji on your iPhone or iPad Pro» — официальная документация (2023).
• Статья «How Apple’s Face ID works» — журнал Wired (2017).
• Статья «Animoji vs. AR Emoji: Which is better?» — портал Android Authority (2018).
• Отчёт о конфиденциальности ARKit — исследование компании «Kaspersky» (2019).