Каким образом функционирует определение лиц в смартфонах

Почему мы предпочитаем разблокирование по лицевому распознаванию

В прошлые времена распознавание лиц является одной из самых популярных опций для открытия мобильных телефонов. Всего несколько годов тому назад основная часть юзеров удовлетворялись пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, например admiral x, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает эту функцию очень нужной? Во-первых, это практично: не нужно запоминать замысловатые пароли или отыскивать верный палец в темноте. Кроме того, это быстро: современные системы распознают лицо практически за доли секунды. В-третьих, это ощущение футуристичности — словно в кинолентах про admiral x зеркало шпионов.

Однако за данной кажущейся простотой прячется весь вселенная комплексных техник и инженерных разработок. Позвольте нам понять, как конкретно действует фейсканирование в новейших смартфонах, какие бывают методы, насколько они безопасны и что нас ждёт впереди.

Сжатая история эволюции инноваций

Распознавание лиц как техника существует уже более пятидесяти годов. Изначальные попытки автоматического исследования лица были предприняты еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины умели лишь обозначать контуры черепа и определять расстояния между глазами и ртом на монохромных изображениях.

Начальные бизнес платформы стали доступны в 90-х, но они были несовершенны: функционировали медленно и нередко ошибались. Только с прогрессом искусственных сетей и таких платформ, как адмирал х, сильных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать личные решения.

Ключевые шаги работы системы определения

Процесс определения лица можно ориентировочно разделить на несколько основных этапов:

1. Обнаружение лиц — устройство определяет наличие человеческого лица в кадре.
2. Извлечение особенностей — алгоритм изучает особенности облика: конфигурацию зрительных органов, обонятельного органа, уст, позицию бровей.
3. Построение шаблона — создаётся особенный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с эталоном — созданный модель сравнивается со записанной при регистрации биометрической информацией владельца.
5. Принятие определения — если сходство достаточно высокое, смартфон открывается.

Всякий из этих шагов нуждается в специальных алгоритмов и оптимизаций для быстрой работы непосредственно на девайсе.

Железные компоненты: что прячется внутри

Обычная селфи камера.

Самый простой несложный вариант распознавания облика использует исключительно переднюю камеру смартфона мобильного устройства. Подобный способ реализован во многих доступных версиях Android-девайсов.

Достоинства:

• Не нуждается в потребляет внешних датчиков.
• Шустро функционирует при качественном свете.

Отрицательные стороны:

• Просто обмануть фотографией или видеозаписью.
• Неправильно функционирует при низком свете или необычных ракурсах.

ИК камера и точечный проекционный аппарат

Более совершенные системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика составляет базу Face ID от Apple.

Каким способом это действует:

• Точечный устройство проекции проецирует на физиономию юзера невидимую структуру из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
• Инфракрасная устройство записывает деформацию этой сетки по плоскости лица.
• Получается трехмерная глубинная карта глубинности, что практически неподвластна для имитации типичной фото или маскировкой.

Преимущества

• Надёжная функционирование даже в полной тьме.
• Сильная сопротивляемость к подделкам.
• Точность распознавания свыше 99%.

Дополнительные сенсоры

В определённых устройствах применяются также экстра сенсоры: ToF (Time-of-Flight), которые измеряют время распространения света до объекта и обратно; Трехцветные-датчики глубины; специальные световые измерители расстояния для формирования более детализированной 3D-модели лица.

Эти разработки используются наиболее часто во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искуственный ум в работе

Современные системы идентификации лиц немыслимы в отсутствие использования ИИ и machine learning. Именно из-за таким инновациям, как адмирал х, устройство может идентифицировать пользователя даже при метаморфозах внешности: новая укладка, растительность на лице, оптика или макияж не становятся препятствием для открытия.

Детектирование физиономии

На начальном стадии система должна мгновенно найти лицо внутри всего снимка камеры. Для этого используются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” идентифицировать человеческие лица среди множества других объектов.

Пример: процесс MTCNN может обнаруживать физиономию даже в случае неполном перекрытии (например, шалью или ладонью).

Выделение основных точек

После обнаружения лица система, такая как адмирал х, определяет положение основных точек: края глаз, верхушка носа, контуры губ и так далее. Часто применяется от 68 до 128 главных точек на лицевой поверхности.

Данное требуется для выравнивания картинки: если пользователь находится с смартфон под углом, или наклонил головку, программа корректирует изображение до нормального состояния для последующего изучения.

Построение биометрического идентификатора модели

Далее нейросеть строит уплотненное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 чисел с плавающей запятой.

Данный шаблон весьма сложно подделать: он не удерживает само изображение пользователя, а лишь исключительные характеристики его вида, что делает его оптимальным для таких платформ, как admiral-x.

Сопоставление и принятие выбора

Если человек хочет открыть телефон взглядом, система повторяет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный порог (обычно больше 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ запрещается.

Адаптация к метаморфозам облика

Увлекательная характеристика нынешних системы — возможность самостоятельного обучения. Если ты постоянно разблокируете телефон с новой укладкой или оптикой, алгоритм постепенно модернизирует основной шаблон вашего внешности для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрических данных информации.

Множество юзеры боятся сохранять свои биометрические идентификационные данные на телефоне из-за угрозы утечки данных или взлома устройства. Некоторые фирмы, например admiral-x, предлагают методы для улучшения безопасности данных юзеров.

• Локальное сохранение: Преимущественно устройств сохраняет биометричные шаблоны исключительно внутри защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют аппарат и недоступны даже создателю.

• Шифрование: Все данные сберегаются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних разработчиков не имеют непосредственного доступа к биометрическим данным; они могут лишь требовать факт подтверждения идентичности через системный API.

Следует отметить важную деталь: в случае, если какой-то человек получит физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители осуществляют систему защиты от неосознанного разблокирования — в частности, требуют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие бывают категории распознавания лиц?

Сегодня можно определить определить 3 главных способа к выполнению этой функции:

Программное плоское идентификация

Используется только передняя камера без вспомогательных датчиков дистанции. Такой подход используется наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость осуществления; минимальная цена; скоростная деятельность при достаточном свете.
Минусы: просто обмануть фотографией; нестабильная деятельность ночью; низкая защищенность.

Оборудование для объёмное оцифровка

Применяет ИК видеокамеру + проектор точек + сенсоры глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: высокая надежность; невозможно обмануть изображение/видеозапись; устойчивая работа в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные способы с интеграцией ИИ

Применяют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например адмирал х и Google Pixel Face Unlock новейших версий, сочетают фронтальную камеру c ИК датчиком движения Soli Radar для защиты от подделок руками/масками/видеодисплеями чужих устройств.

Иллюстрации использования разных способов

• iPhone линейки X/11/12/13/14 используют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые внедрил аналог Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 имеют как софтверное двухмерное идентификацию по фото фронталкой, так и датчик глазного ириса.
• Huawei Mate20 Pro применяет набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Проблемы охраны и неверные сигналы

Несмотря на впечатляющий прогресс инноваций за прошедшие лет, совершенных систем пока не существует:

1. Вероятность обмана: Недорогие телефоны легко “разблокируются” качественной фотографией владельца либо видео с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые безупречные системы могут ошибиться между однояйцевыми близнецами либо родственниками с очень похожей внешностью.
3. Изменения облика: Резкое утрата веса/увеличение массы тела, хирургические вмешательства либо травмы в некоторых случаях требуют перерегистрации биометрии.
4. Условия записи: Интенсивная освещённость солнцем или же плотная затенение могут уменьшить верность определения признаков.

Здесь пара рекомендаций по защищённому использованию:

• Для важных операций всегда применяйте дополнительную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Регулярно обновляйте прошивку прошивку смартфона для обеспечения безопасности от актуальных атак;
• Включайте опцию “Требовать распахнутых глаз” везде, где она имеется.

В каких областях дополнительно применяется технологии за исключением мобильных телефонов?

Пускай предмет данной статьи сосредоточена на конкретно смартфонам и планшетам, следует отметить других сферах применения технологии:

• Мониторинг прохода в деловых центрах и жилых домах;
• Платёжные терминалы банков (“Face Pay”);
• Цифровые удостоверения личности современного образца;
• Системы видеонаблюдения муниципальных подразделений;
• Автоматизация регистрации явки образовательных учреждений/вузов;
• Вход участников ПК/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — хватит пройти через барьер без пластика или мобильника! Аналогичные инициативы осуществляются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом меняется технический процесс в нынешнее время?

Любой годик возникают новые мысли для повышения качества функционирования систем лицевого распознавания:

1. Увеличивается детализация сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше риск ошибки;
2. Совершенствуются искусственные интеллекты — новейшие архитектуры вида MobileNetV3 обеспечивают возможность быстро адаптироваться к новым характеристикам облика обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Совершенствуются методы антиспуфинга — теперь телефоны могут различать подлинные анимированные лица от неподвижных фотографий/маскировок по незаметным микродвижениям.
4. Синхронизация со интеллектуальными приборами — смарт-часы могут автоматически заблокировать мобильный телефон, если обладатель ушёл далеко.
5. Проявляются гибридные системы — к примеру объединяющие голосовую идентификацию + лицо + отпечаток пальца.

Вот, какие направления очень востребованы сейчас:

1) Сокращение элементов

Изготовители стараются уменьшить габариты прорези (“чёлки”) для датчики на экране за счёт встраивания миниатюрных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения личной безопасности всё больше вычислений происходит локально без передачи информации во внешний облачный услугу.

3) Унификация норм

Гугл энергично продвигает норму BiometricPrompt API, для того чтобы подобные платформы, вроде admiral x, и каждые Android-аппы могли работать с любыми видами биометрии стандартизированно.

Какое подобрать на сегодня?

Когда вам нужна максимальная защита данных, остановите выбор на топовые аппараты с интегрированным ИК-проектором или же ToF-датчиком глубины.

• iPhone каждого новейших поколений
• Huawei Mate/Series P ряда
• Xiaomi Pro
• Vivo X модели
• Oppo Find Икс серии.

Если бюджет скромен – лучше выбирать традиционным средствам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в admiral x, задействовать только как второстепенную возможность комфорта.

Как повысить удобство работы функции?

Есть несколько хитростей для тех, кто уже использует разблокировку по лицу:

1. Регулярно обновляйте свою фотографию-шаблон, если сильно изменяется внешний вид.
2. Не пренебрегайте протирать линзу передней камеры – пятна могут понизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам включает фотоаппарат если вы берёте его в руки.
4. Во время регистрационного процесса пытайтесь сохранять голову прямо напротив видеоустройства не допуская резкого наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвели взгляд от экрана.

Будущее эволюции инноваций

В скоро наступающие времена можно ожидать развития полностью безконтактных способов распознавания человека сразу по нескольким биометрическим параметрам одновременно: лицо + голос + шаги + движения рук!

Также вероятно развитие современных подходов защиты личной информации – например, переменное модификация электронного образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее увлекательных технологий нашего периода! Она делает общение со смартфоном комфортнее чем раньше, и такие приложения, как admiral-x, могут в разы оптимизировать ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как работает эта система изнутри, – сумеете более осмысленно подбирать свой очередной устройство!