Каким образом действует распознавание лиц в смартфонах

Для чего мы предпочитаем разблокировку по лицевому распознаванию

В последние времена распознавание лиц превратилось в одной из самых распространённых возможностей для деблокировки мобильных телефонов. Еще несколько лет тому назад основная часть использующих удовлетворялись PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, как admiral x, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект обуславливает эту конкретную возможность очень нужной? Во-первых, это комфортно: не нужно помнить сложные пароли или искать нужный палец в темноте. Также, это мгновенно: современные алгоритмы идентифицируют лицо буквально за доли секунды. В-третьих, это чувство футуристичности — словно в кинофильмах про admiral x официальный сайт агентов.

Впрочем за этой кажущейся легкостью скрывается полный универсум комплексных методов и инженерных концепций. Попробуем понять, как конкретно работает распознавание лиц в новейших гаджетах, какие существуют методы, насколько они надёжны и что нас предстоит.

Сжатая повествование прогресса технологии

Распознавание лиц как методика присутствует уже более 50 лет. Первые попытки машинного анализа лиц были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины могли лишь выделять силуэты головы и определять промежутки между очами и устами на ахроматических фотографиях.

Первые торговые системы возникли в 90-х, но они были несовершенны: функционировали медленно и часто ошибались. Только с эволюцией синтетических сетей и таких систем, как адмирал х, сильных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали интегрировать личные решения.

Ключевые стадии функционирования устройства определения

Процесс распознавания лица можно условно разделить на несколько основных этапов:

Распознавание лица — устройство распознает присутствие людского образа в кадре.
Извлечение признаков — алгоритм исследует черты облика: конфигурацию глаз, обонятельного органа, уст, расположение надбровных дуг.
Построение шаблона — создаётся уникальный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со эталоном — сформированный образец сравнивается с записанной при регистрации биометрической сведениями владельца.
Принятие решения — если совпадение достаточно существенное, смартфон разблокируется.

Всякий из данных стадий запрашивает специальных процедур и усовершенствований для скорой работы прямо на устройстве.

Технические составляющие: что скрыто внутри

Стандартная передняя камера.

Наиболее несложный способ распознавания физиономии использует исключительно переднюю камеру мобильного устройства. Данный метод внедрён во различных доступных моделях Android-девайсов.

Плюсы:

Не нуждается в нуждается в дополнительные сенсоров.
Оперативно функционирует при хорошем освещении.

Недостатки:

Просто обмануть изображением или видео.
Плохо действует при слабом освещении или нестандартных ракурсах.

Инфракрасная камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика составляет базу Face ID от Apple.

Как это функционирует:

Точечный проектор проецирует на физиономию использующего невидимую структуру из тысяч инфракрасных пятен (например, Face ID использует около 30 000 пятен).
ИК камера записывает изменение формы данной решетки по поверхности физиономии.
Получается 3D глубинная карта глубинности, что практически невозможна для фальсификации обычной фотографией или маской.

Выигрыши

Надёжная функционирование даже в полной тьме.
Сильная устойчивость к имитациям.
Точность определения выше 99%.

Дополнительные сенсоры

В отдельных аппаратах задействуются также экстра сенсорные устройства: ToF (Time-of-Flight), которые измеряют время прохождения луча до цели и обратно; Цветные-датчики дальности; специальные световые лидары для построения более аккуратной 3D-модели физиономии.

Эти инновации применяются чаще всего во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искусственный интеллект в работе

Современные системы распознавания физиономий неосуществимы при отсутствии эксплуатации искусственного интеллекта и machine learning. Именно благодаря таким инновациям, как адмирал х, устройство в состоянии идентифицировать владельца даже при метаморфозах внешнего вида: новая причёска, растительность на лице, линзы или макияж не становятся барьером для деблокировки.

Распознавание лица

В первом этапе программа необходимо мгновенно распознать ликовое изображение внутри полного изображения с камеры. Для данной цели используются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые “обучены” находить человеческие лица среди множества других объектов.

Пример: процесс MTCNN может обнаруживать физиономию даже в случае неполном перекрытии (например, платком или рукой).

Выделение ключевых моментов

После идентификации лица механизм, такая как адмирал х, вычисляет местоположение основных точек: края глаз, конец носа, контуры губ и так далее. Как правило используется от 68 до 128 ключевых маркеров на лицевой области.

Это необходимо для выравнивания визуала: если человек находится с телефон под наклоном, или склонил головку, программа “выпрямляет” изображение до обычного угла для последующего изучения.

Формирование биометрического идентификатора образца

Далее нейросеть строит уплотненное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Такой образец весьма трудно сфальсифицировать: он не хранит само фото пользователя, а лишь особенные характеристики его вида, что делает его идеальным для таких площадок, как admiral-x.

Сопоставление и осуществление заключения

В случае, когда юзер желает разлочить смартфон взглядом, программа осуществляет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный границу (обычно превышает 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ запрещается.

Приспособление к метаморфозам облика

Занимательная особенность актуальных системы — способность самообучения. Если ты регулярно открываете смартфон с новой прической или оптикой, программа постепенно модернизирует эталонный модель вашего облика для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрических информации.

Множество пользователи боятся держать свои биометрические идентификационные данные на смартфоне из-за риска потери данных или взлома гаджета. Иные компании, вроде admiral-x, предоставляют варианты для повышения сохранности данных юзеров.

Локальное сбережение: Большинство девайсов сохраняет био-идентификационные модели исключительно внутри защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют гаджет и закрыты включая создателю.
Шифрование: Все сведения хранятся только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Приложения внешних разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь требовать подтверждение верификации идентичности через системный API.

Необходимо упомянуть важную деталь: в случае, если кто-либо достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют систему защиты от неосознанного разблокирования — к примеру, требуют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие бывают типы распознавания лиц на изображениях?

Сегодня можно определить определить 3 основных способа к реализации этой операции:

Программное двухмерное идентификация

Применяется только лицевая видеокамера без экстра сенсоров глубины. Подобный способ используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность осуществления; низкая цена; скоростная деятельность при качественном свете.
Минусы: просто ввести в заблуждение снимком; нестабильная работа ночью; низкая охрана.

Оборудование для объёмное сканирование

Использует ИК камеру + проектор пикселей + датчики глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Плюсы: значительная надежность; нельзя обмануть изображение/видеозапись; устойчивая деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные способы с дополнением ИИ

Используют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как адмирал х и Google Pixel Face Unlock современных поколений, объединяют фронталку c ИК сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Образцы использования разных техник

iPhone модели X/11/12/13/14 задействуют только техническое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз предложил подобие Face ID среди Android.
Samsung Galaxy S10 версия/S20 обеспечивают как программное обеспечение двухмерное определение по изображению фронталкой, так и сканер глазного ириса.
Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-сенсор

Проблемы безопасности и ложные сигналы

Несмотря на впечатляющий успехи техники за прошедшие годы, совершенных системы пока не наблюдается:

Вероятность мошенничества: Доступные мобильники без труда “разблокируются” четкой фотографией хозяина или же видеозаписью с дисплея иного гаджета.
Идентичные двойняшки: Даже самые безупречные устройства могут спутать между монозиготными близнецами либо семьями с очень схожей внешностью.
Трансформации облика: Резкое похудение/набор веса, хирургические вмешательства либо повреждения в некоторых случаях необходимы для перерегистрации биометрии.
Условия фотографирования: Яркая подсветка солнечным светом или же плотная затенение могут понизить верность идентификации признаков.

Здесь некоторые подсказок по безопасному использованию:

Для значимых операций всегда используйте дополнительную аутентификацию;
Не активируйте опцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
Регулярно обновляйте прошивку прошивку мобильного устройства для предотвращения угроз от новых видов атак;
Включайте опцию “Требовать распахнутых глаз” везде, где она имеется.

В каких областях ещё применяется технология за исключением мобильных телефонов?

Хотя предмет этой статьи сосредоточена на именно портативным гаджетам, стоит упомянуть о других сферах применения технологии:

Управление доступа в офисах и резиденциях;
Платёжные терминалы банков (“Face Pay”);
Виртуальные паспорта последнего типа;
Системы видеонаблюдения городских подразделений;
Механизация регистрации присутствия образовательных учреждений/вузов;
Аутентификация пользователей ПК/ноутбуков.

Например: В столичном метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через турникет без пластика или телефона! Похожие программы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как меняется технический процесс в нынешнее время?

Любой год возникают современные мысли для повышения уровня деятельности систем идентификации лиц:

Увеличивается детализация сенсоров — чем больше деталей фиксируется фотоаппаратом/глубинными сенсорами, тем меньше риск погрешности;
Совершенствуются нейронные сети — современные структуры модели MobileNetV3 позволяют скоростно обучаться дополнительным характеристикам вида пользователя прямо на устройстве без пересылки информации в облачное хранилище.
Совершенствуются технологии антиспуфинга — теперь смартфоны могут распознавать реальные живые лица от статичных снимков/масок по мельчайшим движениям кожи.
Интеграция со смарт-гаджетами — умные часы могут автоматически заблокировать смартфон, если пользователь отошёл далеко.
Проявляются гибридные системы — в частности комбинирующие речевую аутентификацию + лицо + отпечаток пальца.

Здесь, те тренды в особенности популярны на сегодняшний день:

1) Миниатюризация элементов

Производители намереваются сократить размер отверстия (“чёлки”) под датчики на экране за счёт встраивания компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения конфиденциальности всё больше расчётов происходит на месте без пересылки информации во внешний облачный сервис.

3) Унификация регламентов

Google энергично продвигает норму BiometricPrompt API, с целью чтобы аналогичные платформы, например как admiral x, и все Android-аппы были совместимы с различными типами биометрии единообразно.

Какое выбрать сегодня?

Если тебе необходима предельная безопасность информации, остановите выбор на топовые аппараты со встроенным ИК-излучателем или же ToF-датчиком глубины.

iPhone каждого актуальных версий
Huawei Companion/P ряда
Mix Professional
Vivo X линейки
Oppo Find Х серии.

Если бюджет скромен – лучше отдавать предпочтение обычным методам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в admiral x, применять только как опциональную возможность комфорта.

Как повысить комфорт функционирования опции?

Есть пара советов для пользователей, кто уже использует разблокировку по лицу:

Регулярно меняйте свою изображение-шаблон, если сильно изменяется облик.
Не упускайте из виду протирать линзу фронтальной камеры – разводы могут снизить точность!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам включает фотоаппарат если вы берёте его в руки.
При регистрации старайтесь удерживать лицо прямо впереди объектива без резкого наклона головы.
Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвернулись от дисплея.

Перспективы развития техники

В ближайшие годы можно ожидать развития полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим параметрам одновременно: облик + речь + манера ходьбы + движения рук!

Также предполагается возникновение современных способов защиты личной информации – скажем, переменное изменение цифрового шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из самых увлекательных техник нашего времени! Она делает взаимодействие со мобильным устройством проще чем когда-либо прежде, и такие аппы, как admiral-x, могут существенно повысить ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как работает эта технология в деталях, – будете в состоянии более осмысленно определять свой будущий устройство!