Каким способом работает распознавание лиц в смартфонах

Почему мы предпочитаем разлочивание по фейсу

В последние времена идентификация лиц превратилось в одной из наиболее востребованных возможностей для открытия смартфонов. Лишь несколько годков ранее основная часть юзеров довольствовались PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением таких технологий, как admiral x, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект превращает эту возможность такой востребованной? Во-первых, это практично: не нужно запоминать сложные пароли или искать верный палец в темноте. Кроме того, это мгновенно: современные программы идентифицируют лицо практически за доли секунды. В-третью очередь, это ощущение футуристичности — словно в кинофильмах про admiral x зеркало шпионов.

Однако за данной кажущейся несложностью таится весь универсум сложных техник и инженерных концепций. Давайте понять, как именно действует распознавание лиц в актуальных гаджетах, какие применяются методы, насколько они защищены и что нас ожидает в будущем.

Сжатая повествование эволюции техники

Идентификация лиц как методика присутствует уже более пятидесяти лет. Первые эксперименты автоматизированного изучения лица были сделаны еще в 1960-х годы в научных учреждениях США. Тогда компьютеры умели лишь обозначать контуры лица и измерять промежутки между глазами и ртом на ахроматических изображениях.

Начальные торговые системы возникли в девяностых годах, но они были неидеальны: действовали неспешно и часто ошибались. Только с эволюцией искусственных сетей и таких площадок, как адмирал х, высокопроизводительных мобильных процессоров идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать личные решения.

Ключевые шаги функционирования механизма распознавания

Процесс определения лица можно ориентировочно сегментировать на несколько основных этапов:

1. Идентификация лиц — аппарат выявляет существование людского лица в кадре.
2. Определение особенностей — механизм анализирует контуры облика: очертания глаз, обонятельного органа, губ, положение надбровных дуг.
3. Построение модели — создаётся уникальный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с эталоном — созданный шаблон сравнивается с зафиксированной при внесении биометрической информацией владельца.
5. Принятие решения — если соответствие достаточно высокое, смартфон разблокируется.

Любой из этих этапов требует специальных процедур и улучшений для оперативной работы непосредственно на девайсе.

Аппаратные составляющие: что находится внутри них

Обычная передняя камера.

Самый простой вариант распознавания лица применяет исключительно фронтальную камеру смартфона мобильного устройства. Данный метод внедрён во многих недорогих версиях Android-девайсов.

Достоинства:

• Необходимо потребляет дополнительных датчиков.
• Быстро работает при хорошем свете.

Слабые стороны:

• Легко одурачить изображением или видео.
• Неправильно функционирует при низком свете или нестандартных углах обзора.

Инфракрасная фотокамера и пунктирный проектор

Более усовершенствованные системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология является основой Face ID от Apple.

Каким способом это действует:

• Точечный проектор проецирует на облик использующего невидимую сетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 меток).
• ИК камера регистрирует деформацию этой решетки по плоскости физиономии.
• Получается трехмерная карта глубины глубины, что практически невозможна для подделки обычной фото или маской.

Преимущества

• Надёжная деятельность даже в полной темноте.
• Сильная защита к фальсификациям.
• Точность распознавания более 99%.

Дополнительные сенсорные устройства

В определённых устройствах применяются также экстра сенсорные устройства: ToF (Time-of-Flight), которые измеряют период движения света до цели и обратно; Цветные-датчики дальности; специальные световые дальномеры для создания более точной 3D-модели физиономии.

Эти разработки применяются в основном во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный разум в исполнении

Текущие устройства распознавания лиц немыслимы при отсутствии эксплуатации artificial intelligence и машинного обучения. Именно вследствие таким технологиям, как адмирал х, гаджет в состоянии идентифицировать юзера даже при метаморфозах внешности: новая стрижка, растительность на лице, очки или грим не становятся препятствием для открытия.

Детектирование физиономии

В стартовом этапе система должна мгновенно распознать ликовое изображение в пределах всего снимка камеры. Для этого задействуются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы распознавать лиц человека среди множества других объектов.

Пример: метод MTCNN может обнаруживать облик даже в случае частичном перекрытии (например, платком или ладонью).

Выделение важных точек

После обнаружения лица система, такая как адмирал х, вычисляет положение ключевых точек: кончики глаз, верхушка носа, границы губ и так далее. Как правило используется от 68 до 128 основных маркеров на лицевой области.

Это требуется для выравнивания изображения: если человек держит смартфон под наклоном, или склонил голову, программа исправляет картинку до стандартного положения для дальнейшего анализа.

Формирование биометрии шаблона

Далее нейросеть строит компактное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный формат весьма сложно сфальсифицировать: он не хранит само фото пользователя, а лишь особенные черты его облика, что делает его оптимальным для таких платформ, как admiral-x.

Сопоставление и принятие решения

В случае, когда пользователь намеревается разлочить смартфон взором, механизм повторяет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый границу (обычно выше 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ запрещается.

Привыкание к изменениям облика

Интересная особенность современных систем — возможность самостоятельного обучения. Если вы регулярно доступаете к телефон с свежей стрижкой или оптикой, система постепенно модернизирует эталонный образец вашего облика для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрических информации.

Большинство клиенты боятся держать свои биометрические идентификационные данные на смартфоне из-за риска утечки информации или взлома устройства. Некоторые компании, такие как admiral-x, предлагают решения для улучшения безопасности сведений пользователей.

• Локальное сбережение: Большинство аппаратов хранит био-идентификационные шаблоны только внутри безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют гаджет и закрыты включая создателю.

• Шифрование: Все сведения сохраняются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения внешних разработчиков не имеют прямого доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Следует отметить значимую особенность: если кто-либо сможет получить физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют меры безопасности от “слепого” разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют типы идентификации лиц на изображениях?

На сегодняшний день можно выделить различить 3 главных подхода к выполнению этой функции:

Программное плоское распознавание

Эксплуатируется только лицевая видеокамера без дополнительных датчиков глубины. Этот метод встречается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; низкая стоимость; скоростная функционирование при качественном свете.
Минусы: несложно одурачить снимком; нестабильная деятельность ночью; низкая охрана.

Оборудование для трёхмерное сканирование

Задействует ИК видеокамеру + проекционный модуль точек + датчики глубины (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: высокая надёжность; невозможно подделать фото/видео; устойчивая деятельность при любом освещении.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с ИИ-дополнением

Используют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например адмирал х и Google Pixel Face Unlock новейших поколений, сочетают фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеоэкранами посторонних устройств.

Образцы использования различных методов

• iPhone модели X/11/12/13/14 задействуют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил аналог Face ID в числе Android.
• Samsung Galaxy S10/S20 имеют как софтверное 2D определение по изображению селфи-камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro задействует комплекс из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности охраны и неверные тревоги

Несмотря на впечатляющий успехи техники за прошедшие годы, совершенных системы пока не наблюдается:

1. Шанс подвоха: Бюджетные мобильники просто доступны четкой фотографией хозяина или же видеозаписью с экрана другого устройства.
2. Идентичные двойняшки: Даже самые безупречные механизмы могут спутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
3. Метаморфозы внешности: Резкое похудение/набор веса, косметические процедуры либо травмы иногда необходимы для перерегистрации биометрических данных.
4. Условия съёмки: Интенсивная освещённость солнцем или же интенсивная затенение могут уменьшить аккуратность распознавания признаков.

Здесь несколько подсказок для надёжному применению:

• Для значимых операций всегда применяйте двухфакторную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Регулярно обновляйте ПО мобильного устройства для предотвращения угроз от новых видов атак;
• Включайте функцию “Требовать распахнутых глаз” в тех местах, где она доступна.

Где ещё находится применение технология помимо мобильных телефонов?

Хотя тема этой публикации касается именно портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Контроль доступа в деловых центрах и жилых домах;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Электронные удостоверения личности нового типа;
• Установки видеоконтроля городских сервисов;
• Автоматизирование учёта явки образовательных учреждений/вузов;
• Аутентификация пользователей ПК/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по лицу (“Face Pay”) — достаточно пройти через барьер без пластика или телефона! Похожие проекты реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технология сегодня?

Каждый годик проявляются свежие идеи для усовершенствования уровня функционирования систем идентификации лиц:

1. Увеличивается детализация сенсоров — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс погрешности;
2. Совершенствуются нейронные сети — новейшие конструкции типа MobileNetV3 обеспечивают возможность скоростно осваивать новым характеристикам облика владельца напрямую на гаджете без пересылки информации в облачное хранилище.
3. Улучшаются технологии антиспуфинга — теперь мобильные устройства способны распознавать настоящие анимированные лица от статичных фотографий/маскировок по микроскопическим микродвижениям.
4. Взаимодействие со умными устройствами — смарт-часы могут авто заблокировать смартфон, если пользователь отошёл далеко.
5. Проявляются гибридные механизмы — например совмещающие аудио аутентификацию + физиономию + отпечаток пальца.

Здесь, которые тенденции очень актуальны на сегодняшний день:

1) Миниатюризация деталей

Изготовители пытаются уменьшить габариты прорези (“чёлки”) для датчики на экране за счёт внедрения миниатюрных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на аппарате

Для улучшения конфиденциальности всё более вычислений происходит на месте без отправки информации во дополнительный облачный сервис.

3) Стандартизация норм

Google интенсивно пропагандирует стандарт BiometricPrompt API, с целью чтобы подобные площадки, вроде admiral x, и все Android-программы были совместимы с любыми видами биометрии стандартизированно.

Что решить на сегодня?

В случае если вам необходима предельная безопасность данных, подбирайте передовые аппараты с интегрированным ИК-проектором или ToF-сенсором глубины.

• iPhone каждого актуальных версий
• Huawei Partner/P ряда
• Mi Professional
• Vivo X серии
• Oppo Обнаружить Х линейки.

Если финансы скромен – лучше предпочесть традиционным способам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в admiral x, использовать только как второстепенную опцию комфорта.

Как улучшить удобство работы функции?

Есть пара лайфхаков для людей, кто уже применяет разблокировку через лицо:

1. Часто обновляйте свою изображение-шаблон, если кардинально изменяется внешность.
2. Не забывайте очищать линзу передней камеры – пятна могут снизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам активирует фотоаппарат как только вы берёте его в руки.
4. Во время регистрации пытайтесь удерживать голову прямо напротив объектива исключая резкого наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвели взгляд от экрана.

Будущее прогресса технологии

В ближайшие годы можно предвкушать появления полностью дистанционных способов опознания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + походка + движения рук!

Также возможно появление свежих способов защиты конфиденциальности – к примеру, динамическое изменение электронного шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из очень захватывающих инноваций нашего времени! Она делает интеракцию со телефоном проще чем когда-либо прежде, и такие приложения, как admiral-x, могут значительно оптимизировать ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как устроена эта методика изнутри, – сможете осознаннее подбирать свой очередной девайс!