Каким способом работает идентификация лиц в телефонах

Для чего мы останавливаемся на разлочивание по лицевому распознаванию

В последние времена определение физиономий стало одной из наиболее востребованных возможностей для деблокировки умных телефонов. Еще некоторые лет назад основная часть юзеров довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, как admiral x, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь превращает эту особенность такой востребованной? Во-первых, это практично: не нужно удерживать в памяти замысловатые пароли или искать нужный палец в темноте. Также, это быстро: современные алгоритмы идентифицируют лицо фактически за доли секунды. В-третью очередь, это впечатление футуристичности — как будто в кинолентах про адмирал х официальный сайт шпионов.

Впрочем за такой видимой простотой скрывается целый мир трудных методов и инженерных концепций. Попробуем исследовать, как точно действует фейсканирование в актуальных гаджетах, какие существуют способы, насколько они надёжны и что нас ожидает в будущем.

Короткая повествование прогресса техники

Распознавание лиц как техника присутствует уже более пятидесяти годов. Первые попытки автоматизированного изучения лиц были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры могли лишь определять контуры головы и определять расстояния между глазами и устами на ахроматических изображениях.

Первые торговые установки возникли в девяностых годах, но они были несовершенны: работали медленно и часто ошибались. Только с развитием искусственных сетей и таких систем, как адмирал х, мощных мобильных микросхем определение лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным сканированием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные решения.

Ключевые шаги работы устройства распознавания

Процесс идентификации лица можно примерно сегментировать на несколько ключевых этапов:

Идентификация лиц — устройство распознает существование людского образа в изображении.
Извлечение особенностей — механизм исследует черты облика: конфигурацию глаз, носа, уст, расположение бровей.
Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со стандартом — сформированный шаблон сравнивается со зафиксированной при внесении биометрической сведениями владельца.
Принятие выбора — если соответствие достаточно высокое, смартфон деблокируется.

Любой из этих стадий нуждается в специальных процедур и усовершенствований для быстрой работы прямо на устройстве.

Технические элементы: что находится в их недрах

Обычная фронтальная камера.

Наиболее простой способ распознавания облика задействует исключительно переднюю камеру мобильного устройства. Такой метод реализован во многих доступных версиях Android-устройств.

Сильные стороны:

Не нуждается в требует дополнительных датчиков.
Оперативно функционирует при хорошем освещённости.

Недостатки:

Просто обмануть снимком или видеозаписью.
Неправильно функционирует при слабом свете или нестандартных углах обзора.

ИК камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика составляет базу Face ID от Apple.

Каким способом это работает:

Точечный проектор отображает на физиономию юзера невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 точек).
Инфракрасная камера записывает искривление этой сетки по плоскости физиономии.
Формируется 3D глубинная карта глубины, которая почти невозможна для имитации обычной фото или маскировкой.

Выигрыши

Надёжная функционирование даже в полной тьме.
Большая устойчивость к подделкам.
Точность распознавания выше 99%.

Дополнительные датчики

В определённых девайсах задействуются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют время прохождения света до предмета и обратно; Трехцветные-датчики глубины; специальные оптические лидары для построения более аккуратной 3D-модели физиономии.

Эти инновации применяются в основном во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: синтетический интеллект на исполнении

Текущие устройства идентификации лиц немыслимы в отсутствие эксплуатации artificial intelligence и machine learning. Именно из-за таким технологиям, как адмирал х, устройство может узнавать юзера даже при изменениях облика: новая причёска, борода, оптика или косметика не становятся помехой для деблокировки.

Обнаружение лица

На стартовом шаге алгоритм должна мгновенно найти образ лица среди всего снимка камеры. Для данной цели используются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые «обучены» идентифицировать человеческие лица среди множества других объектов.

Пример: процесс MTCNN может находить облик даже в случае частичном перекрытии (например, шарфом или ладонью).

Определение основных точек

После обнаружения лица механизм, такая как адмирал х, устанавливает местоположение ключевых точек: края глаз, конец носа, контуры губ и так далее. Обычно применяется от 68 до 128 ключевых маркеров на лицевой поверхности.

Это нужно для нормализации картинки: если юзер удерживает телефон под углом, или склонил голову, программа «выпрямляет» изображение до стандартного положения для последующего изучения.

Построение биометрии образца

Далее искусственная сеть строит компактное цифровое представление («эмбеддинг») внешности пользователя — своеобразный цифровой «отпечаток» внешности длиной от 128 до 512 вещественных чисел.

Данный образец крайне затруднительно имитировать: он не хранит само картинку пользователя, а лишь исключительные черты его облика, что делает его оптимальным для таких систем, как admiral-x.

Сравнительный анализ и осуществление выбора

В случае, когда юзер желает разблокировать мобильник взором, механизм воспроизводит все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный уровень (обычно выше 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ не предоставляется.

Привыкание к метаморфозам внешности

Занимательная характеристика актуальных систем — возможность самообучения. Если ты часто доступаете к телефон с обновленной прической или очками, система постепенно обновляет базовый образец вашего облика для повышения точности работы без ухудшения безопасности.

Безопасность биометрических информации.

Множество пользователи боятся держать свои био-идентификационные данные на мобильном устройстве из-за угрозы потери данных или хакерской атаки. Некоторые компании, вроде admiral-x, предлагают решения для увеличения безопасности данных юзеров.

Локальное хранение: Основная часть аппаратов хранит биометрические шаблоны лишь внутрь защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют устройство и закрыты даже создателю.
Шифрование: Все данные хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Программы внешних девелоперов не имеют прямого доступа к биометрическим; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Следует подчеркнуть значимую особенность: если кто-либо достанет физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители внедряют меры безопасности от «слепого» разблокирования — например, требуют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют типы определения лиц на изображениях?

На сегодняшний день можно определить три ключевых метода к реализации этой функции:

Программное 2D распознавание

Применяется только передняя видеокамера без экстра сенсоров глубины. Подобный способ наблюдается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; минимальная цена; оперативная функционирование при качественном освещении.
Минусы: легко одурачить снимком; нестабильная деятельность ночью; недостаточная охрана.

Оборудование для трёхмерное оцифровка

Задействует инфракрасную камеру + проектор пикселей + датчики глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Преимущества: большая достоверность; нельзя подделать фото/видео; стабильная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана («чёлка»)

Смешанные способы с дополнением ИИ

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам («anti-spoofing»). Например, подобные изделия, как адмирал х и Google Pixel Face Unlock новейших версий, объединяют фронталку c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Образцы применения разных техник

iPhone модели X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition в первый раз предложил эквивалент Face ID среди Android.
Samsung Galaxy S10/S20 обеспечивают как софтверное 2D распознавание по изображению селфи-камерой, так и сканер ириса глаза.
Huawei Mate20 Pro применяет систему из ИК-освещения + Dot Projector + ToF-сенсор

Трудности защиты и неверные сигналы

Несмотря на впечатляющий успехи инноваций за последние лет, идеальных системы пока не наблюдается:

Возможность мошенничества: Доступные телефоны просто открываются качественной изображением владельца либо роликом с дисплея иного гаджета.
Идентичные двойняшки: Даже самые идеальные системы могут перепутать между однояйцевыми близнецами либо семьями с очень схожей внешностью.
Метаморфозы облика: Стремительное утрата веса/увеличение массы тела, косметические процедуры либо повреждения в некоторых случаях необходимы для перерегистрации биометрии.
Условия записи: Яркая подсветка солнцем либо интенсивная темнота могут уменьшить точность идентификации признаков.

Здесь несколько советов по безопасному применению:

Для важных операций всегда используйте дополнительную аутентификацию;
Не активируйте функцию «Разблокировка по лицу» на дешёвых устройствах без ИК-сенсоров;
Постоянно обновляйте программное обеспечение мобильного устройства для защиты от новых видов атак;
Включайте функцию «Требовать распахнутых глаз» там, где она есть.

В каких местах также применяется технология кроме смартфонов?

Несмотря на то, что основная мысль нашей работы касается в частности мобильным устройствам, стоит упомянуть о альтернативных областях использования технологии:

Управление входа в деловых центрах и многоквартирных зданиях;
Платёжные терминалы финансовых учреждений («Face Pay»);
Цифровые паспорта последнего поколения;
Системы видеомониторинга муниципальных подразделений;
Автоматизация отслеживания присутствия школ/вузов;
Авторизация участников персональных компьютеров/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по фейсу («Face Pay») — нужно лишь пройти через турникет без карты или телефона! Похожие инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как трансформируется технический процесс в нынешнее время?

Каждый годик проявляются современные идеи для повышения уровня функционирования систем лицевого распознавания:

Увеличивается чёткость датчиков — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность неточности;
Совершенствуются искусственные интеллекты — передовые конструкции типа MobileNetV3 обеспечивают возможность скоростно адаптироваться к дополнительным характеристикам внешности владельца напрямую на гаджете без пересылки информации в облачное хранилище.
Улучшаются методы антиспуфинга — теперь телефоны способны различать настоящие живые лица от неподвижных фото/маскировок по микроскопическим микродвижениям.
Синхронизация со интеллектуальными приборами — интеллектуальные часы могут авто закрыть доступ к мобильный телефон, если владелец ушёл далеко.
Проявляются гибридные системы — к примеру объединяющие голосовую идентификацию + облик + отпечаток пальца.

Итак, те тенденции очень популярны на сегодняшний день:

1) Сокращение деталей

Изготовители стараются уменьшить размер выреза («чёлки») под датчики на экране за счёт встраивания компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для увеличения конфиденциальности всё более вычислений выполняется на месте без передачи данных во внешний облачный услугу.

3) Стандартизация норм

Google энергично продвигает стандарт BiometricPrompt API, с целью чтобы аналогичные платформы, например как admiral x, и каждые Android-программы были совместимы с всеми формами биометрии унифицированно.

Какое выбрать сегодня?

Когда вам нужна предельная безопасность данных, подбирайте флагманские устройства с вмонтированным ИК-излучателем или же ToF-датчиком глубины.

iPhone всех существующих актуальных моделей
Huawei Mate/Series P линейки
Mi Pro
Vivo X линейки
Oppo Обнаружить X серии.

Если финансы ограничен – лучше отдавать предпочтение классическим методам защиты (PIN-код/сканер отпечатка), а функцию «разблокировка по лицу», такую как в admiral x, задействовать только как дополнительную возможность удобства.

Каким образом увеличить удобство использования функции?

Есть несколько советов для людей, кто уже использует функцию распознавания лица:

Регулярно обновляйте свою фото-шаблон, если сильно меняется внешность.
Не упускайте из виду протирать объектив передней камеры – разводы могут снизить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам включает камеру если вы берёте его в руки.
Во время записи старайтесь сохранять лицо прямо перед камеры без резкого наклона головы.
Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от дисплея.

Будущее прогресса инноваций

В ближайшие времена можно предполагать возникновения полностью бесконтактных способов идентификации человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + походка + движения рук!

Также предполагается возникновение современных способов обеспечения конфиденциальности – скажем, переменное корректировка электронного шаблона после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых захватывающих инноваций нашего периода! Она обеспечивает интеракцию со смартфоном удобнее чем раньше, и такие приложения, как admiral-x, могут в разы повысить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как функционирует эта система изнутри, – будете в состоянии вдумчиво определять свой очередной девайс!