Каким образом функционирует распознавание лиц в мобильных устройствах

Для чего мы предпочитаем разблокировку по лицу

В последние годы распознавание лиц является одной из самых популярных возможностей для открытия смартфонов. Еще несколько лет тому назад большинство юзеров удовлетворялись пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, например admiral x, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает эту функцию такой востребованной? Прежде всего, это комфортно: не нужно запоминать сложные пароли или находить верный палец в тьме. Кроме того, это мгновенно: современные программы узнают лицо буквально за мгновение. В-третьих, это ощущение футуризма — будто в кинофильмах про адмирал х казино шпионов.

Тем не менее за данной кажущейся несложностью таится полный мир сложных методов и инженерных разработок. Давайте исследовать, как точно функционирует фейсканирование в актуальных гаджетах, какие бывают методы, насколько они защищены и что нас ожидает в будущем.

Краткая повествование прогресса технологии

Идентификация лиц как технология существует уже более 50 годов. Начальные попытки автоматического изучения облика были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры умели лишь выделять очертания черепа и вычислять промежутки между глазами и ртом на черно-белых изображениях.

Изначальные торговые установки возникли в 90-х, но они были неидеальны: работали медленно и часто давали сбои. Только с развитием искусственных сетей и таких площадок, как адмирал х, сильных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные решения.

Главные стадии действия системы определения

Процесс идентификации лица можно ориентировочно сегментировать на несколько важных этапов:

Идентификация лиц — камера распознает наличие людского образа в снимке.
Определение признаков — система анализирует черты физиономии: форму глаз, обонятельного органа, губ, позицию надбровных дуг.
Построение шаблона — создаётся неповторимый электронный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с эталоном — сформированный шаблон сопоставляется с сохранённой при внесении биометрической информацией владельца.
Принятие выбора — если сходство достаточно высокое, смартфон деблокируется.

Каждый из указанных этапов запрашивает индивидуальных процедур и оптимизаций для скорой работы непосредственно на девайсе.

Аппаратные компоненты: что находится в их недрах

Обычная селфи камера.

Самый простой метод определения лица задействует только фронтальную камеру мобильного устройства. Подобный метод осуществлён во многих бюджетных вариантах Android-устройств.

Положительные стороны:

Необходимо требует дополнительные датчиков.
Быстро функционирует при качественном освещении.

Недостатки:

Несложно ввести в заблуждение фотографией или видеозаписью.
Плохо функционирует при низком свете или непривычных точках зрения.

ИК фотокамера и точечный проекционный аппарат

Более совершенные системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс является основой Face ID от Apple.

Каким способом это функционирует:

Точечный устройство проекции проецирует на физиономию использующего невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 меток).
ИК камера регистрирует изменение формы этой решетки по плоскости физиономии.
Получается трёхмерная глубинная карта глубинности, которая почти невозможна для имитации стандартной фотографией или маской.

Плюсы

Надёжная функционирование даже в полной тьме.
Высокая устойчивость к фальсификациям.
Точность распознавания более 99%.

Добавочные датчики

В определённых устройствах применяются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют период прохождения луча до цели и обратно; Цветные-датчики дальности; специальные оптические дальномеры для создания более аккуратной 3D-модели физиономии.

Эти инновации применяются чаще всего во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искусственный интеллект в действии

Текущие механизмы идентификации лиц немыслимы без эксплуатации artificial intelligence и машинного обучения. Именно из-за таким разработкам, как адмирал х, аппарат способно идентифицировать владельца даже при трансформациях внешности: новая причёска, растительность на лице, линзы или макияж не становятся препятствием для деблокировки.

Распознавание лиц

При стартовом шаге система должна оперативно найти образ лица среди всего изображения камеры. Для этого используются многоуровневые классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены идентифицировать лица людей среди множества других объектов.

Пример: метод MTCNN способен находить физиономию даже в случае частичном закрытии (например, платком или ладонью).

Выделение ключевых аспектов

После распознавания лица система, такая как адмирал х, устанавливает положение главных точек: края глаз, верхушка носа, края губ и так далее. Часто применяется от 68 до 128 основных точек на лицевой области.

Это нужно для стабилизации изображения: если юзер удерживает телефон под углом, или повернул голову, программа корректирует изображение до обычного угла для дальнейшего анализа.

Построение биометрического идентификатора шаблона

Далее нейронная сеть строит уплотненное числовое представление („эмбеддинг“) внешности пользователя — своеобразный цифровой „отпечаток“ лица длиной от 128 до 512 вещественных чисел.

Данный формат очень затруднительно сфальсифицировать: он не удерживает само картинку пользователя, а лишь особенные характеристики его вида, что делает его совершенным для таких площадок, как admiral-x.

Сравнение и вынесение решения

Когда пользователь желает разлочить телефон глазами, механизм повторяет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно превышает 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ не предоставляется.

Адаптация к изменениям внешнего вида

Интересная характеристика нынешних систем — возможность самообучения. Если ты регулярно открываете мобильное устройство с свежей стрижкой или оптикой, алгоритм постепенно обновляет основной шаблон вашего облика для увеличения точности действия без ухудшения безопасности.

Охрана биометрии данных.

Большинство пользователи беспокоятся держать свои биометрические данные на телефоне из-за вероятности потери данных или взлома гаджета. Определенные компании, такие как admiral-x, предлагают варианты для повышения сохранности данных юзеров.

Локальное сбережение: Преимущественно устройств записывает био-идентификационные модели исключительно внутрь защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не оставляют устройство и не доступны в том числе создателю.
Шифрование: Все информация хранятся только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция приложений: Программы третьих разработчиков не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт верификации идентичности через системный API.

Необходимо подчеркнуть важную подробность: если какой-то человек достанет физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители осуществляют меры безопасности от „слепого“ разблокирования — в частности, требуют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории определения лиц?

В настоящее время можно выделить определить 3 главных способа к осуществлению этой операции:

Софтверное 2D распознавание

Эксплуатируется только фронтальная видеокамера без дополнительных сенсоров дистанции. Подобный метод наблюдается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; низкая стоимость; быстрая деятельность при качественном освещении.
Минусы: легко одурачить фотографией; ненадежная деятельность ночью; слабая защищенность.

Оборудование для 3D сканирование

Использует инфракрасную камеру + проекционный модуль точек + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: большая надежность; невозможно подделать изображение/видеозапись; стабильная функционирование в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана („чёлка“)

Гибридные способы с ИИ-дополнением

Задействуют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам („anti-spoofing“). Например, подобные продукты, например адмирал х и Google Pixel Face Unlock современных поколений, комбинируют фронтальную камеру c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Иллюстрации эксплуатации разных методов

iPhone модели X/11/12/13/14 применяют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition первый раз внедрил подобие Face ID в числе Android.
Samsung Galaxy S10 версия/S20 обеспечивают как программное плоское распознавание по изображению фронтальной камерой, так и сенсор ириса глаза.
Huawei Mate20 Pro использует набор из ИК-освещения + Dot Projector + ToF-сенсор

Вопросы охраны и неверные сигналы

Несмотря на замечательный успехи технологий за недавние лет, идеальных механизмов пока не существует:

Вероятность мошенничества: Бюджетные смартфоны просто доступны качественной изображением владельца или видео с экрана другого устройства.
Идентичные близняшки: Даже самые совершенные механизмы могут спутать между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
Изменения внешности: Резкое снижение веса/увеличение массы тела, хирургические вмешательства или повреждения в некоторых случаях требуют обновления данных биометрических данных.
Условия фотографирования: Интенсивная засветка солнечным светом или же плотная затенение могут понизить верность определения признаков.

Здесь несколько рекомендаций по надёжному эксплуатации:

Для значимых операций всегда внедряйте двухэтапную аутентификацию;
Не активируйте опцию „Разблокировка по лицу“ на недорогих моделях без ИК-сенсоров;
Систематически апгрейдите ПО мобильного устройства для предотвращения угроз от современных угроз;
Включайте опцию „Требовать открытых глаз“ там, где она доступна.

В каких местах также применяется технологии помимо мобильных телефонов?

Пускай основная мысль нашей публикации сосредоточена на в частности смартфонам и планшетам, следует отметить прочих направлениях внедрения технологии:

Контроль прохода в офисах и жилых домах;
Платёжные терминалы банков („Face Pay“);
Цифровые паспорта последнего образца;
Системы видеонаблюдения муниципальных сервисов;
Автоматизирование регистрации явки учебных заведений/институтов;
Вход юзеров компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу („Face Pay“) — достаточно пройти через турникет без карты или телефона! Похожие инициативы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом меняется технический процесс в наше время?

Любой год проявляются современные мысли для повышения качества функционирования систем распознавания лиц:

Увеличивается детализация сенсоров — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше шанс ошибки;
Совершенствуются искусственные интеллекты — новейшие структуры типа MobileNetV3 обеспечивают возможность быстро адаптироваться к свежим чертам вида обладателя прямо на устройстве без отправки данных в облако.
Улучшаются методы антиспуфинга — теперь смартфоны способны отличать настоящие анимированные облики от неподвижных фотографий/маскировок по незаметным движениям кожи.
Взаимодействие со интеллектуальными приборами — интеллектуальные часы могут автоматически закрыть доступ к смартфон, если пользователь отошёл далеко.
Появляются гибридные механизмы — например комбинирующие речевую идентификацию + лицо + отпечаток пальца.

Итак, которые направления особенно популярны в данный момент:

1) Сокращение элементов

Производители пытаются минимизировать размер прорези („чёлки“) под сенсоры на экране за счёт встраивания маленьких ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для повышения личной безопасности всё более обработки данных происходит внутри устройства без отправки данных во сторонний облачный сервис.

3) Стандартизация регламентов

Google активно продвигает норму BiometricPrompt API, для того чтобы такие платформы, например как admiral x, и любые Android-аппы могли взаимодействовать с различными типами биометрии единообразно.

Что решить на сегодня?

Когда тебе важна предельная защита информации, остановите выбор на флагманские модели с вмонтированным ИК-проектором или же ToF-сенсором глубины.

iPhone всех актуальных версий
Huawei Partner/P линейки
Xiaomi Expert
Vivo X серии
Oppo Find X линейки.

Если бюджет скромен – лучше выбирать классическим средствам безопасности (PIN-код/сканер отпечатка), а возможность „разблокировка по лицу“, такую как в admiral x, применять только как дополнительную возможность удобства.

Каким способом улучшить комфорт работы функции?

Есть некоторые хитростей для людей, кто уже пользуется разблокировку через лицо:

Регулярно обновляйте свою изображение-шаблон, если значительно изменяется внешность.
Не упускайте из виду протирать линзу фронтальной камеры – разводы могут снизить точность!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует фотоаппарат когда вы поднимаете его.
При записи постарайтесь держать голову прямо напротив видеоустройства не допуская сильного наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвернулись от дисплея.

Будущее прогресса техники

В предстоящие годы можно ожидать развития полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим параметрам одновременно: облик + речь + походка + движения рук!

Также предполагается возникновение свежих методов защиты конфиденциальности – к примеру, изменяющееся модификация диджитал паттерна после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из очень интересных инноваций нашего времени! Она обеспечивает общение со смартфоном удобнее чем до этого, и такие программы, как admiral-x, могут значительно оптимизировать ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как работает эта технология внутри, – сможете осознаннее подбирать свой очередной гаджет!