Каким способом работает идентификация лиц в мобильных устройствах

Почему мы останавливаемся на разблокировку по лицу

В последние времена идентификация лиц является одной из самых популярных опций для деблокировки умных телефонов. Всего пару годов тому назад основная масса юзеров довольствовались пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект делает эту конкретную возможность настолько популярной? Прежде всего, это практично: не нужно запоминать трудные пароли или находить правильный палец в тьме. Кроме того, это быстро: современные системы распознают лицо практически за доли секунды. В-третьих, это впечатление футуристичности — будто в фильмах про вулкан россия шпионов.

Впрочем за этой видимой легкостью прячется полный вселенная комплексных техник и инженерных разработок. Попробуем исследовать, как конкретно действует идентификация по лицу в новейших смартфонах, какие применяются способы, насколько они надёжны и что нас ждёт впереди.

Сжатая повествование развития технологии

Идентификация лиц как технология имеется уже более пятидесяти годов. Начальные попытки автоматизированного изучения облика были предприняты еще в 1960-х годах в лабораториях США. Тогда вычислительные машины умели лишь определять очертания головы и измерять промежутки между глазами и ртом на монохромных фотографиях.

Первые бизнес установки стали доступны в 90-х, но они были несовершенны: действовали неспешно и часто давали сбои. Только с прогрессом нейронных сетей и таких систем, как вулкан россии, мощных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным сканированием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять личные решения.

Основные этапы функционирования системы идентификации

Процесс определения лица можно ориентировочно поделить на несколько важных этапов:

Обнаружение лиц — камера выявляет присутствие гуманного лица в изображении.
Извлечение особенностей — механизм исследует черты физиономии: форму зрительных органов, носа, уст, позицию надбровных дуг.
Построение модели — создаётся уникальный цифровой отпечаток (faceprint) на основе определённых признаков.
Сравнение с образцом — созданный шаблон сравнивается со зафиксированной при регистрации биометрической сведениями владельца.
Принятие определения — если сходство достаточно высокое, смартфон разблокируется.

Всякий из этих шагов запрашивает индивидуальных процедур и улучшений для скорой работы непосредственно на девайсе.

Аппаратные компоненты: что прячется внутри

Стандартная селфи камера.

Самый легкий способ идентификации облика задействует только лицевую камеру мобильного устройства. Данный способ внедрён во многочисленных доступных моделях Android-устройств.

Преимущества:

Не потребляет внешних датчиков.
Шустро работает при достаточном свете.

Недостатки:

Несложно обмануть снимком или роликом.
Плохо работает при низком освещении или необычных ракурсах.

Инфракрасная камера и точечный проектор

Более совершенные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс составляет базу Face ID от Apple.

Каким образом это действует:

Точечный устройство проекции отображает на облик использующего невидимую решетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 пятен).
ИК камера фиксирует деформацию данной решетки по поверхности лица.
Создаётся 3D глубинная карта глубины, которая почти неосуществима для фальсификации обычной фотографией или маскировкой.

Преимущества

Надёжная деятельность даже в полной неосвещённости.
Сильная сопротивляемость к фальсификациям.
Точность идентификации свыше 99%.

Дополнительные сенсорные устройства

В некоторых устройствах задействуются также дополнительные датчики: ToF (Time-of-Flight), которые измеряют период распространения света до цели и обратно; RGB-датчики дальности; специальные световые лидары для формирования более аккуратной 3D-модели физиономии.

Эти разработки используются наиболее часто во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искусственный разум в работе

Текущие устройства распознавания лиц неосуществимы при отсутствии использования искусственного интеллекта и machine learning. Именно из-за таким инновациям, как вулкан россии, гаджет может распознавать юзера даже при трансформациях внешности: новая причёска, борода, очки или макияж не становятся препятствием для открытия.

Детектирование лица

В стартовом шаге система необходимо мгновенно распознать ликовое изображение в пределах полного кадра камеры. Для этого задействуются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые подготовлены идентифицировать лица людей среди множества других объектов.

Пример: алгоритм MTCNN может обнаруживать физиономию даже при неполном перекрытии (например, шарфом или ладонью).

Определение важных точек

После идентификации лица система, такая как вулкан россии, вычисляет положение главных точек: кончики глаз, кончик носа, края губ и так далее. Обычно задействуется от 68 до 128 главных меток на лицевой поверхности.

Это необходимо для стабилизации изображения: если пользователь держит телефон под наклоном, или наклонил головку, программа исправляет картинку до стандартного положения для последующего изучения.

Создание биометрического идентификатора модели

Далее нейронная сеть строит компактное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный формат крайне трудно подделать: он не удерживает непосредственно картинку пользователя, а лишь особенные особенности его облика, что делает его оптимальным для таких площадок, как vulkan russia.

Сравнение и вынесение выбора

Когда пользователь намеревается открыть смартфон взором, программа воспроизводит все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный уровень (обычно больше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ блокируется.

Адаптация к трансформациям облика

Увлекательная характеристика нынешних системы — возможность самообучения. Если вы регулярно разблокируете мобильное устройство с новой укладкой или очками, система постепенно освежает основной модель вашего внешности для повышения точности работы без ухудшения безопасности.

Охрана биометрических данных данных.

Большинство пользователи боятся держать свои биометрические данные на смартфоне из-за вероятности потери данных или взлома гаджета. Определенные организации, например vulkan russia, предлагают методы для повышения сохранности сведений пользователей.

Локальное сбережение: Преимущественно девайсов сохраняет биометрические модели только в пределах защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из аппарат и закрыты в том числе производителю.
Шифрование: Все данные сберегаются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Приложения третьих девелоперов не имеют прямого возможности доступа к биометрическим данным; они могут лишь требовать факт верификации идентичности через системный API.

Следует отметить существенную особенность: в случае, если кто-либо сможет получить доступ к вашему телефону физически (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители реализуют защиту от автоматического разблокирования — например, требуют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют категории идентификации лиц на изображениях?

Сегодня можно различить три главных метода к осуществлению этой операции:

Программируемое 2D идентификация

Эксплуатируется только фронтальная камера без экстра датчиков дистанции. Этот способ наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; низкая стоимость; быстрая функционирование при хорошем свете.
Минусы: несложно одурачить снимком; нестабильная работа ночью; недостаточная охрана.

Аппаратное объёмное сканирование

Использует инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Плюсы: значительная достоверность; нельзя обмануть фото/видео; постоянная функционирование при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с дополнением ИИ

Используют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные товары, как вулкан россии и Google Pixel Face Unlock современных поколений, сочетают фронтальную камеру c инфракрасным датчиком движения Soli Radar для защиты от подделок жестами/масками/видеоэкранами чужих устройств.

Иллюстрации использования различных методов

iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition первый раз предложил подобие Face ID в ряду Android.
Samsung Galaxy S10/S20 обеспечивают как программное плоское идентификацию по изображению фронтальной камерой, так и сенсор ириса глаза.
Huawei Mate20 Pro применяет систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности защиты и ошибочные сигналы

Несмотря на замечательный успехи технологий за прошедшие годы, идеальных системы пока не существует:

Возможность подвоха: Доступные смартфоны без труда доступны высококачественной снимком хозяина или же видео с экрана другого устройства.
Идентичные близняшки: Даже самые идеальные устройства могут перепутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
Трансформации внешнего вида: Резкое утрата веса/увеличение массы тела, косметические процедуры либо травмы иногда требуют обновления данных биометрических данных.
Условия записи: Яркая освещённость солнечным светом или глубокая темнота могут снизить точность идентификации признаков.

Ниже некоторые рекомендаций для защищённому эксплуатации:

Для критически важных операций всегда внедряйте двухэтапную аутентификацию;
Не активируйте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
Систематически обновляйте программное обеспечение мобильного устройства для защиты от актуальных атак;
Включайте опцию “Требовать распахнутых глаз” везде, где она есть.

В каких местах также применяется технологии помимо смартфонов?

Несмотря на то, что предмет данной работы сосредоточена на в частности портативным гаджетам, следует отметить прочих направлениях внедрения технологии:

Контроль входа в рабочих помещениях и резиденциях;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Цифровые удостоверения личности последнего типа;
Установки видеомониторинга городских подразделений;
Механизация регистрации посещаемости учебных заведений/институтов;
Вход участников компьютеров/ноутбуков.

Например: В городском метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без карты или мобильника! Схожие программы развиваются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом изменяется технология сегодня?

Всякий годик проявляются современные мысли для усовершенствования качества деятельности систем идентификации лиц:

Увеличивается детализация сенсоров — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность ошибки;
Совершенствуются искусственные интеллекты — новейшие архитектуры вида MobileNetV3 обеспечивают возможность оперативно обучаться дополнительным характеристикам вида пользователя прямо на устройстве без отправки данных в облако.
Совершенствуются технологии антиспуфинга — теперь телефоны умеют распознавать реальные анимированные лица от неподвижных снимков/масок по незаметным микродвижениям.
Синхронизация со интеллектуальными приборами — смарт-часы могут авто закрыть доступ к смартфон, если владелец ушёл далеко.
Проявляются смешанные механизмы — в частности совмещающие речевую аутентификацию + лицо + пальцевой отпечаток.

Здесь, какие тенденции в особенности актуальны в данный момент:

1) Миниатюризация деталей

Изготовители намереваются уменьшить габариты прорези (“чёлки”) для сенсоры на дисплее за счёт интеграции миниатюрных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения конфиденциальности всё более обработки данных осуществляется локально без передачи данных во внешний облачный сервис.

3) Унификация регламентов

Google энергично продвигает стандарт BiometricPrompt API, с целью чтобы такие платформы, например как вулкан россия, и все Android-программы могли взаимодействовать с различными типами биометрии единообразно.

Какое решить сегодня?

Когда вам важна предельная безопасность данных, выбирайте передовые аппараты с интегрированным ИК-проектором или же ToF-датчиком глубины.

iPhone всех существующих актуальных версий
Huawei Partner/P Series линейки
Mix Expert
Vivo X модели
Oppo Найти Икс серий.

Если бюджет скромен – лучше выбирать классическим средствам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как второстепенную возможность комфорта.

Каким образом повысить комфорт использования функции?

Есть несколько хитростей для пользователей, кто уже использует функцию распознавания лица:

Регулярно меняйте свою изображение-шаблон, если значительно меняется внешний вид.
Не упускайте из виду протирать объектив фронтальной камеры – разводы могут снизить точность!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает фотоаппарат как только вы берёте его в руки.
В процессе регистрационного процесса постарайтесь удерживать голову неподвижно напротив камеры без сильного наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отворачиваетесь от экрана.

Возможности развития техники

В предстоящие времена можно ожидать появления полностью безконтактных способов опознания человека сразу по нескольким биометрическим параметрам одновременно: облик + голос + манера ходьбы + жесты рук!

Также вероятно развитие свежих подходов защиты приватности – например, переменное корректировка цифрового паттерна после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых интересных техник нашего эпохи! Она делает взаимодействие со смартфоном удобнее чем до этого, и такие программы, как vulkan russia, могут существенно оптимизировать ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы знаете, как устроена эта система изнутри, – будете в состоянии более осмысленно определять свой следующий девайс!