Как действует идентификация лиц в мобильных устройствах

Зачем мы останавливаемся на разблокировку по лицевому распознаванию

В недавние времена распознавание физиономий стало одной из самых распространённых возможностей для разблокировки умных телефонов. Лишь некоторые годков тому назад большинство юзеров удовлетворялись PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Что обуславливает эту конкретную особенность такой востребованной? Во-первых, это удобно: не нужно удерживать в памяти замысловатые пароли или находить нужный палец в темноте. Кроме того, это оперативно: современные системы узнают лицо практически за мгновения ока. В-третьем пункте, это чувство будущего — как будто в фильмах про vulkan russia агентов.

Впрочем за такой видимой простотой таится целый мир трудных методов и инженерных разработок. Попробуем исследовать, как точно действует фейсканирование в современных мобильных телефонах, какие применяются способы, насколько они надёжны и что нас предстоит.

Короткая хроника эволюции технологии

Идентификация лиц как технология присутствует уже более 50 лет. Изначальные пробы автоматизированного исследования облика были предприняты еще в 1960-х годы в лабораториях США. Тогда ЭВМ способны были лишь определять контуры лица и измерять дистанции между зрачками и ртом на монохромных снимках.

Первые коммерческие установки возникли в 90-х, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с эволюцией синтетических сетей и таких площадок, как вулкан россии, сильных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные разработки.

Ключевые этапы работы устройства определения

Процесс распознавания лица можно примерно разделить на несколько основных этапов:

1. Распознавание лица — устройство определяет наличие людского образа в кадре.
2. Определение характеристик — алгоритм изучает черты облика: форму глаз, носа, уст, позицию надбровных дуг.
3. Построение модели — создаётся особенный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с эталоном — сформированный модель сравнивается со записанной при внесении биометрической сведениями владельца.
5. Принятие выбора — если соответствие достаточно значительное, смартфон разблокируется.

Всякий из указанных этапов нуждается в специальных процедур и оптимизаций для скорой работы непосредственно на девайсе.

Технические компоненты: что находится в их недрах

Обычная селфи камера.

Простейший легкий метод определения лица задействует только лицевую видеокамеру смартфона. Подобный способ осуществлён во многих доступных моделях Android-устройств.

Достоинства:

• Необходимо нуждается в дополнительных датчиков.
• Быстро работает при качественном освещении.

Минусы:

• Несложно ввести в заблуждение снимком или видеозаписью.
• Неправильно работает при плохом освещении или необычных ракурсах.

ИК камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика лежит в основе Face ID от Apple.

Каким способом это функционирует:

• Точечный устройство проекции показывает на физиономию использующего невидимую сетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 пятен).
• Инфракрасная камера регистрирует изменение формы этой сетки по поверхности лица.
• Создаётся трёхмерная карта глубинности, что почти что неосуществима для имитации стандартной фотографией или маскировкой.

Достоинства

• Надёжная работа даже в полной неосвещённости.
• Высокая защита к фальсификациям.
• Точность идентификации выше 99%.

Добавочные датчики

В некоторых аппаратах используются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют период распространения света до объекта и обратно; Трехцветные-датчики дальности; специальные оптические лидары для создания более аккуратной 3D-модели физиономии.

Эти инновации применяются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: синтетический ум на работе

Нынешние устройства распознавания физиономий неосуществимы при отсутствии применения ИИ и machine learning. Именно из-за таким разработкам, как вулкан россии, аппарат может узнавать владельца даже при изменениях облика: новая стрижка, растительность на лице, очки или грим не становятся барьером для разблокировки.

Детектирование физиономии

При начальном этапе система обязана мгновенно распознать лицо внутри целого снимка с камеры. Для данной цели задействуются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” идентифицировать лиц человека среди множества других объектов.

Пример: процесс MTCNN может обнаруживать облик даже при частичном закрытии (например, шарфом или ладонью).

Определение важных аспектов

После распознавания лица механизм, такая как вулкан россии, вычисляет положение ключевых точек: кончики глаз, конец носа, края губ и так далее. Как правило используется от 68 до 128 ключевых точек на лицевой поверхности.

Данное нужно для нормализации изображения: если юзер держит телефон под углом, или склонил голову, программа исправляет изображение до нормального состояния для дальнейшего анализа.

Построение биометрического идентификатора модели

Далее искусственная сеть строит уплотненное математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.

Данный шаблон очень сложно подделать: он не сохраняет непосредственно картинку юзера, а лишь особенные характеристики его внешности, что делает его совершенным для таких площадок, как vulkan russia.

Сравнительный анализ и вынесение решения

Когда пользователь хочет разблокировать смартфон взором, механизм осуществляет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ блокируется.

Адаптация к изменениям внешности

Интересная черта современных систем — способность самостоятельного обучения. Если ты часто открываете смартфон с обновленной стрижкой или оптикой, система постепенно освежает эталонный шаблон вашего лица для увеличения точности действия без ухудшения безопасности.

Защита биометрических информации.

Многие юзеры опасаются держать свои био-идентификационные данные на телефоне из-за вероятности утечки информации или взлома гаджета. Некоторые организации, такие как vulkan russia, предоставляют методы для повышения безопасности данных клиентов.

• Локальное сохранение: Большинство аппаратов записывает биометричные образцы лишь внутрь защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из гаджет и недоступны даже производителю.

• Шифрование: Все данные хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь запрашивать факт верификации идентичности через системный API.

Следует упомянуть значимую подробность: в случае, если кто-либо получит физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители внедряют систему защиты от неосознанного разблокирования — к примеру, требуют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются виды распознавания лиц на изображениях?

В настоящее время можно выделить выделить 3 главных метода к выполнению этой операции:

Программное плоское идентификация

Применяется только лицевая камера без дополнительных детекторов глубины. Этот метод наблюдается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность воплощения; минимальная затраты; быстрая функционирование при хорошем свете.
Минусы: несложно одурачить снимком; неустойчивая деятельность ночью; недостаточная безопасность.

Аппаратное объёмное сканирование

Применяет ИК камеру + проекционный модуль точек + датчики глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Преимущества: высокая надёжность; нельзя исказить фото/видео; устойчивая работа в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с интеграцией ИИ

Применяют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, как вулкан россии и Google Pixel Face Unlock современных версий, сочетают фронтальную камеру c ИК сенсором движения Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами посторонних устройств.

Образцы эксплуатации различных методов

• iPhone серии X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые представил аналог Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как софтверное двухмерное определение по изображению фронтальной камерой, так и сканер радужки глаза.
• Huawei Mate20 Pro задействует комплекс из ИК-освещения + Dot Projector + ToF-сенсор

Проблемы защиты и ошибочные срабатывания

Несмотря на поразительный успехи техники за последние лет, идеальных механизмов пока не имеется:

1. Вероятность обмана: Бюджетные смартфоны легко открываются качественной фотографией хозяина или роликом с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые совершенные механизмы могут спутать между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Изменения внешнего вида: Внезапное снижение веса/увеличение массы тела, пластические операции либо травмы иногда необходимы для повторной регистрации биометрии.
4. Условия фотографирования: Интенсивная засветка солнцем либо глубокая темнота могут понизить верность идентификации признаков.

Ниже пара рекомендаций для надёжному использованию:

• Для важных операций всегда внедряйте дополнительную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Регулярно апгрейдите программное обеспечение телефона для обеспечения безопасности от актуальных атак;
• Включайте настройку “Требовать распахнутых глаз” в тех местах, где она имеется.

В каких местах также находится применение технологии кроме смартфонов?

Пускай предмет этой статьи посвящена в частности портативным гаджетам, стоит упомянуть о других сферах применения технологии:

• Контроль входа в рабочих помещениях и многоквартирных зданиях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Цифровые идентификационные документы нового типа;
• Системы видеонаблюдения городских подразделений;
• Автоматизирование учёта явки учебных заведений/институтов;
• Авторизация юзеров ПК/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или мобильника! Схожие программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как изменяется технический процесс в наше время?

Каждый годик проявляются современные мысли для улучшения качества функционирования систем идентификации лиц:

1. Увеличивается детализация сенсоров — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше шанс неточности;
2. Совершенствуются искусственные интеллекты — новейшие архитектуры типа MobileNetV3 обеспечивают возможность скоростно осваивать дополнительным характеристикам внешности пользователя прямо на устройстве без отправки данных в облако.
3. Улучшаются технологии антиспуфинга — теперь телефоны могут различать подлинные движущиеся лица от фиксированных снимков/маскировок по незаметным микродвижениям.
4. Интеграция со умными устройствами — умные часы могут автоматически заблокировать мобильный телефон, если владелец ушёл далеко.
5. Проявляются комбинированные механизмы — в частности совмещающие аудио опознание + физиономию + пальцевой отпечаток.

Здесь, те тенденции очень актуальны сейчас:

1) Миниатюризация деталей

Компании стараются минимизировать габариты прорези (“чёлки”) для сенсоры на дисплее за счёт внедрения маленьких ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для увеличения личной безопасности всё более обработки данных выполняется внутри устройства без передачи данных во внешний облачный услугу.

3) Стандартизация норм

Гугл интенсивно продвигает стандарт BiometricPrompt API, для того чтобы аналогичные площадки, например как вулкан россия, и все Android-приложения были совместимы с различными типами биометрии унифицированно.

Что подобрать на сегодня?

Когда тебе важна максимальная безопасность информации, остановите выбор на топовые устройства с интегрированным ИК-проектором или ToF-сенсором глубины.

• iPhone каждого последних поколений
• Huawei Partner/Series P ряда
• Mix Pro
• Vivo X серии
• Оппо Найти X серии.

Если финансы ограничен – лучше отдавать предпочтение классическим средствам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, использовать только как дополнительную возможность удобства.

Как увеличить удобство использования функции?

Есть некоторые лайфхаков для тех, кто уже использует разблокировку по лицу:

1. Регулярно меняйте свою фото-шаблон, если сильно трансформируется облик.
2. Не упускайте из виду чистить объектив передней камеры – загрязнения могут снизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам включает камеру когда вы берёте его в руки.
4. При регистрационного процесса постарайтесь удерживать голову прямо впереди видеоустройства не допуская резкого наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отворачиваетесь от экрана.

Перспективы эволюции технологии

В скоро наступающие времена можно предполагать появления полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + речь + шаги + движения рук!

Также вероятно возникновение современных способов защиты личной информации – скажем, динамическое корректировка диджитал паттерна после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых захватывающих инноваций нашего времени! Она обеспечивает общение со телефоном комфортнее чем когда-либо прежде, и такие аппы, как vulkan russia, могут существенно улучшить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как функционирует эта методика изнутри, – сможете осознаннее определять свой будущий устройство!