Каким способом работает идентификация лиц в телефонах

Почему мы выбираем разлочивание по фейсу

В недавние времена идентификация физиономий является одной из самых распространённых опций для открытия умных телефонов. Еще несколько лет тому назад основная масса использующих обходились пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением подобных технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь превращает данную возможность очень нужной? Для начала, это комфортно: не нужно помнить замысловатые пароли или находить верный палец в тьме. Также, это мгновенно: современные алгоритмы узнают лицо буквально за доли секунды. В-третьем пункте, это впечатление будущего — словно в фильмах про vulkan russia разведчиков.

Впрочем за этой кажущейся несложностью скрывается целый вселенная трудных техник и инженерных концепций. Попробуем разобраться, как конкретно работает фейсканирование в современных мобильных телефонах, какие бывают методы, насколько они защищены и что нас предстоит.

Краткая хроника эволюции инноваций

Идентификация лиц как методика присутствует уже более 50 годов. Изначальные пробы машинного анализа лиц были сделаны еще в 1960-х годы в лабораториях США. Тогда компьютеры могли лишь определять контуры головы и измерять промежутки между зрачками и губами на черно-белых снимках.

Изначальные бизнес системы появились в 1990-х годах, но они были далеки от совершенства: функционировали медленно и часто давали сбои. Только с эволюцией нейронных сетей и таких платформ, как вулкан россии, высокопроизводительных мобильных микросхем определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои разработки.

Основные стадии работы системы распознавания

Процесс идентификации лица можно примерно сегментировать на несколько ключевых этапов:

Обнаружение лиц — аппарат определяет присутствие гуманного лица в снимке.
Определение характеристик — механизм изучает контуры облика: форму глаз, обонятельного органа, губ, положение надбровных дуг.
Построение структуры — создаётся неповторимый цифровой отпечаток (faceprint) на основе выделенных признаков.
Сравнение со эталоном — сформированный образец сравнивается со записанной при учёте биометрической данными владельца.
Принятие решения — если совпадение достаточно существенное, смартфон разблокируется.

Каждый из данных этапов требует особых алгоритмов и оптимизаций для быстрой работы непосредственно на девайсе.

Аппаратные составляющие: что скрыто внутри них

Типичная селфи камера.

Наиболее несложный вариант определения облика использует только лицевую камеру смартфона мобильного устройства. Подобный подход реализован во многочисленных недорогих вариантах Android-девайсов.

Преимущества:

Не нуждается в потребляет дополнительных сенсоров.
Шустро работает при достаточном освещённости.

Минусы:

Просто одурачить фотографией или видео.
Плохо действует при плохом свете или непривычных точках зрения.

Инфракрасная камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Каким образом это работает:

Точечный проектор показывает на облик юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 пятен).
Инфракрасная камера регистрирует изменение формы этой решетки по поверхности физиономии.
Формируется трехмерная глубинная карта глубины, что почти что неподвластна для фальсификации типичной снимком или маской.

Плюсы

Надёжная функционирование даже в полной неосвещённости.
Высокая защита к фальсификациям.
Точность определения выше 99%.

Добавочные датчики

В некоторых девайсах используются также экстра датчики: ToF (Time-of-Flight), которые фиксируют период распространения света до предмета и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для формирования более точной 3D-модели лица.

Эти инновации встречаются чаще всего во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный интеллект на исполнении

Нынешние механизмы опознания лиц невозможны без применения ИИ и машинного обучения. Именно вследствие таким технологиям, как вулкан россии, гаджет может узнавать юзера даже при трансформациях внешнего вида: новая укладка, щетина, линзы или грим не становятся препятствием для разблокировки.

Обнаружение лиц

На начальном этапе алгоритм обязана оперативно распознать лицо внутри целого кадра камеры. Для этой задачи используются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN в состоянии распознавать физиономию даже с частичном перекрытии (например, шарфом или рукой).

Идентификация важных аспектов

После обнаружения лица система, такая как вулкан россии, определяет расположение главных точек: кончики глаз, конец носа, границы губ и так далее. Как правило применяется от 68 до 128 главных меток на лицевой области.

Это нужно для выравнивания визуала: если человек держит смартфон под наклоненным, или повернул головку, программа корректирует картинку до стандартного положения для дальнейшего анализа.

Построение биометрии модели

Далее нейронная сеть строит сжатое цифровое представление («эмбеддинг») лица пользователя — своеобразный цифровой «отпечаток» внешности длиной от 128 до 512 вещественных чисел.

Этот формат очень затруднительно имитировать: он не хранит само изображение пользователя, а лишь уникальные особенности его вида, что делает его оптимальным для таких платформ, как vulkan russia.

Сравнение и принятие решения

Если юзер желает открыть смартфон взором, система осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный порог (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ запрещается.

Привыкание к метаморфозам внешнего вида

Увлекательная особенность современных системы — возможность самообучения. Если ты часто доступаете к телефон с новой прической или очками, система постепенно обновляет основной шаблон вашего облика для увеличения точности действия без ухудшения безопасности.

Безопасность биометрических данных.

Многие клиенты боятся сохранять свои биометрические данные на телефоне из-за вероятности утечки информации или хакерской атаки. Некоторые фирмы, вроде vulkan russia, предоставляют варианты для увеличения защиты информации клиентов.

Локальное сбережение: Большинство устройств записывает био-идентификационные модели только внутри защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают гаджет и недоступны включая создателю.
Шифрование: Все информация сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Приложения третьих девелоперов не обладают непосредственного доступа к биометрическим; они могут лишь требовать факт верификации личности через системный API.

Необходимо отметить значимую деталь: в случае, если кто-либо достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители внедряют защиту от «слепого» разблокирования — например, просят разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются виды определения лиц?

На сегодняшний день можно различить 3 главных метода к реализации этой функции:

Программируемое 2D определение

Используется только лицевая камера без экстра датчиков дистанции. Этот подход наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность осуществления; низкая стоимость; оперативная функционирование при хорошем освещении.
Минусы: просто одурачить фотографией; неустойчивая деятельность ночью; слабая безопасность.

Оборудование для 3D сканирование

Применяет инфракрасную видеокамеру + проекционный модуль пикселей + датчики дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: значительная достоверность; нельзя исказить фото/видео; стабильная функционирование в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана («чёлка»)

Комбинированные способы с интеграцией ИИ

Задействуют комбинацию программных методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам («anti-spoofing»). Например, подобные товары, например вулкан россии и Google Pixel Face Unlock новейших поколений, комбинируют фронтальную камеру c ИК датчиком движения Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Образцы использования разных методов

iPhone линейки X/11/12/13/14 задействуют только техническое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition первый раз предложил эквивалент Face ID среди Android.
Samsung Galaxy S10 версия/S20 поддерживают как программное плоское распознавание по изображению фронтальной камерой, так и сканер глазного ириса.
Huawei Mate20 Pro задействует набор из ИК-освещения + Dot Projector + ToF-датчик

Проблемы безопасности и ложные тревоги

Несмотря на поразительный успехи технологий за прошедшие лет, идеальных механизмов пока не наблюдается:

Шанс обмана: Бюджетные телефоны без труда «разблокируются» высококачественной снимком владельца или же видеозаписью с экрана другого устройства.
Идентичные близняшки: Даже самые совершенные механизмы могут спутать между монозиготными близнецами либо семьями с очень аналогичной внешностью.
Метаморфозы внешности: Внезапное утрата веса/увеличение массы тела, пластические операции или повреждения в некоторых случаях требуют обновления данных биометрии.
Условия фотографирования: Интенсивная освещённость солнцем либо плотная затенение могут уменьшить точность распознавания признаков.

Здесь несколько рекомендаций по надёжному применению:

Для важных операций всегда внедряйте двухфакторную аутентификацию;
Не включайте возможность «Разблокировка по лицу» на бюджетных моделях без ИК-сенсоров;
Постоянно обновляйте прошивку прошивку мобильного устройства для защиты от актуальных атак;
Включайте настройку «Требовать открытых глаз» в тех местах, где она есть.

В каких областях дополнительно используется технология кроме смартфонов?

Хотя основная мысль данной статьи касается в частности смартфонам и планшетам, необходимо сказать о прочих направлениях внедрения технологии:

Контроль доступа в офисах и многоквартирных зданиях;
Платёжные терминалы финансовых учреждений («Face Pay»);
Электронные паспорта нового поколения;
Установки видеоконтроля городских служб;
Автоматизирование регистрации посещаемости образовательных учреждений/институтов;
Аутентификация участников ПК/ноутбуков.

Например: В московском метро уже тестируется система оплаты проезда по фейсу («Face Pay») — достаточно пройти через турникет без пластика или телефона! Аналогичные проекты реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом меняется технология сегодня?

Всякий годочек проявляются современные идеи для повышения качества работы систем лицевого распознавания:

Увеличивается чёткость датчиков — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше риск неточности;
Улучшаются искусственные интеллекты — новейшие архитектуры модели MobileNetV3 обеспечивают возможность скоростно осваивать дополнительным особенностям внешности владельца непосредственно на девайсе без пересылки информации в облачное хранилище.
Совершенствуются способы антиспуфинга — теперь телефоны умеют отличать подлинные движущиеся лица от неподвижных фотографий/маскировок по микроскопическим движениям кожи.
Взаимодействие со смарт-гаджетами — интеллектуальные часы могут авто заблокировать мобильный телефон, если владелец удалился на значительное расстояние.
Появляются комбинированные устройства — к примеру совмещающие речевую аутентификацию + физиономию + отпечаток пальца.

Здесь, те тенденции очень востребованы на сегодняшний день:

1) Сокращение элементов

Компании стараются уменьшить размер выреза («чёлки») для датчики на дисплее за счёт интеграции компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для увеличения личной безопасности всё больше вычислений происходит на месте без отправки информации во дополнительный облачный сервис.

3) Стандартизация норм

Google энергично продвигает эталон BiometricPrompt API, чтобы такие платформы, как вулкан россия, и все Android-приложения могли взаимодействовать с всеми формами биометрии унифицированно.

Что решить сегодня?

В случае если тебе необходима максимальная сохранность информации, остановите выбор на передовые устройства со встроенным ИК-излучателем или ToF-сенсором глубины.

iPhone всех существующих новейших моделей
Huawei Companion/P серии
Mi Expert
Vivo X модели
Oppo Обнаружить X линейки.

Если средства скромен – лучше отдавать предпочтение традиционным средствам защиты (PIN-код/сканер отпечатка), а функцию «разблокировка по лицу», такую как в вулкан россия, задействовать только как опциональную возможность комфорта.

Каким образом повысить практичность функционирования функции?

Есть пара лайфхаков для людей, кто уже использует функцию распознавания лица:

Часто обновляйте свою фотографию-шаблон, если сильно трансформируется внешний вид.
Не пренебрегайте протирать линзу передней камеры – загрязнения могут понизить точность!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам запускает фотоаппарат как только вы поднимаете его.
При записи старайтесь удерживать лицо прямо впереди объектива не допуская резкого наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвернулись от дисплея.

Возможности прогресса инноваций

В предстоящие годы можно ожидать появления полностью безконтактных способов распознавания персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + шаги + жесты рук!

Также предполагается возникновение современных способов охраны конфиденциальности – к примеру, динамическое изменение электронного образца после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее увлекательных технологий нашего эпохи! Она предоставляет интеракцию со телефоном удобнее чем раньше, и такие программы, как vulkan russia, могут значительно повысить ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как устроена эта методика внутри, – будете в состоянии осознаннее определять свой очередной девайс!