Каким образом работает определение лицевых образов в телефонах

Для чего мы выбираем разлочивание по лицевому распознаванию

В последние годы определение лиц стало одной из самых распространённых опций для разблокировки мобильных телефонов. Еще несколько годков ранее большинство пользователей обходились PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением подобных технологий, как cabura, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Что делает данную особенность очень нужной? Прежде всего, это комфортно: не нужно помнить сложные пароли или находить правильный палец в тьме. Кроме того, это быстро: современные системы узнают лицо буквально за мгновение. В-третьем пункте, это чувство футуризма — словно в фильмах про кабура шпионов.

Тем не менее за этой кажущейся несложностью прячется полный мир комплексных методов и инженерных разработок. Попробуем понять, как именно действует идентификация по лицу в новейших смартфонах, какие бывают способы, насколько они безопасны и что нас ожидает в будущем.

Короткая хроника прогресса технологии

Идентификация лиц как техника присутствует уже более 50 лет. Первые попытки автоматического анализа лица были сделаны еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ способны были лишь выделять контуры головы и вычислять расстояния между глазами и устами на ахроматических изображениях.

Изначальные бизнес установки возникли в 90-х, но они были неидеальны: действовали неспешно и часто давали сбои. Только с прогрессом синтетических сетей и таких площадок, как кабура, мощных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные решения.

Ключевые стадии действия устройства определения

Процесс определения лица можно условно разделить на несколько важных этапов:

Обнаружение лица — аппарат распознает присутствие человеческого лица в снимке.
Извлечение характеристик — система анализирует черты лица: конфигурацию глаз, обонятельного органа, уст, позицию бровей.
Построение шаблона — создаётся особенный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со эталоном — сформированный модель сравнивается с зафиксированной при регистрации биометрической данными владельца.
Принятие выбора — если совпадение достаточно высокое, смартфон открывается.

Каждый из указанных шагов запрашивает специальных методов и усовершенствований для быстрой работы прямо на устройстве.

Технические составляющие: что находится внутри них

Типичная передняя камера.

Простейший простой вариант идентификации лица задействует исключительно переднюю видеокамеру мобильного устройства. Данный способ внедрён во многочисленных бюджетных версиях Android-девайсов.

Положительные стороны:

Не нуждается в дополнительных датчиков.
Шустро функционирует при достаточном освещённости.

Недостатки:

Легко ввести в заблуждение снимком или видеозаписью.
Плохо действует при слабом освещении или непривычных точках зрения.

Инфракрасная фотокамера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как кабура, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология является основой Face ID от Apple.

Каким образом это работает:

Точечный проекционный прибор отображает на физиономию использующего невидимую структуру из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
ИК устройство записывает искривление этой решетки по плоскости физиономии.
Получается 3D карта глубинности, что практически невозможна для фальсификации обычной фотографией или маскировкой.

Преимущества

Надёжная функционирование даже в полной темноте.
Высокая защита к фальсификациям.
Точность распознавания выше 99%.

Добавочные сенсоры

В некоторых устройствах применяются также дополнительные датчики: ToF (Time-of-Flight), которые измеряют время прохождения света до объекта и обратно; RGB-датчики глубины; специальные световые лидары для создания более аккуратной 3D-модели физиономии.

Эти разработки применяются в основном во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: синтетический ум в работе

Современные механизмы опознания физиономий невозможны без использования ИИ и машинного обучения. Именно из-за таким инновациям, как кабура, устройство в состоянии узнавать юзера даже при метаморфозах облика: новая укладка, борода, оптика или косметика не становятся помехой для разблокировки.

Обнаружение лица

В начальном стадии система должна мгновенно найти образ лица внутри всего снимка с камеры. Для этой задачи применяются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены распознавать человеческие лица среди множества других объектов.

Пример: метод MTCNN способен распознавать лицо даже в случае частичном закрытии (например, платком или рукой).

Идентификация важных аспектов

После обнаружения лица механизм, такая как кабура, вычисляет положение ключевых точек: кончики глаз, конец носа, края губ и так далее. Часто используется от 68 до 128 ключевых меток на лицевой области.

Это требуется для стабилизации визуала: если пользователь держит смартфон под углом, или наклонил голову, программа «выпрямляет» изображение до нормального состояния для дальнейшего анализа.

Создание биометрического идентификатора модели

Далее нейросеть строит уплотненное числовое представление («эмбеддинг») внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Данный шаблон весьма сложно имитировать: он не хранит непосредственно фото пользователя, а лишь исключительные черты его облика, что делает его оптимальным для таких платформ, как кабура казино.

Сравнительный анализ и осуществление заключения

Если человек желает разблокировать мобильник взглядом, программа осуществляет все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно превышает 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ не предоставляется.

Привыкание к метаморфозам внешности

Интересная черта современных систем — способность самостоятельного обучения. Если вы часто доступаете к телефон с свежей прической или очками, алгоритм постепенно обновляет эталонный образец вашего внешности для повышения точности работы без ухудшения безопасности.

Защита биометрических данных данных.

Многие пользователи опасаются держать свои биометрические данные на мобильном устройстве из-за вероятности утечки информации или хакерской атаки. Определенные фирмы, вроде кабура казино, предоставляют варианты для повышения сохранности данных юзеров.

Локальное сохранение: Преимущественно аппаратов хранит биометрические образцы только в пределах безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не выходят из гаджет и закрыты даже создателю.
Шифрование: Все сведения сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Программы сторонних разработчиков не имеют прямого возможности доступа к биометрическим; они могут лишь запрашивать подтверждение верификации личности через системный API.

Следует отметить существенную особенность: в случае, если какой-то человек сможет получить доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство компании внедряют систему защиты от неосознанного разблокирования — к примеру, требуют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории распознавания лиц на изображениях?

Сегодня можно выделить 3 основных подхода к выполнению этой операции:

Программируемое плоское определение

Используется только передняя видеокамера без дополнительных датчиков дистанции. Подобный способ встречается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность воплощения; низкая стоимость; оперативная функционирование при хорошем свете.
Минусы: просто обмануть снимком; неустойчивая функционирование ночью; слабая защищенность.

Техническое 3D оцифровка

Использует ИК камеру + проектор точек + сенсоры глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: высокая достоверность; нельзя исказить изображение/видеозапись; постоянная работа при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана («чёлка»)

Комбинированные способы с интеграцией ИИ

Используют комбинацию софтверных методов + аппаратно-техническую обработку + постобработку нейросетями для усиления устойчивости к атакам («anti-spoofing»). Например, такие продукты, как кабура и Google Pixel Face Unlock последних поколений, сочетают фронтальную камеру c ИК сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Образцы использования различных методов

iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition впервые предложил подобие Face ID среди Android.
Samsung Galaxy S10 модель/S20 обеспечивают как софтверное двухмерное идентификацию по снимку селфи-камерой, так и сенсор радужки глаза.
Huawei Mate20 Pro использует комплекс из ИК-освещения + Dot Projector + ToF-сенсор

Трудности защиты и неверные тревоги

Несмотря на впечатляющий успехи инноваций за последние годы, совершенных механизмов пока не существует:

Вероятность подвоха: Недорогие телефоны легко открываются высококачественной фотографией пользователя или же роликом с экрана другого устройства.
Идентичные близняшки: Даже самые идеальные устройства могут спутать между однояйцевыми близнецами либо родичами с очень похожей внешностью.
Трансформации внешнего вида: Резкое утрата веса/увеличение массы тела, пластические операции или травмы в некоторых случаях требуют перерегистрации биометрических данных.
Условия фотографирования: Интенсивная засветка солнцем либо глубокая затенение могут уменьшить верность определения признаков.

Ниже пара советов для безопасному эксплуатации:

Для важных операций всегда применяйте двухфакторную аутентификацию;
Не активируйте возможность «Разблокировка по лицу» на дешёвых моделях без ИК-сенсоров;
Регулярно обновляйте прошивку прошивку мобильного устройства для предотвращения угроз от новых видов атак;
Включайте опцию «Требовать открытых глаз» в тех местах, где она есть.

Где также находится применение технологии помимо мобильных телефонов?

Несмотря на то, что тема этой статьи касается конкретно мобильным устройствам, следует отметить прочих направлениях внедрения технологии:

Контроль доступа в деловых центрах и резиденциях;
Платёжные аппараты финансовых учреждений («Face Pay»);
Цифровые паспорта последнего образца;
Установки видеонаблюдения городских сервисов;
Механизация отслеживания явки учебных заведений/университетов;
Авторизация участников компьютеров/ноутбуков.

Например: В городском метро уже тестируется система оплаты проезда по фейсу («Face Pay») — хватит пройти через турникет без пластика или телефона! Схожие инициативы развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом трансформируется техпроцесс сегодня?

Любой год появляются свежие концепции для повышения качества функционирования систем идентификации лиц:

Увеличивается разрешение датчиков — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность неточности;
Улучшаются нейронные сети — передовые конструкции типа MobileNetV3 дают возможность оперативно адаптироваться к дополнительным характеристикам вида пользователя напрямую на гаджете без отправки данных в облако.
Развиваются технологии антиспуфинга — теперь смартфоны умеют распознавать подлинные анимированные облики от статичных фото/масок по незаметным движениям кожи.
Синхронизация со умными устройствами — смарт-часы могут самостоятельно закрыть доступ к мобильный телефон, если владелец удалился на значительное расстояние.
Возникают гибридные механизмы — например объединяющие речевую идентификацию + физиономию + отпечаток пальца.

Здесь, которые направления особенно популярны на сегодняшний день:

1) Уменьшение элементов

Производители стараются уменьшить габариты отверстия («чёлки») под сенсоры на дисплее за счёт встраивания компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на устройстве

Для улучшения конфиденциальности всё более вычислений выполняется на месте без отправки информации во дополнительный облачный услугу.

3) Упорядочивание норм

Google энергично пропагандирует норму BiometricPrompt API, чтобы подобные системы, вроде cabura, и любые Android-программы могли взаимодействовать с всеми формами биометрии единообразно.

Что выбрать на сегодня?

Когда вам необходима предельная безопасность данных, выбирайте передовые аппараты с вмонтированным ИК-проектором или же ToF-сенсором глубины.

iPhone всех актуальных моделей
Huawei Companion/P ряда
Xiaomi Professional
Vivo X серии
Оппо Find Х линейки.

Если финансы невелик – лучше отдавать предпочтение обычным способам безопасности (PIN-код/сканер отпечатка), а опцию «разблокировка по лицу», такую как в cabura, использовать только как второстепенную опцию комфорта.

Каким образом увеличить удобство работы функции?

Есть пара советов для пользователей, кто уже использует разблокировку по лицу:

Регулярно меняйте свою фото-шаблон, если сильно меняется внешность.
Не упускайте из виду очищать линзу фронтальной камеры – загрязнения могут уменьшить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам включает камеру если вы берёте его в руки.
В процессе записи постарайтесь сохранять голову неподвижно впереди камеры не допуская значительного наклона головы.
Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от экрана.

Будущее развития инноваций

В ближайшие времена можно предвкушать развития полностью безконтактных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + походка + жесты рук!

Также возможно развитие современных методов охраны конфиденциальности – к примеру, динамическое корректировка цифрового образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из очень захватывающих технологий нашего эпохи! Она обеспечивает интеракцию со телефоном проще чем когда-либо прежде, и такие приложения, как кабура казино, могут значительно повысить ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как работает эта технология внутри, – сумеете более осмысленно подбирать свой очередной гаджет!