Как работает распознавание лицевых образов в телефонах

Для чего мы останавливаемся на разблокировку по лицевому распознаванию

В недавние времена распознавание физиономий стало одной из наиболее востребованных опций для разблокировки мобильных телефонов. Лишь некоторые лет ранее большинство использующих обходились пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, как Вулкан Платинум, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь делает данную возможность такой востребованной? Прежде всего, это практично: не нужно помнить замысловатые пароли или отыскивать нужный палец в мраке. Кроме того, это мгновенно: современные алгоритмы узнают лицо буквально за мгновения ока. В-третьих, это впечатление футуризма — словно в кинолентах про Вулкан казино агентов.

Впрочем за этой на первый взгляд легкостью прячется весь мир комплексных методов и инженерных разработок. Позвольте нам понять, как конкретно работает идентификация по лицу в современных смартфонах, какие бывают методы, насколько они надёжны и что нас предстоит.

Краткая хроника развития техники

Распознавание лиц как методика имеется уже более пятидесяти годов. Первые эксперименты машинного анализа лиц были сделаны еще в 1960-х годы в лабораториях США. Тогда компьютеры умели лишь выделять очертания головы и определять дистанции между глазами и ртом на монохромных снимках.

Изначальные торговые установки возникли в 90-х, но они были далеки от совершенства: действовали неспешно и часто давали сбои. Только с эволюцией синтетических сетей и таких площадок, как Vulkan Platinum, сильных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои разработки.

Ключевые стадии действия механизма распознавания

Процесс определения лица можно условно разделить на несколько важных этапов:

Распознавание лиц — устройство распознает существование гуманного лица в изображении.
Извлечение характеристик — система изучает контуры облика: форму зрительных органов, обонятельного органа, уст, позицию бровей.
Построение модели — создаётся уникальный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с стандартом — полученный шаблон сравнивается со записанной при внесении биометрической данными владельца.
Принятие выбора — если соответствие достаточно высокое, смартфон деблокируется.

Каждый из данных стадий запрашивает индивидуальных процедур и улучшений для скорой работы непосредственно на девайсе.

Железные компоненты: что находится внутри них

Типичная фронтальная камера.

Самый простой легкий метод распознавания облика задействует только переднюю камеру смартфона мобильного устройства. Такой метод реализован во многочисленных доступных версиях Android-девайсов.

Сильные стороны:

Необходимо нуждается в дополнительных датчиков.
Шустро работает при достаточном освещении.

Отрицательные стороны:

Несложно обмануть изображением или видеозаписью.
Плохо работает при слабом освещении или необычных точках зрения.

ИК камера и точечный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Как это функционирует:

Точечный проекционный прибор проецирует на облик пользователя невидимую структуру из тысяч инфракрасных точек (например, Face ID задействует около 30 000 точек).
Инфракрасная камера регистрирует изменение формы данной решетки по плоскости лица.
Формируется 3D карта глубины, что практически невозможна для имитации типичной фото или маской.

Преимущества

Надёжная деятельность даже в полной неосвещённости.
Сильная защита к фальсификациям.
Точность идентификации более 99%.

Добавочные сенсоры

В отдельных аппаратах применяются также дополнительные датчики: ToF (Time-of-Flight), которые измеряют период прохождения луча до цели и обратно; RGB-датчики глубины; специальные оптические дальномеры для создания более детализированной 3D-модели лица.

Эти разработки встречаются чаще всего во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искусственный разум в действии

Современные механизмы идентификации лиц невозможны в отсутствие применения ИИ и machine learning. Именно вследствие таким технологиям, как Vulkan Platinum, устройство в состоянии узнавать юзера даже при метаморфозах облика: новая причёска, борода, оптика или косметика не становятся помехой для разблокировки.

Распознавание лица

При начальном стадии алгоритм должна оперативно обнаружить лицо среди целого снимка с камеры. Для данной цели применяются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы идентифицировать лица людей среди множества других объектов.

Пример: метод MTCNN способен находить физиономию даже с частичном закрытии (например, платком или рукой).

Выделение основных моментов

После обнаружения лица механизм, такая как Vulkan Platinum, вычисляет расположение ключевых точек: кончики глаз, верхушка носа, края губ и так далее. Как правило используется от 68 до 128 ключевых меток на лицевой области.

Данное требуется для нормализации визуала: если юзер держит смартфон под наклоном, или наклонил головку, программа «выпрямляет» картинку до обычного угла для дальнейшего анализа.

Создание биометрического идентификатора шаблона

Далее искусственная сеть строит уплотненное математическое представление («эмбеддинг») лица пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Данный образец крайне затруднительно имитировать: он не сохраняет само фото пользователя, а лишь уникальные особенности его вида, что делает его совершенным для таких платформ, как Вулкан Казино Платинум.

Сравнение и принятие заключения

В случае, когда пользователь хочет открыть телефон глазами, система осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый границу (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ не предоставляется.

Адаптация к метаморфозам внешности

Занимательная характеристика нынешних систем — способность самостоятельного обучения. Если ты часто доступаете к смартфон с новой прической или оптикой, система постепенно освежает основной шаблон вашего облика для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических данных.

Многие пользователи опасаются хранить свои биометрические данные на телефоне из-за угрозы потери данных или хакерской атаки. Определенные организации, такие как Вулкан Казино Платинум, предлагают методы для повышения сохранности сведений юзеров.

Локальное сбережение: Большинство устройств сохраняет биометричные модели исключительно внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают аппарат и не доступны даже создателю.
Шифрование: Все данные сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Программы внешних разработчиков не обладают прямого возможности доступа к биометрическим данным; они могут лишь запрашивать факт верификации идентичности через системный API.

Следует подчеркнуть значимую подробность: если кто-либо сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство изготовители реализуют систему защиты от неосознанного разблокирования — к примеру, просят разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы идентификации лиц?

На сегодняшний день можно определить различить 3 главных метода к выполнению этой операции:

Программное 2D определение

Применяется только лицевая камера без дополнительных датчиков дистанции. Этот метод наблюдается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность реализации; умеренная цена; быстрая функционирование при достаточном свете.
Минусы: несложно обмануть снимком; нестабильная работа ночью; недостаточная безопасность.

Оборудование для трёхмерное сканирование

Применяет инфракрасную видеокамеру + проекционный модуль точек + датчики глубины (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: большая надежность; нельзя обмануть фото/видео; постоянная работа при любом освещении.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана («чёлка»)

Смешанные способы с интеграцией ИИ

Применяют комбинацию софтверных методов + аппаратную обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам («anti-spoofing»). Например, подобные изделия, как Vulkan Platinum и Google Pixel Face Unlock последних версий, объединяют фронталку c ИК датчиком мобильности Soli Radar для защиты от подделок жестами/масками/видеоэкранами чужих устройств.

Образцы применения различных способов

iPhone серии X/11/12/13/14 применяют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID в ряду Android.
Samsung Galaxy S10 модель/S20 обеспечивают как софтверное двухмерное определение по фото фронталкой, так и сканер ириса глаза.
Huawei Mate20 Pro применяет комплекс из ИК-подсветки + Dot Projector + ToF-датчик

Вопросы защиты и ошибочные сигналы

Несмотря на замечательный успехи технологий за прошедшие лет, идеальных систем пока не наблюдается:

Возможность обмана: Доступные мобильники просто «разблокируются» четкой изображением хозяина или видеозаписью с экрана другого устройства.
Идентичные двойняшки: Даже самые безупречные устройства могут спутать между однояйцевыми близнецами либо семьями с очень похожей внешностью.
Метаморфозы облика: Стремительное снижение веса/увеличение массы тела, косметические процедуры или травмы порой необходимы для обновления данных биометрических данных.
Условия фотографирования: Интенсивная засветка солнцем или интенсивная темнота могут снизить верность определения признаков.

Вот пара подсказок по безопасному эксплуатации:

Для критически важных операций всегда применяйте двухэтапную аутентификацию;
Не включайте возможность «Разблокировка по лицу» на недорогих аппаратах без ИК-сенсоров;
Постоянно апгрейдите ПО мобильного устройства для предотвращения угроз от современных угроз;
Включайте функцию «Требовать распахнутых глаз» везде, где она есть.

Где дополнительно находится применение технология за исключением смартфонов?

Несмотря на то, что основная мысль данной публикации сосредоточена на в частности мобильным устройствам, следует отметить других сферах применения технологии:

Управление прохода в деловых центрах и резиденциях;
Платёжные терминалы банков («Face Pay»);
Цифровые удостоверения личности последнего образца;
Системы видеонаблюдения городских сервисов;
Автоматизация регистрации посещаемости школ/вузов;
Авторизация пользователей компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по фейсу («Face Pay») — хватит пройти через турникет без пластика или мобильника! Схожие программы развиваются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом изменяется технология в нынешнее время?

Любой годик появляются современные идеи для усовершенствования качества деятельности систем лицевого распознавания:

Увеличивается детализация сенсорных устройств — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше вероятность погрешности;
Совершенствуются искусственные интеллекты — современные структуры модели MobileNetV3 позволяют оперативно обучаться новым чертам внешности владельца непосредственно на девайсе без отправки данных в облако.
Совершенствуются методы антиспуфинга — теперь телефоны могут отличать настоящие движущиеся лица от неподвижных фото/масок по микроскопическим движениям кожи.
Взаимодействие со интеллектуальными приборами — смарт-часы могут автоматически блокировать мобильный телефон, если пользователь удалился на значительное расстояние.
Возникают смешанные системы — к примеру совмещающие аудио опознание + физиономию + отпечаток пальца.

Итак, которые тренды в особенности популярны на сегодняшний день:

1) Сокращение компонентов

Компании намереваются сократить величину прорези («чёлки») для сенсоры на дисплее за счёт интеграции маленьких ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения приватности всё более вычислений осуществляется локально без пересылки информации во дополнительный облачный сервис.

3) Стандартизация регламентов

Google интенсивно продвигает норму BiometricPrompt API, с целью чтобы подобные площадки, вроде Вулкан Платинум, и каждые Android-аппы были совместимы с различными типами биометрии стандартизированно.

Что выбрать сегодня?

Если вам важна предельная защита информации, выбирайте топовые модели со встроенным ИК-проектором или же ToF-датчиком глубины.

iPhone всех существующих актуальных версий
Huawei Companion/P Series ряда
Mix Expert
Vivo X серии
Оппо Обнаружить Икс серий.

Если средства скромен – лучше выбирать обычным способам безопасности (PIN-код/сканер отпечатка), а опцию «разблокировка по лицу», такую как в Вулкан Платинум, использовать только как второстепенную опцию удобства.

Каким образом улучшить удобство работы опции?

Есть несколько хитростей для тех, кто уже применяет разблокировку по лицу:

Регулярно обновляйте свою фото-шаблон, если сильно меняется внешность.
Не пренебрегайте чистить объектив передней камеры – пятна могут уменьшить точность!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам включает фотоаппарат когда вы берёте его в руки.
Во время регистрации постарайтесь держать лицевую часть неподвижно перед видеоустройства не допуская резкого наклона головы.
Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отворачиваетесь от экрана.

Будущее развития инноваций

В предстоящие времена можно ожидать появления полностью безконтактных способов распознавания человека сразу по нескольким биометрическим данным параметрам одновременно: облик + голос + манера ходьбы + жесты рук!

Также предполагается появление свежих способов охраны приватности – скажем, изменяющееся корректировка электронного паттерна после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень интересных инноваций нашего времени! Она обеспечивает общение со мобильным устройством комфортнее чем раньше, и такие приложения, как Вулкан Казино Платинум, могут в разы повысить ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как устроена эта технология в деталях, – сумеете осознаннее выбирать свой следующий девайс!