Каким образом функционирует распознавание лицевых образов в телефонах

Почему мы предпочитаем разблокировку по лицевому распознаванию

В прошлые времена идентификация физиономий стало одной из самых популярных возможностей для разблокировки умных телефонов. Еще несколько годков тому назад большинство юзеров довольствовались пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект обуславливает эту конкретную особенность такой востребованной? Во-первых, это удобно: не нужно запоминать сложные пароли или находить правильный палец в мраке. Кроме того, это мгновенно: современные алгоритмы узнают лицо буквально за мгновение. В-третьих, это впечатление будущего — как будто в фильмах про vulkan casino агентов.

Впрочем за этой видимой легкостью таится весь мир комплексных техник и инженерных решений. Попробуем исследовать, как конкретно функционирует фейсканирование в современных мобильных телефонах, какие существуют технологии, насколько они защищены и что нас ждёт впереди.

Сжатая повествование развития технологии

Идентификация лиц как техника присутствует уже более пятидесяти лет. Начальные пробы автоматизированного изучения лиц были сделаны еще в 1960-х годы в лабораториях США. Тогда ЭВМ могли лишь определять силуэты черепа и вычислять расстояния между очами и ртом на монохромных фотографиях.

Изначальные бизнес установки возникли в 90-х, но они были несовершенны: действовали неспешно и нередко ошибались. Только с прогрессом синтетических сетей и таких платформ, как вулкан россии, сильных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои разработки.

Ключевые этапы работы системы распознавания

Процесс идентификации лица можно условно поделить на несколько важных этапов:

Идентификация лица — камера распознает существование людского лица в снимке.
Определение особенностей — алгоритм изучает черты лица: конфигурацию глаз, носа, уст, расположение бровей.
Построение модели — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со эталоном — сформированный шаблон сопоставляется с зафиксированной при регистрации биометрической информацией владельца.
Принятие выбора — если соответствие достаточно значительное, смартфон открывается.

Любой из данных шагов запрашивает особых алгоритмов и оптимизаций для быстрой работы непосредственно на девайсе.

Железные элементы: что скрыто внутри

Стандартная селфи камера.

Самый несложный вариант определения лица задействует лишь лицевую камеру мобильного устройства. Такой подход осуществлён во многих недорогих версиях Android-девайсов.

Сильные стороны:

Не нуждается в дополнительных сенсоров.
Быстро действует при качественном освещении.

Отрицательные стороны:

Легко одурачить фотографией или видеозаписью.
Плохо действует при низком освещении или необычных ракурсах.

ИК камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс составляет базу Face ID от Apple.

Как это действует:

Точечный проекционный прибор проецирует на облик использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
ИК устройство записывает искривление данной сетки по плоскости физиономии.
Получается 3D глубинная карта глубины, которая почти невозможна для имитации стандартной фото или маскировкой.

Преимущества

Надёжная деятельность даже в полной темноте.
Высокая устойчивость к имитациям.
Точность распознавания выше 99%.

Добавочные датчики

В определённых аппаратах задействуются также дополнительные сенсоры: ToF (Time-of-Flight), которые определяют период прохождения луча до предмета и обратно; Цветные-датчики дальности; специальные световые лидары для построения более аккуратной 3D-модели физиономии.

Эти разработки применяются чаще всего во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный разум в исполнении

Нынешние системы опознания лиц невозможны при отсутствии эксплуатации ИИ и машинного обучения. Именно благодаря таким инновациям, как вулкан россии, устройство в состоянии распознавать владельца даже при трансформациях внешнего вида: новая причёска, щетина, очки или грим не становятся препятствием для открытия.

Детектирование лиц

При первом шаге программа должна быстро найти ликовое изображение в пределах полного кадра камеры. Для этой задачи используются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы распознавать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN в состоянии обнаруживать лицо даже с частичном закрытии (например, шарфом или рукой).

Определение ключевых точек

После распознавания лица механизм, такая как вулкан россии, определяет положение ключевых точек: кончики глаз, верхушка носа, границы губ и так далее. Обычно задействуется от 68 до 128 основных точек на лицевой области.

Это необходимо для стабилизации картинки: если пользователь держит телефон под углом, или наклонил головку, программа корректирует картинку до стандартного положения для последующего изучения.

Создание биометрического модели

Далее искусственная сеть строит уплотненное математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Данный формат весьма затруднительно имитировать: он не хранит само картинку пользователя, а лишь особенные характеристики его вида, что делает его оптимальным для таких платформ, как vulkan russia.

Сравнение и вынесение заключения

Когда человек хочет разблокировать телефон глазами, система воспроизводит все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый порог (обычно выше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ запрещается.

Приспособление к метаморфозам внешности

Увлекательная характеристика актуальных системы — возможность самостоятельного обучения. Если вы регулярно разблокируете смартфон с обновленной прической или оптикой, система постепенно модернизирует эталонный образец вашего облика для увеличения точности действия без ухудшения безопасности.

Безопасность биометрических информации.

Множество юзеры беспокоятся держать свои биометрические данные на мобильном устройстве из-за угрозы утечки информации или взлома гаджета. Некоторые организации, например vulkan russia, предлагают решения для увеличения защиты информации клиентов.

Локальное хранение: Преимущественно девайсов записывает биометричные шаблоны исключительно в пределах защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают аппарат и недоступны даже производителю.
Шифрование: Все данные хранятся только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Программы третьих разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Стоит упомянуть значимую деталь: если кто-либо сможет получить физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители осуществляют защиту от неосознанного разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды распознавания лиц на изображениях?

В настоящее время можно определить три основных подхода к реализации этой задачи:

Программное 2D определение

Применяется только лицевая камера без вспомогательных сенсоров дистанции. Этот метод используется чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота осуществления; минимальная затраты; оперативная функционирование при качественном свете.
Минусы: просто ввести в заблуждение фотографией; ненадежная деятельность ночью; недостаточная защищенность.

Техническое трёхмерное сканирование

Использует ИК камеру + проекционный модуль точек + датчики дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Плюсы: значительная надёжность; невозможно подделать изображение/видеозапись; устойчивая работа в любых условиях освещения.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные методы с ИИ-дополнением

Применяют комбинацию софтверных методов + аппаратную обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например вулкан россии и Google Pixel Face Unlock последних версий, сочетают фронтальную камеру c ИК датчиком мобильности Soli Radar для защиты от подделок жестами/масками/видеоэкранами посторонних устройств.

Иллюстрации применения различных способов

iPhone серии X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition первый раз представил подобие Face ID в ряду Android.
Samsung Galaxy S10/S20 обеспечивают как программное обеспечение плоское распознавание по фото фронталкой, так и сканер ириса глаза.
Huawei Mate20 Pro задействует набор из ИК-освещения + Dot Projector + ToF-датчик

Трудности безопасности и ошибочные срабатывания

Несмотря на замечательный развитие технологий за прошедшие годы, идеальных систем пока не имеется:

Возможность подвоха: Бюджетные телефоны без труда открываются высококачественной фотографией хозяина или видеозаписью с экрана другого устройства.
Идентичные близнецы: Даже самые совершенные системы могут ошибиться между монозиготными близнецами либо родственниками с очень похожей внешностью.
Изменения внешности: Внезапное утрата веса/набор веса, хирургические вмешательства или повреждения порой необходимы для повторной регистрации биометрии.
Условия съёмки: Интенсивная засветка солнцем или плотная затенение могут понизить аккуратность определения признаков.

Ниже пара подсказок по безопасному применению:

Для критически важных операций всегда применяйте двухэтапную аутентификацию;
Не активируйте возможность “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
Постоянно обновляйте ПО смартфона для обеспечения безопасности от современных угроз;
Включайте настройку “Требовать открытых глаз” в тех местах, где она есть.

Где также используется технология помимо мобильных телефонов?

Хотя основная мысль нашей публикации посвящена в частности смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

Управление прохода в рабочих помещениях и многоквартирных зданиях;
Платёжные терминалы финансовых учреждений (“Face Pay”);
Электронные удостоверения личности современного поколения;
Установки видеомониторинга городских сервисов;
Автоматизация учёта посещаемости школ/университетов;
Авторизация участников персональных компьютеров/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без карты или мобильника! Схожие программы реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как изменяется технический процесс сегодня?

Всякий год возникают свежие концепции для улучшения качества деятельности систем идентификации лиц:

Увеличивается чёткость датчиков — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс погрешности;
Развиваются искусственные интеллекты — новейшие структуры модели MobileNetV3 обеспечивают возможность оперативно адаптироваться к новым особенностям внешности обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
Совершенствуются способы антиспуфинга — теперь смартфоны способны различать настоящие анимированные лица от статичных фото/маскировок по незаметным микродвижениям.
Взаимодействие со интеллектуальными приборами — интеллектуальные часы могут автоматически закрыть доступ к мобильный телефон, если обладатель ушёл далеко.
Проявляются комбинированные устройства — к примеру комбинирующие аудио опознание + физиономию + дактилоскопический след.

Итак, которые тенденции очень актуальны на сегодняшний день:

1) Миниатюризация деталей

Производители стараются сократить габариты отверстия (“чёлки”) под датчики на экране за счёт внедрения компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для повышения конфиденциальности всё более расчётов выполняется внутри устройства без пересылки данных во дополнительный облачный сервис.

3) Унификация норм

Гугл активно продвигает стандарт BiometricPrompt API, для того чтобы такие платформы, например как вулкан россия, и каждые Android-приложения могли взаимодействовать с различными типами биометрии единообразно.

Какое подобрать на сегодня?

Если вам всем нужна предельная сохранность данных, выбирайте флагманские аппараты со встроенным ИК-проектором или ToF-датчиком глубины.

iPhone всех существующих последних моделей
Huawei Companion/Series P серии
Mix Pro
Vivo X модели
Oppo Найти Х серий.

Если средства невелик – лучше предпочесть классическим способам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как опциональную возможность комфорта.

Каким способом улучшить комфорт функционирования возможности?

Есть некоторые лайфхаков для тех, кто уже использует разблокировку через лицо:

Периодически обновляйте свою фото-шаблон, если кардинально трансформируется внешний вид.
Не забывайте чистить линзу фронтальной камеры – пятна могут уменьшить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам включает фотоаппарат если вы поднимаете его.
В процессе записи старайтесь держать лицо ровно перед камеры исключая сильного наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвели взгляд от дисплея.

Будущее прогресса инноваций

В скоро наступающие времена можно предвкушать развития полностью безконтактных способов распознавания персоны сразу по нескольким биометрическим параметрам одновременно: облик + голос + шаги + жесты рук!

Также предполагается развитие современных методов охраны личной информации – скажем, изменяющееся корректировка электронного паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из очень увлекательных инноваций нашего эпохи! Она предоставляет взаимодействие со смартфоном удобнее чем раньше, и такие аппы, как vulkan russia, могут значительно улучшить ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как устроена эта технология внутри, – сумеете более осмысленно подбирать свой будущий гаджет!