Каким образом действует определение лицевых образов в мобильных устройствах

Зачем мы выбираем разлочивание по лицу

В недавние годы определение физиономий стало одной из самых популярных функций для разблокировки умных телефонов. Всего несколько лет тому назад основная часть пользователей обходились PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением подобных технологий, как вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь делает эту особенность такой востребованной? Для начала, это практично: не нужно запоминать трудные пароли или искать верный палец в темноте. Также, это быстро: современные программы идентифицируют лицо буквально за доли секунды. В-третью очередь, это чувство будущего — будто в фильмах про вулкан казино разведчиков.

Однако за этой на первый взгляд простотой скрывается весь вселенная сложных технологий и инженерных концепций. Давайте разобраться, как именно работает распознавание лиц в современных смартфонах, какие бывают способы, насколько они защищены и что нас ожидает в будущем.

Сжатая повествование развития инноваций

Распознавание лиц как методика имеется уже более 50 годов. Изначальные эксперименты автоматического изучения облика были предприняты еще в 1960-х годы в научных учреждениях США. Тогда ЭВМ умели лишь обозначать контуры головы и определять дистанции между глазами и ртом на монохромных фотографиях.

Первые бизнес установки появились в девяностых годах, но они были неидеальны: действовали неспешно и часто ошибались. Только с прогрессом искусственных сетей и таких платформ, как вулкан россии, высокопроизводительных мобильных чипов распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные решения.

Основные шаги действия системы определения

Процесс распознавания лица можно ориентировочно поделить на несколько основных этапов:

Идентификация лиц — устройство определяет присутствие людского лица в кадре.
Выделение характеристик — алгоритм изучает особенности лица: конфигурацию глаз, носа, уст, расположение бровей.
Построение модели — создаётся неповторимый виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со эталоном — сформированный шаблон сверяется с записанной при регистрации биометрической информацией владельца.
Принятие решения — если сходство достаточно высокое, смартфон деблокируется.

Каждый из данных шагов запрашивает специальных алгоритмов и усовершенствований для быстрой работы непосредственно на девайсе.

Железные компоненты: что прячется внутри

Стандартная передняя камера.

Простейший несложный метод идентификации лица задействует исключительно лицевую видеокамеру мобильного устройства. Такой подход осуществлён во различных бюджетных моделях Android-девайсов.

Плюсы:

Не нуждается в нуждается в внешних датчиков.
Оперативно функционирует при достаточном свете.

Минусы:

Легко одурачить фотографией или видео.
Неудачно работает при слабом освещении или нестандартных точках зрения.

ИК камера и пунктирный проекционный аппарат

Более совершенные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика составляет базу Face ID от Apple.

Каким образом это работает:

Точечный устройство проекции проецирует на физиономию использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
Инфракрасная устройство регистрирует искривление этой сетки по плоскости физиономии.
Формируется 3D карта глубины, которая почти невозможна для имитации типичной фото или маскировкой.

Достоинства

Надёжная работа даже в полной темноте.
Большая сопротивляемость к фальсификациям.
Точность распознавания выше 99%.

Добавочные датчики

В некоторых девайсах используются также дополнительные датчики: ToF (Time-of-Flight), которые определяют период распространения света до предмета и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для построения более точной 3D-модели лица.

Эти технологии используются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: синтетический разум в исполнении

Текущие устройства распознавания лиц немыслимы без использования artificial intelligence и machine learning. Именно благодаря таким разработкам, как вулкан россии, аппарат способно идентифицировать юзера даже при трансформациях внешнего вида: новая укладка, щетина, оптика или макияж не становятся барьером для разблокировки.

Распознавание лица

В стартовом стадии система необходимо мгновенно обнаружить лицо среди целого изображения с камеры. Для этого используются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые натренированы идентифицировать лица людей среди множества других объектов.

Пример: процесс MTCNN в состоянии находить физиономию даже в случае частичном закрытии (например, платком или рукой).

Определение ключевых моментов

После обнаружения лица система, такая как вулкан россии, устанавливает расположение ключевых точек: кончики глаз, кончик носа, края губ и так далее. Часто используется от 68 до 128 ключевых меток на лице.

Это необходимо для стабилизации изображения: если человек держит телефон под наклоненным, или наклонил головку, программа “выпрямляет” картинку до обычного угла для дальнейшего анализа.

Построение биометрии модели

Далее нейронная сеть строит компактное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Этот формат крайне затруднительно сфальсифицировать: он не удерживает само картинку пользователя, а лишь уникальные характеристики его облика, что делает его идеальным для таких платформ, как vulkan russia.

Сравнительный анализ и принятие выбора

В случае, когда юзер намеревается разлочить мобильник взглядом, система осуществляет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный границу (обычно выше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ блокируется.

Привыкание к изменениям внешности

Увлекательная особенность нынешних системы — возможность самостоятельного обучения. Если ты постоянно доступаете к телефон с свежей укладкой или очками, система постепенно обновляет эталонный образец вашего внешности для улучшения точности функционирования без снижения уровня безопасности.

Безопасность биометрии данных.

Большинство юзеры беспокоятся сохранять свои био-идентификационные данные на мобильном устройстве из-за угрозы утечки информации или хакерской атаки. Некоторые фирмы, такие как vulkan russia, предлагают варианты для увеличения безопасности сведений юзеров.

Локальное сбережение: Основная часть аппаратов хранит био-идентификационные шаблоны лишь внутрь безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из гаджет и закрыты включая создателю.
Шифрование: Все информация хранятся только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Приложения внешних девелоперов не имеют прямого возможности доступа к биометрическим данным; они могут лишь запрашивать факт верификации идентичности через системный API.

Необходимо упомянуть существенную особенность: если кто-то получит доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании реализуют меры безопасности от неосознанного разблокирования — в частности, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются категории идентификации лиц?

В настоящее время можно выделить выделить 3 главных способа к выполнению этой функции:

Программируемое 2D идентификация

Используется только фронтальная видеокамера без экстра датчиков дистанции. Этот подход используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота воплощения; умеренная затраты; оперативная работа при хорошем освещении.
Минусы: несложно одурачить фотографией; ненадежная работа ночью; слабая безопасность.

Оборудование для 3D оцифровка

Задействует ИК видеокамеру + проектор точек + сенсоры глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Плюсы: большая надежность; не получится подделать фото/видео; постоянная функционирование в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с дополнением ИИ

Применяют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, как вулкан россии и Google Pixel Face Unlock последних поколений, сочетают фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для защиты от подделок жестами/масками/видеоэкранами посторонних устройств.

Иллюстрации эксплуатации различных методов

iPhone линейки X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID в ряду Android.
Samsung Galaxy S10 версия/S20 поддерживают как софтверное 2D определение по снимку селфи-камерой, так и сенсор радужки глаза.
Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-датчик

Трудности защиты и ложные тревоги

Несмотря на поразительный успехи техники за прошедшие годы, идеальных системы пока не имеется:

Шанс мошенничества: Доступные телефоны просто “разблокируются” четкой снимком хозяина или же видео с экрана другого устройства.
Идентичные двойняшки: Даже самые идеальные системы могут спутать между монозиготными близнецами либо родственниками с очень схожей внешностью.
Трансформации внешности: Стремительное утрата веса/увеличение массы тела, пластические операции либо травмы иногда необходимы для перерегистрации биометрических данных.
Условия записи: Яркая подсветка солнцем или интенсивная тень могут уменьшить аккуратность идентификации признаков.

Здесь несколько рекомендаций для защищённому использованию:

Для критически важных операций всегда применяйте дополнительную аутентификацию;
Не запускайте опцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
Постоянно апгрейдите программное обеспечение смартфона для защиты от новых видов атак;
Включайте опцию “Требовать открытых глаз” в тех местах, где она есть.

В каких областях ещё используется технология помимо мобильных телефонов?

Несмотря на то, что тема этой работы касается именно портативным гаджетам, необходимо сказать о прочих направлениях внедрения технологии:

Управление доступа в офисах и многоквартирных зданиях;
Платёжные аппараты банков (“Face Pay”);
Цифровые удостоверения личности последнего образца;
Комплексы видеонаблюдения городских подразделений;
Автоматизация учёта явки учебных заведений/вузов;
Авторизация участников компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система платежа проезда по лицу (“Face Pay”) — хватит пройти через барьер без пластика или мобильника! Схожие программы осуществляются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как изменяется технология в наше время?

Всякий годик возникают современные мысли для усовершенствования уровня деятельности систем лицевого распознавания:

Увеличивается разрешение сенсоров — чем больше элементов фиксируется камерой/датчиками глубины, тем меньше риск ошибки;
Улучшаются нейросети — новейшие структуры типа MobileNetV3 позволяют скоростно осваивать дополнительным характеристикам внешности пользователя прямо на устройстве без отправки данных в облако.
Совершенствуются технологии антиспуфинга — теперь мобильные устройства способны распознавать настоящие движущиеся облики от неподвижных фото/маскировок по мельчайшим движениям кожи.
Синхронизация со смарт-гаджетами — интеллектуальные часы могут самостоятельно блокировать смартфон, если обладатель удалился на значительное расстояние.
Проявляются смешанные устройства — к примеру объединяющие аудио аутентификацию + физиономию + дактилоскопический след.

Здесь, какие направления в особенности популярны сейчас:

1) Миниатюризация элементов

Изготовители намереваются сократить размер отверстия (“чёлки”) под датчики на дисплее за счёт интеграции маленьких ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на аппарате

Для улучшения личной безопасности всё больше обработки данных осуществляется на месте без передачи данных во внешний облачный услугу.

3) Унификация норм

Google активно продвигает норму BiometricPrompt API, для того чтобы такие системы, как вулкан россия, и все Android-аппы были совместимы с любыми видами биометрии единообразно.

Какое выбрать на сегодня?

Если тебе нужна максимальная сохранность данных, остановите выбор на флагманские аппараты со встроенным ИК-проектором или ToF-датчиком глубины.

iPhone всех существующих новейших версий
Huawei Companion/P Series ряда
Mi Expert
Vivo X линейки
Oppo Find X серий.

Если средства скромен – лучше отдавать предпочтение традиционным средствам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как дополнительную возможность комфорта.

Каким способом повысить комфорт использования функции?

Есть пара хитростей для людей, кто уже использует разблокировку по лицу:

Часто обновляйте свою изображение-шаблон, если значительно изменяется облик.
Не пренебрегайте очищать объектив передней камеры – разводы могут уменьшить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает фотоаппарат если вы берёте его в руки.
В процессе регистрации старайтесь удерживать голову прямо впереди камеры не допуская резкого наклона головы.
Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от экрана.

Будущее развития технологии

В скоро наступающие годы можно предвкушать возникновения полностью бесконтактных способов распознавания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: лицо + речь + манера ходьбы + жесты рук!

Также предполагается развитие свежих способов защиты конфиденциальности – скажем, динамическое изменение диджитал образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее интересных инноваций нашего периода! Она предоставляет взаимодействие со телефоном проще чем когда-либо прежде, и такие программы, как vulkan russia, могут в разы повысить ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как функционирует эта система в деталях, – будете в состоянии более осмысленно определять свой будущий гаджет!