Каким способом действует идентификация лиц в смартфонах

Зачем мы останавливаемся на разблокирование по лицу

В недавние годы определение лиц является одной из самых популярных опций для деблокировки мобильных телефонов. Лишь пару лет назад большинство использующих обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, например вулкан россия, нам достаточно просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что обуславливает эту конкретную особенность настолько популярной? Для начала, это комфортно: не нужно помнить сложные пароли или отыскивать правильный палец в темноте. Кроме того, это быстро: современные программы узнают лицо фактически за мгновения ока. В-третью очередь, это впечатление футуристичности — как будто в кинофильмах про казино вулкан шпионов.

Впрочем за такой на первый взгляд простотой таится весь вселенная трудных технологий и инженерных решений. Давайте разобраться, как именно действует идентификация по лицу в новейших мобильных телефонах, какие бывают способы, насколько они безопасны и что нас ждёт впереди.

Краткая повествование прогресса инноваций

Идентификация лиц как технология присутствует уже более пятидесяти годов. Изначальные эксперименты машинного исследования лиц были сделаны еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ способны были лишь обозначать силуэты черепа и измерять дистанции между очами и устами на черно-белых изображениях.

Начальные бизнес установки возникли в 1990-х годах, но они были далеки от совершенства: действовали неспешно и нередко ошибались. Только с прогрессом нейронных сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных процессоров распознавание лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным распознаванием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять собственные решения.

Основные стадии функционирования механизма идентификации

Процесс определения лица можно примерно разделить на несколько основных этапов:

Распознавание лица — устройство определяет существование человеческого образа в кадре.
Выделение особенностей — алгоритм изучает черты облика: форму глаз, обонятельного органа, губ, позицию бровей.
Построение структуры — создаётся особенный цифровой отпечаток (faceprint) на основе определённых признаков.
Сравнение со стандартом — созданный шаблон сравнивается с записанной при учёте биометрической данными владельца.
Принятие выбора — если совпадение достаточно значительное, смартфон деблокируется.

Всякий из указанных этапов требует индивидуальных процедур и оптимизаций для быстрой работы непосредственно на девайсе.

Технические составляющие: что находится внутри них

Типичная передняя камера.

Наиболее легкий вариант определения физиономии использует только лицевую камеру смартфона смартфона. Такой подход реализован во многих бюджетных версиях Android-девайсов.

Положительные стороны:

Не требует дополнительные сенсоров.
Оперативно работает при хорошем освещённости.

Слабые стороны:

Просто одурачить снимком или видео.
Плохо действует при низком освещении или непривычных точках зрения.

Инфракрасная камера и точечный проектор

Более совершенные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Каким способом это функционирует:

Точечный проектор отображает на облик использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 точек).
ИК камера регистрирует изменение формы этой сетки по поверхности физиономии.
Формируется трехмерная карта глубины глубинности, что практически неосуществима для имитации типичной фото или маской.

Достоинства

Надёжная работа даже в полной тьме.
Высокая сопротивляемость к имитациям.
Точность распознавания выше 99%.

Дополнительные датчики

В отдельных устройствах задействуются также экстра сенсоры: ToF (Time-of-Flight), которые определяют период распространения луча до объекта и обратно; Трехцветные-датчики дальности; специальные световые измерители расстояния для формирования более точной 3D-модели физиономии.

Эти технологии используются наиболее часто во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический ум в действии

Современные системы распознавания физиономий неосуществимы без эксплуатации artificial intelligence и machine learning. Именно из-за таким технологиям, как вулкан россии, аппарат может узнавать владельца даже при трансформациях внешнего вида: новая причёска, щетина, линзы или грим не становятся помехой для открытия.

Обнаружение лица

В стартовом стадии программа необходимо быстро распознать лицо в пределах полного снимка с камеры. Для этой задачи задействуются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые подготовлены распознавать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN может находить физиономию даже при частичном закрытии (например, платком или ладонью).

Выделение важных моментов

После идентификации лица механизм, такая как вулкан россии, устанавливает расположение основных точек: кончики глаз, конец носа, границы губ и так далее. Обычно задействуется от 68 до 128 главных меток на лицевой поверхности.

Это требуется для выравнивания визуала: если человек находится с телефон под углом, или наклонил головку, программа корректирует картинку до нормального состояния для последующего изучения.

Создание биометрического идентификатора шаблона

Далее нейронная сеть строит уплотненное математическое представление («эмбеддинг») внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Данный формат весьма трудно имитировать: он не хранит непосредственно картинку юзера, а лишь особенные характеристики его внешности, что делает его оптимальным для таких площадок, как vulkan russia.

Сравнительный анализ и принятие заключения

В случае, когда юзер желает разлочить телефон глазами, программа воспроизводит все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный порог (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ блокируется.

Привыкание к изменениям облика

Занимательная черта нынешних систем — возможность самостоятельного обучения. Если ты регулярно разблокируете телефон с обновленной укладкой или очками, алгоритм постепенно освежает базовый модель вашего внешности для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических информации.

Множество юзеры боятся хранить свои биометрические идентификационные данные на смартфоне из-за вероятности утечки информации или хакерской атаки. Иные фирмы, вроде vulkan russia, предоставляют варианты для повышения защиты сведений клиентов.

Локальное сохранение: Основная часть девайсов хранит био-идентификационные шаблоны только внутри защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не оставляют гаджет и не доступны даже производителю.
Шифрование: Все информация хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Приложения внешних девелоперов не обладают прямого возможности доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.

Необходимо подчеркнуть значимую особенность: если кто-то достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании внедряют систему защиты от «слепого» разблокирования — в частности, требуют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают категории идентификации лиц?

На сегодняшний день можно определить выделить 3 ключевых способа к реализации этой задачи:

Софтверное двухмерное определение

Используется только лицевая видеокамера без экстра сенсоров дистанции. Подобный метод используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; умеренная затраты; скоростная функционирование при качественном свете.
Минусы: легко обмануть фотографией; ненадежная деятельность ночью; недостаточная охрана.

Аппаратное 3D сканирование

Использует инфракрасную видеокамеру + проекционный модуль точек + сенсоры дистанции (Face ID от Apple; подобные технологии у Huawei Mate).
Достоинства: высокая надёжность; не получится подделать изображение/видеозапись; устойчивая деятельность при любом освещении.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана («чёлка»)

Гибридные способы с ИИ-дополнением

Применяют комбинацию программных методов + аппаратную обработку + последующую обработку нейросетями для увеличения устойчивости к атакам («anti-spoofing»). Например, подобные изделия, как вулкан россии и Google Pixel Face Unlock современных поколений, объединяют фронталку c ИК сенсором движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Примеры использования разных способов

iPhone линейки X/11/12/13/14 используют только физическое трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID в числе Android.
Samsung Galaxy S10 версия/S20 поддерживают как софтверное 2D определение по снимку селфи-камерой, так и сканер радужки глаза.
Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-датчик

Вопросы защиты и неверные срабатывания

Несмотря на поразительный успехи техники за прошедшие годы, идеальных системы пока не имеется:

Вероятность обмана: Недорогие смартфоны легко открываются высококачественной изображением владельца или же роликом с экрана другого устройства.
Идентичные близнецы: Даже самые идеальные системы могут ошибиться между однояйцевыми близнецами либо семьями с очень схожей внешностью.
Изменения внешнего вида: Внезапное снижение веса/увеличение массы тела, хирургические вмешательства или травмы в некоторых случаях необходимы для обновления данных биометрических данных.
Условия съёмки: Интенсивная засветка солнцем или плотная темнота могут понизить аккуратность идентификации признаков.

Вот некоторые рекомендаций по безопасному эксплуатации:

Для важных операций всегда используйте двухэтапную аутентификацию;
Не включайте опцию «Разблокировка по лицу» на дешёвых моделях без ИК-сенсоров;
Систематически обновляйте ПО телефона для защиты от современных угроз;
Включайте функцию «Требовать раскрытых глаз» везде, где она есть.

В каких местах дополнительно применяется технологии кроме мобильных телефонов?

Хотя тема данной работы касается именно смартфонам и планшетам, необходимо сказать о других сферах применения технологии:

Управление входа в деловых центрах и многоквартирных зданиях;
Платёжные терминалы банков («Face Pay»);
Цифровые удостоверения личности нового образца;
Установки видеоконтроля городских служб;
Автоматизирование регистрации посещаемости учебных заведений/вузов;
Авторизация юзеров персональных компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система платежа проезда по лицу («Face Pay») — хватит пройти через турникет без пластика или мобильника! Похожие проекты реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом меняется технология в наше время?

Всякий годочек проявляются новые мысли для усовершенствования стандарта деятельности систем распознавания лиц:

Увеличивается разрешение сенсоров — чем больше элементов фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность неточности;
Совершенствуются искусственные интеллекты — новейшие конструкции вида MobileNetV3 дают возможность оперативно осваивать свежим чертам вида пользователя непосредственно на девайсе без отправки данных в облако.
Совершенствуются методы антиспуфинга — теперь телефоны умеют распознавать реальные живые лица от фиксированных фото/масок по мельчайшим микродвижениям.
Интеграция со интеллектуальными приборами — интеллектуальные часы могут авто блокировать телефон, если обладатель отошёл далеко.
Проявляются гибридные устройства — в частности объединяющие речевую аутентификацию + лицо + пальцевой отпечаток.

Вот, те тенденции очень актуальны сейчас:

1) Сокращение элементов

Изготовители намереваются минимизировать габариты выреза («чёлки») для датчики на экране за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для повышения приватности всё более вычислений происходит локально без передачи информации во дополнительный облачный сервис.

3) Унификация стандартов

Google энергично продвигает стандарт BiometricPrompt API, с целью чтобы такие платформы, как вулкан россия, и каждые Android-приложения могли работать с любыми видами биометрии единообразно.

Какое выбрать на сегодня?

В случае если тебе необходима максимальная защита данных, выбирайте топовые модели со встроенным ИК-излучателем либо ToF-сенсором глубины.

iPhone всех существующих последних поколений
Huawei Companion/P линейки
Mi Pro
Vivo X серии
Oppo Обнаружить Икс линейки.

Если средства невелик – лучше выбирать классическим средствам защиты (PIN-код/сканер отпечатка), а функцию «разблокировка по лицу», такую как в вулкан россия, использовать только как опциональную возможность комфорта.

Как повысить практичность использования возможности?

Есть некоторые лайфхаков для тех, кто уже применяет разблокировку по лицу:

Часто меняйте свою фотографию-шаблон, если кардинально изменяется внешность.
Не пренебрегайте чистить объектив фронтальной камеры – пятна могут уменьшить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам включает камеру когда вы берёте его в руки.
В процессе регистрационного процесса пытайтесь держать лицевую часть неподвижно напротив объектива исключая сильного наклона головы.
Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от экрана.

Перспективы прогресса инноваций

В скоро наступающие времена можно предполагать возникновения полностью бесконтактных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: лицо + голос + шаги + манипуляции руками!

Также предполагается появление новых способов охраны личной информации – к примеру, изменяющееся корректировка электронного шаблона после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из очень интересных технологий нашего времени! Она предоставляет интеракцию со мобильным устройством удобнее чем раньше, и такие приложения, как vulkan russia, могут существенно повысить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как работает эта методика в деталях, – сумеете вдумчиво выбирать свой следующий устройство!