Каким способом функционирует распознавание лиц в смартфонах

Для чего мы выбираем разблокировку по лицу

В последние годы распознавание физиономий стало одной из самых популярных функций для деблокировки смартфонов. Еще пару годков тому назад основная масса использующих удовлетворялись PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, например admiral x, нам достаточно просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает эту функцию настолько популярной? Прежде всего, это комфортно: не нужно помнить замысловатые пароли или находить нужный палец в темноте. Кроме того, это мгновенно: современные алгоритмы распознают лицо практически за мгновения ока. В-третью очередь, это впечатление футуризма — как будто в кинолентах про admiral x официальный сайт агентов.

Тем не менее за такой на первый взгляд несложностью таится весь вселенная трудных техник и инженерных разработок. Попробуем разобраться, как именно функционирует идентификация по лицу в новейших гаджетах, какие существуют методы, насколько они безопасны и что нас ожидает в будущем.

Короткая история эволюции инноваций

Идентификация лиц как техника присутствует уже более пятидесяти лет. Первые пробы автоматизированного исследования облика были осуществлены еще в 1960-х годах в лабораториях США. Тогда вычислительные машины умели лишь выделять очертания лица и определять промежутки между глазами и устами на черно-белых фотографиях.

Начальные бизнес установки возникли в 1990-х годах, но они были неидеальны: функционировали медленно и часто давали сбои. Только с развитием искусственных сетей и таких площадок, как адмирал х, сильных мобильных чипов определение лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои решения.

Главные этапы функционирования механизма определения

Процесс распознавания лица можно примерно поделить на несколько ключевых этапов:

Обнаружение лица — аппарат выявляет существование человеческого лица в изображении.
Выделение характеристик — система анализирует особенности физиономии: конфигурацию зрительных органов, обонятельного органа, губ, позицию бровей.
Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
Сравнение с стандартом — созданный шаблон сверяется с сохранённой при учёте биометрической информацией владельца.
Принятие решения — если совпадение достаточно значительное, смартфон открывается.

Каждый из данных стадий запрашивает индивидуальных методов и оптимизаций для скорой работы прямо на устройстве.

Аппаратные элементы: что находится в их недрах

Стандартная передняя камера.

Наиболее несложный метод распознавания облика использует исключительно фронтальную камеру мобильного устройства. Данный метод внедрён во многих недорогих моделях Android-устройств.

Достоинства:

Необходимо нуждается в дополнительных сенсоров.
Быстро действует при достаточном свете.

Отрицательные стороны:

Несложно обмануть изображением или видео.
Неудачно действует при низком свете или непривычных углах обзора.

Инфракрасная фотокамера и пунктирный проектор

Более совершенные системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.

Каким способом это функционирует:

Точечный проекционный прибор показывает на облик пользователя невидимую сетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 точек).
ИК устройство фиксирует изменение формы данной решетки по плоскости физиономии.
Создаётся 3D карта глубины глубинности, что практически неосуществима для подделки обычной снимком или маскировкой.

Плюсы

Надёжная функционирование даже в полной тьме.
Высокая защита к имитациям.
Точность идентификации свыше 99%.

Дополнительные сенсоры

В отдельных аппаратах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют период распространения света до цели и обратно; Трехцветные-датчики глубины; специальные оптические измерители расстояния для построения более детализированной 3D-модели физиономии.

Эти инновации встречаются наиболее часто во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искусственный разум на действии

Современные системы идентификации лиц невозможны в отсутствие использования ИИ и machine learning. Именно благодаря таким технологиям, как адмирал х, устройство способно распознавать владельца даже при изменениях внешнего вида: новая стрижка, растительность на лице, линзы или косметика не становятся помехой для деблокировки.

Распознавание лиц

На стартовом стадии программа обязана оперативно обнаружить лицо внутри целого кадра с камеры. Для данной цели используются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые «обучены» распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN способен распознавать облик даже в случае неполном перекрытии (например, платком или рукой).

Выделение основных моментов

После идентификации лица механизм, такая как адмирал х, устанавливает местоположение главных точек: уголки глаз, кончик носа, границы губ и так далее. Часто применяется от 68 до 128 главных меток на лицевой области.

Это действие нужно для нормализации визуала: если человек находится с телефон под наклоненным, или наклонил голову, программа исправляет изображение до нормального состояния для дальнейшего анализа.

Формирование биометрического идентификатора шаблона

Далее нейросеть строит сжатое числовое представление («эмбеддинг») лица пользователя — своеобразный цифровой «отпечаток» лица длиной от 128 до 512 чисел с плавающей запятой.

Такой шаблон очень сложно имитировать: он не удерживает само картинку пользователя, а лишь особенные черты его внешности, что делает его оптимальным для таких платформ, как admiral-x.

Сравнение и осуществление заключения

Когда юзер желает открыть мобильник взором, система воспроизводит все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно выше 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ блокируется.

Привыкание к метаморфозам облика

Увлекательная характеристика актуальных системы — возможность самостоятельного обучения. Если вы регулярно разблокируете телефон с новой прической или очками, программа постепенно освежает эталонный образец вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Безопасность биометрических данных данных.

Большинство юзеры опасаются держать свои био-идентификационные данные на мобильном устройстве из-за риска утечки информации или взлома устройства. Некоторые компании, такие как admiral-x, предлагают решения для повышения безопасности данных пользователей.

Локальное сохранение: Большинство девайсов записывает био-идентификационные образцы лишь в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не выходят из устройство и не доступны включая изготовителю.
Шифрование: Все сведения сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Программы сторонних девелоперов не обладают прямого возможности доступа к биометрическим данным; они могут лишь требовать подтверждение верификации личности через системный API.

Стоит подчеркнуть важную подробность: в случае, если какой-то человек получит доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители реализуют защиту от неосознанного разблокирования — к примеру, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются категории определения лиц?

Сегодня можно определить различить 3 ключевых подхода к выполнению этой операции:

Софтверное 2D распознавание

Эксплуатируется только лицевая видеокамера без экстра сенсоров глубины. Такой метод наблюдается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота воплощения; умеренная затраты; быстрая работа при достаточном свете.
Минусы: просто обмануть снимком; нестабильная работа ночью; слабая защищенность.

Аппаратное объёмное сканирование

Задействует инфракрасную камеру + проектор точек + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: большая надёжность; не получится исказить изображение/видеозапись; стабильная работа при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана («чёлка»)

Гибридные подходы с интеграцией ИИ

Применяют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам («anti-spoofing»). Например, такие изделия, как адмирал х и Google Pixel Face Unlock последних поколений, комбинируют фронтальную камеру c ИК датчиком движения Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Иллюстрации использования разнообразных способов

iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное сканирование
Xiaomi Mi8 Explorer Edition впервые предложил эквивалент Face ID в числе Android.
Samsung Galaxy S10/S20 обеспечивают как программное двухмерное идентификацию по фото фронтальной камерой, так и датчик радужки глаза.
Huawei Mate20 Pro задействует набор из ИК-освещения + Dot Projector + ToF-датчик

Трудности охраны и ошибочные сигналы

Несмотря на впечатляющий успехи инноваций за прошедшие лет, совершенных системы пока не существует:

Шанс мошенничества: Доступные телефоны без труда доступны высококачественной фотографией пользователя либо видеозаписью с экрана другого устройства.
Идентичные близнецы: Даже самые идеальные системы могут ошибиться между монозиготными близнецами либо родственниками с очень схожей внешностью.
Изменения внешности: Внезапное снижение веса/увеличение массы тела, хирургические вмешательства или повреждения иногда требуют обновления данных биометрии.
Условия фотографирования: Интенсивная подсветка солнечным светом либо глубокая затенение могут снизить верность идентификации признаков.

Ниже пара рекомендаций по защищённому использованию:

Для критически важных операций всегда применяйте дополнительную аутентификацию;
Не активируйте опцию «Разблокировка по лицу» на недорогих моделях без ИК-сенсоров;
Систематически обновляйте программное обеспечение телефона для защиты от актуальных атак;
Включайте настройку «Требовать раскрытых глаз» везде, где она доступна.

В каких областях также используется технологии за исключением мобильных телефонов?

Хотя основная мысль нашей статьи посвящена именно смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

Управление доступа в деловых центрах и жилых домах;
Платёжные терминалы финансовых учреждений («Face Pay»);
Электронные идентификационные документы современного поколения;
Установки видеоконтроля городских служб;
Механизация отслеживания присутствия учебных заведений/университетов;
Вход юзеров ПК/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по лицу («Face Pay») — хватит пройти через турникет без пластика или мобильника! Похожие проекты осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом трансформируется технология в наше время?

Любой годочек возникают современные идеи для усовершенствования стандарта деятельности систем распознавания лиц:

Увеличивается детализация сенсоров — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше риск погрешности;
Совершенствуются нейросети — современные структуры вида MobileNetV3 позволяют оперативно обучаться новым характеристикам облика обладателя прямо на устройстве без отправки данных в облако.
Совершенствуются технологии антиспуфинга — теперь телефоны умеют различать подлинные живые лица от неподвижных фотографий/маскировок по микроскопическим микродвижениям.
Синхронизация со смарт-гаджетами — умные часы могут авто заблокировать смартфон, если пользователь отошёл далеко.
Появляются гибридные устройства — к примеру комбинирующие голосовую аутентификацию + лицо + дактилоскопический след.

Вот, какие тренды особенно актуальны сейчас:

1) Миниатюризация элементов

Компании стараются сократить величину отверстия («чёлки») под датчики на дисплее за счёт встраивания маленьких ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для увеличения личной безопасности всё более расчётов происходит внутри устройства без передачи информации во сторонний облачный услугу.

3) Стандартизация норм

Гугл активно пропагандирует стандарт BiometricPrompt API, с целью чтобы аналогичные площадки, например как admiral x, и каждые Android-приложения были совместимы с любыми видами биометрии унифицированно.

Какое подобрать на сегодня?

Когда тебе важна предельная защита информации, подбирайте передовые устройства с вмонтированным ИК-проектором либо ToF-датчиком глубины.

iPhone всех новейших моделей
Huawei Partner/Series P линейки
Mi Pro
Vivo X модели
Oppo Find Х линейки.

Если средства ограничен – лучше выбирать традиционным способам безопасности (PIN-код/сканер пальца), а возможность «разблокировка по лицу», такую как в admiral x, использовать только как опциональную возможность удобства.

Как улучшить практичность функционирования функции?

Есть несколько хитростей для тех, кто уже использует разблокировку по лицу:

Часто обновляйте свою фотографию-шаблон, если значительно трансформируется внешний вид.
Не упускайте из виду протирать линзу фронтальной камеры – загрязнения могут понизить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует камеру если вы берёте его в руки.
В процессе записи постарайтесь держать лицо прямо перед видеоустройства исключая резкого наклона головы.
Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвернулись от экрана.

Перспективы развития технологии

В ближайшие годы можно ожидать появления полностью дистанционных способов распознавания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: лицо + голос + манера ходьбы + манипуляции руками!

Также возможно развитие свежих способов охраны приватности – скажем, динамическое изменение диджитал образца после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых интересных инноваций нашего периода! Она делает общение со смартфоном удобнее чем раньше, и такие аппы, как admiral-x, могут существенно улучшить ваш юзерский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как функционирует эта технология изнутри, – сможете осознаннее подбирать свой будущий гаджет!