Как действует определение лицевых образов в смартфонах

Зачем мы предпочитаем разблокировку по фейсу

В последние времена распознавание физиономий стало одной из самых распространённых опций для открытия смартфонов. Еще пару годков тому назад основная часть использующих удовлетворялись PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением таких технологий, как cabura, нам вполне просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект обуславливает эту конкретную функцию настолько популярной? Во-первых, это удобно: не нужно запоминать замысловатые пароли или отыскивать верный палец в темноте. Также, это мгновенно: современные алгоритмы идентифицируют лицо фактически за мгновения ока. В-третью очередь, это впечатление будущего — как будто в кинофильмах про cabura шпионов.

Впрочем за данной кажущейся несложностью прячется весь вселенная трудных методов и инженерных разработок. Позвольте нам понять, как точно работает распознавание лиц в новейших мобильных телефонах, какие существуют способы, насколько они надёжны и что нас ожидает в будущем.

Сжатая хроника развития технологии

Распознавание лиц как методика существует уже более 50 годов. Изначальные пробы автоматизированного анализа лиц были осуществлены еще в 1960-х годы в лабораториях США. Тогда ЭВМ могли лишь обозначать очертания черепа и определять расстояния между зрачками и устами на монохромных снимках.

Первые коммерческие установки появились в 1990-х годах, но они были далеки от совершенства: действовали неспешно и часто давали сбои. Только с прогрессом синтетических сетей и таких платформ, как кабура, сильных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать личные разработки.

Главные этапы работы механизма идентификации

Процесс определения лица можно условно поделить на несколько важных этапов:

Распознавание лиц — аппарат выявляет существование людского лица в снимке.
Определение признаков — механизм исследует особенности облика: конфигурацию зрительных органов, носа, уст, положение надбровных дуг.
Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со эталоном — полученный образец сверяется со зафиксированной при внесении биометрической данными владельца.
Принятие определения — если сходство достаточно существенное, смартфон деблокируется.

Любой из этих этапов нуждается в индивидуальных алгоритмов и оптимизаций для оперативной работы непосредственно на девайсе.

Железные составляющие: что скрыто в их недрах

Стандартная фронтальная камера.

Самый простой простой метод идентификации лица задействует исключительно лицевую видеокамеру смартфона. Подобный метод осуществлён во многих доступных вариантах Android-устройств.

Положительные стороны:

Не нуждается в дополнительные датчиков.
Быстро работает при достаточном свете.

Слабые стороны:

Просто обмануть снимком или видеозаписью.
Плохо работает при плохом освещении или нестандартных углах обзора.

Инфракрасная фотокамера и точечный проектор

Более продвинутые системы, такие как кабура, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика составляет базу Face ID от Apple.

Каким способом это действует:

Точечный проектор проецирует на физиономию пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 точек).
ИК устройство регистрирует искривление данной сетки по поверхности физиономии.
Создаётся 3D карта глубины глубины, которая почти неподвластна для имитации обычной фото или маскировкой.

Плюсы

Надёжная деятельность даже в полной тьме.
Большая устойчивость к подделкам.
Точность распознавания свыше 99%.

Дополнительные датчики

В отдельных устройствах задействуются также дополнительные датчики: ToF (Time-of-Flight), которые определяют период распространения света до цели и обратно; Трехцветные-датчики дальности; специальные лазерные дальномеры для формирования более детализированной 3D-модели физиономии.

Эти технологии используются чаще всего во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искусственный ум на действии

Нынешние механизмы распознавания лиц немыслимы при отсутствии применения artificial intelligence и machine learning. Именно из-за таким разработкам, как кабура, устройство способно идентифицировать пользователя даже при метаморфозах внешности: новая укладка, щетина, линзы или макияж не становятся барьером для деблокировки.

Распознавание лица

На стартовом стадии программа необходимо быстро распознать лицо внутри целого изображения с камеры. Для этого используются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые «обучены» находить лиц человека среди множества других объектов.

Пример: алгоритм MTCNN может обнаруживать физиономию даже при неполном перекрытии (например, платком или ладонью).

Идентификация важных аспектов

После распознавания лица система, такая как кабура, определяет расположение главных точек: кончики глаз, конец носа, границы губ и так далее. Часто применяется от 68 до 128 ключевых маркеров на лицевой области.

Данное необходимо для нормализации визуала: если юзер держит телефон под наклоненным, или повернул головку, программа «выпрямляет» картинку до нормального состояния для дальнейшего анализа.

Создание биометрического образца

Далее нейросеть строит компактное цифровое представление («эмбеддинг») лица пользователя — своеобразный цифровой «отпечаток» внешности длиной от 128 до 512 вещественных чисел.

Такой формат весьма трудно подделать: он не удерживает непосредственно изображение пользователя, а лишь уникальные характеристики его внешности, что делает его идеальным для таких платформ, как кабура казино.

Сопоставление и принятие заключения

Когда человек намеревается разблокировать мобильник взором, система воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно больше 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ не предоставляется.

Приспособление к трансформациям внешнего вида

Занимательная характеристика нынешних систем — возможность самостоятельного обучения. Если ты постоянно разблокируете телефон с новой укладкой или очками, система постепенно освежает основной модель вашего внешности для повышения точности работы без снижения уровня безопасности.

Охрана биометрии данных.

Множество юзеры беспокоятся держать свои биометрические данные на смартфоне из-за риска потери данных или взлома гаджета. Определенные компании, вроде кабура казино, предлагают методы для повышения безопасности сведений клиентов.

Локальное сбережение: Большинство аппаратов записывает биометрические шаблоны лишь внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют гаджет и не доступны даже создателю.
Шифрование: Все информация хранятся только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция приложений: Программы третьих разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Стоит упомянуть важную особенность: если кто-либо достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители внедряют защиту от автоматического разблокирования — к примеру, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют виды определения лиц на изображениях?

Сегодня можно определить 3 ключевых подхода к реализации этой задачи:

Программируемое 2D распознавание

Используется только передняя камера без экстра датчиков дистанции. Подобный способ наблюдается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота воплощения; низкая стоимость; оперативная работа при качественном свете.
Минусы: легко ввести в заблуждение снимком; неустойчивая функционирование ночью; низкая охрана.

Техническое 3D сканирование

Задействует инфракрасную камеру + проекционный модуль точек + датчики дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Достоинства: высокая достоверность; нельзя подделать фото/видео; устойчивая работа при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана («чёлка»)

Комбинированные способы с ИИ-дополнением

Задействуют комбинацию программных методов + аппаратно-техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам («anti-spoofing»). Например, подобные продукты, как кабура и Google Pixel Face Unlock новейших поколений, объединяют фронталку c инфракрасным датчиком мобильности Soli Radar для защиты от подделок жестами/масками/видеодисплеями посторонних устройств.

Образцы эксплуатации различных техник

iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition впервые представил эквивалент Face ID в ряду Android.
Samsung Galaxy S10 модель/S20 поддерживают как программное обеспечение двухмерное распознавание по изображению селфи-камерой, так и датчик глазного ириса.
Huawei Mate20 Pro применяет набор из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Проблемы охраны и неверные сигналы

Несмотря на поразительный развитие инноваций за недавние лет, совершенных системы пока не имеется:

Вероятность мошенничества: Недорогие мобильники без труда доступны высококачественной снимком хозяина либо видеозаписью с экрана другого устройства.
Идентичные близнецы: Даже самые совершенные системы могут перепутать между однояйцевыми близнецами либо родичами с очень схожей внешностью.
Метаморфозы внешнего вида: Стремительное похудение/увеличение массы тела, пластические операции или повреждения порой требуют перерегистрации биометрических данных.
Условия записи: Яркая подсветка солнечным светом или же плотная затенение могут уменьшить точность определения признаков.

Вот пара советов по безопасному применению:

Для важных операций всегда используйте дополнительную аутентификацию;
Не активируйте функцию «Разблокировка по лицу» на дешёвых моделях без ИК-сенсоров;
Систематически апгрейдите ПО смартфона для предотвращения угроз от современных угроз;
Включайте настройку «Требовать распахнутых глаз» там, где она доступна.

В каких местах дополнительно используется технология помимо мобильных телефонов?

Хотя основная мысль этой публикации посвящена в частности портативным гаджетам, стоит упомянуть о других сферах применения технологии:

Контроль входа в офисах и многоквартирных зданиях;
Платёжные аппараты банков («Face Pay»);
Цифровые идентификационные документы современного поколения;
Системы видеомониторинга городских сервисов;
Автоматизирование отслеживания посещаемости образовательных учреждений/университетов;
Авторизация участников компьютеров/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по лицу («Face Pay») — достаточно пройти через барьер без карты или телефона! Похожие проекты развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется технология сегодня?

Любой годик возникают свежие мысли для усовершенствования качества функционирования систем идентификации лиц:

Увеличивается детализация сенсорных устройств — чем больше деталей фиксируется камерой/датчиками глубины, тем меньше вероятность погрешности;
Улучшаются искусственные интеллекты — современные архитектуры модели MobileNetV3 обеспечивают возможность скоростно обучаться свежим характеристикам вида обладателя напрямую на гаджете без отправки данных в облако.
Улучшаются технологии антиспуфинга — теперь телефоны могут различать реальные живые лица от фиксированных фото/масок по микроскопическим микродвижениям.
Взаимодействие со смарт-гаджетами — смарт-часы могут авто заблокировать телефон, если владелец удалился на значительное расстояние.
Проявляются гибридные устройства — например объединяющие голосовую опознание + физиономию + дактилоскопический след.

Вот, те тенденции особенно популярны на сегодняшний день:

1) Сокращение компонентов

Компании намереваются уменьшить величину отверстия («чёлки») под сенсоры на дисплее за счёт внедрения маленьких ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для повышения личной безопасности всё более расчётов выполняется локально без пересылки данных во дополнительный облачный сервис.

3) Унификация стандартов

Гугл интенсивно продвигает эталон BiometricPrompt API, чтобы подобные площадки, вроде cabura, и любые Android-аппы могли работать с любыми видами биометрии унифицированно.

Что выбрать сегодня?

Когда вам всем необходима наивысшая защита информации, остановите выбор на флагманские аппараты со встроенным ИК-проектором или же ToF-сенсором глубины.

iPhone всех последних поколений
Huawei Mate/Series P ряда
Mix Pro
Vivo X модели
Oppo Найти Икс серий.

Если средства ограничен – лучше предпочесть традиционным средствам защиты (PIN-код/сканер отпечатка), а возможность «разблокировка по лицу», такую как в cabura, задействовать только как дополнительную возможность комфорта.

Каким образом повысить практичность использования опции?

Есть некоторые советов для пользователей, кто уже использует функцию распознавания лица:

Регулярно меняйте свою фотографию-шаблон, если сильно трансформируется внешность.
Не упускайте из виду очищать линзу фронтальной камеры – разводы могут уменьшить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает камеру если вы поднимаете его.
Во время записи пытайтесь держать лицевую часть неподвижно впереди объектива не допуская значительного наклона головы.
Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвели взгляд от экрана.

Перспективы эволюции инноваций

В скоро наступающие времена можно предвкушать появления полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + походка + движения рук!

Также предполагается появление новых методов защиты приватности – скажем, переменное корректировка электронного образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень интересных технологий нашего времени! Она предоставляет взаимодействие со мобильным устройством удобнее чем до этого, и такие аппы, как кабура казино, могут в разы улучшить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как устроена эта система изнутри, – будете в состоянии осознаннее выбирать свой будущий устройство!