Каким способом действует определение лицевых образов в мобильных устройствах

Зачем мы выбираем разблокировку по фейсу

В недавние времена идентификация физиономий превратилось в одной из наиболее востребованных функций для открытия умных телефонов. Всего некоторые лет тому назад большинство юзеров довольствовались PIN-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект делает эту возможность такой востребованной? Прежде всего, это практично: не нужно помнить трудные пароли или искать верный палец в мраке. Во-вторых, это быстро: современные системы идентифицируют лицо практически за мгновения ока. В-третьих, это чувство будущего — как будто в кинофильмах про вулкан россия шпионов.

Однако за данной на первый взгляд простотой таится весь вселенная трудных методов и инженерных решений. Попробуем разобраться, как точно функционирует идентификация по лицу в современных гаджетах, какие существуют методы, насколько они надёжны и что нас ожидает в будущем.

Короткая повествование эволюции техники

Распознавание лиц как технология имеется уже более пятидесяти годов. Первые эксперименты автоматизированного исследования облика были предприняты еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ умели лишь обозначать силуэты головы и вычислять расстояния между глазами и устами на ахроматических снимках.

Изначальные коммерческие установки стали доступны в 1990-х годах, но они были далеки от совершенства: работали медленно и нередко ошибались. Только с развитием синтетических сетей и таких систем, как вулкан россии, мощных мобильных микросхем распознавание лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным сканированием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные разработки.

Основные этапы работы устройства распознавания

Процесс идентификации лица можно примерно поделить на несколько важных этапов:

Распознавание лица — устройство распознает наличие человеческого лица в кадре.
Извлечение характеристик — система изучает особенности физиономии: конфигурацию глаз, носа, уст, положение надбровных дуг.
Построение шаблона — создаётся особенный электронный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со эталоном — созданный модель сверяется с зафиксированной при учёте биометрической сведениями владельца.
Принятие определения — если совпадение достаточно высокое, смартфон открывается.

Всякий из указанных шагов запрашивает особых методов и оптимизаций для скорой работы прямо на устройстве.

Железные составляющие: что находится внутри

Обычная передняя камера.

Самый простой несложный способ определения облика применяет только фронтальную видеокамеру мобильного устройства. Данный подход внедрён во различных доступных версиях Android-устройств.

Плюсы:

Не нуждается в нуждается в дополнительных сенсоров.
Быстро действует при достаточном освещённости.

Недостатки:

Просто ввести в заблуждение изображением или видео.
Неудачно действует при низком освещённости или нестандартных ракурсах.

Инфракрасная фотокамера и точечный проекционный аппарат

Более совершенные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс лежит в основе Face ID от Apple.

Каким образом это действует:

Точечный проектор отображает на облик юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 точек).
ИК устройство фиксирует изменение формы этой решетки по поверхности лица.
Создаётся трехмерная карта глубины глубины, которая почти что неосуществима для фальсификации обычной снимком или маской.

Преимущества

Надёжная функционирование даже в полной темноте.
Сильная сопротивляемость к подделкам.
Точность распознавания более 99%.

Дополнительные сенсоры

В некоторых устройствах применяются также дополнительные датчики: ToF (Time-of-Flight), которые измеряют время распространения луча до объекта и обратно; Трехцветные-датчики дальности; специальные лазерные дальномеры для создания более аккуратной 3D-модели физиономии.

Эти технологии применяются чаще всего во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: синтетический интеллект на работе

Современные устройства опознания лиц невозможны при отсутствии применения ИИ и машинного обучения. Именно из-за таким инновациям, как вулкан россии, аппарат в состоянии идентифицировать пользователя даже при метаморфозах облика: новая укладка, борода, линзы или макияж не становятся помехой для разблокировки.

Обнаружение лица

На начальном шаге система необходимо быстро распознать лицо в пределах всего кадра камеры. Для этой задачи используются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены находить лиц человека среди множества других объектов.

Пример: метод MTCNN может находить лицо даже с частичном закрытии (например, шарфом или рукой).

Идентификация ключевых аспектов

После распознавания лица механизм, такая как вулкан россии, вычисляет положение основных точек: края глаз, верхушка носа, границы губ и так далее. Часто применяется от 68 до 128 главных меток на лицевой поверхности.

Это действие необходимо для стабилизации картинки: если пользователь держит смартфон под углом, или наклонил голову, программа исправляет изображение до стандартного положения для последующего изучения.

Создание биометрии модели

Далее нейросеть строит компактное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Данный образец крайне сложно подделать: он не хранит само фото пользователя, а лишь особенные черты его внешности, что делает его совершенным для таких систем, как vulkan russia.

Сопоставление и вынесение решения

Если юзер намеревается разлочить смартфон глазами, механизм воспроизводит все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно больше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ не предоставляется.

Приспособление к метаморфозам внешности

Интересная черта современных систем — способность самостоятельного обучения. Если вы часто доступаете к мобильное устройство с новой укладкой или оптикой, программа постепенно модернизирует эталонный шаблон вашего лица для повышения точности работы без ухудшения безопасности.

Безопасность биометрии информации.

Многие пользователи боятся хранить свои биометрические идентификационные данные на смартфоне из-за вероятности утечки данных или взлома гаджета. Некоторые фирмы, например vulkan russia, предлагают варианты для повышения защиты сведений клиентов.

Локальное сбережение: Большинство девайсов записывает биометрические образцы лишь в пределах безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из гаджет и не доступны в том числе создателю.
Шифрование: Все данные хранятся только в шифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Программы третьих разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Необходимо подчеркнуть важную подробность: в случае, если кто-либо получит физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители осуществляют защиту от “слепого” разблокирования — например, требуют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие бывают категории определения лиц на изображениях?

На сегодняшний день можно выделить определить три основных подхода к осуществлению этой операции:

Софтверное плоское распознавание

Используется только лицевая видеокамера без вспомогательных детекторов дистанции. Этот метод используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость реализации; минимальная цена; оперативная деятельность при качественном освещении.
Минусы: легко ввести в заблуждение фотографией; нестабильная функционирование ночью; низкая безопасность.

Аппаратное трёхмерное сканирование

Использует ИК видеокамеру + проектор пикселей + датчики глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: большая надёжность; нельзя подделать изображение/видеозапись; постоянная работа при любом освещении.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с ИИ-дополнением

Применяют комбинацию программируемых методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, как вулкан россии и Google Pixel Face Unlock последних поколений, комбинируют фронтальную камеру c ИК сенсором движения Soli Radar для предотвращения от фальсификаций руками/масками/видеоэкранами чужих устройств.

Образцы эксплуатации различных техник

iPhone линейки X/11/12/13/14 задействуют только техническое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз представил подобие Face ID среди Android.
Samsung Galaxy S10 версия/S20 обеспечивают как софтверное 2D распознавание по изображению фронтальной камерой, так и сенсор радужки глаза.
Huawei Mate20 Pro использует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Проблемы безопасности и неверные сигналы

Несмотря на поразительный успехи инноваций за последние годы, безупречных системы пока не имеется:

Возможность мошенничества: Доступные смартфоны просто доступны четкой фотографией пользователя или роликом с экрана другого устройства.
Идентичные близнецы: Даже самые безупречные системы могут спутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
Изменения внешности: Резкое утрата веса/увеличение массы тела, косметические процедуры либо травмы порой требуют перерегистрации биометрических данных.
Условия съёмки: Интенсивная подсветка солнечным светом либо плотная затенение могут уменьшить верность идентификации признаков.

Вот пара советов для защищённому эксплуатации:

Для критически важных операций всегда внедряйте двухэтапную аутентификацию;
Не активируйте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
Регулярно обновляйте программное обеспечение смартфона для обеспечения безопасности от современных угроз;
Включайте функцию “Требовать распахнутых глаз” там, где она имеется.

В каких местах ещё используется технология за исключением смартфонов?

Хотя тема данной статьи сосредоточена на в частности портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:

Контроль входа в деловых центрах и многоквартирных зданиях;
Платёжные терминалы банков (“Face Pay”);
Виртуальные идентификационные документы последнего поколения;
Системы видеонаблюдения городских служб;
Автоматизация отслеживания явки школ/вузов;
Авторизация пользователей ПК/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через турникет без карты или мобильника! Схожие инициативы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом меняется технический процесс сегодня?

Каждый годочек проявляются современные мысли для повышения стандарта работы систем распознавания лиц:

Увеличивается детализация сенсорных устройств — чем больше деталей фиксируется фотоаппаратом/глубинными сенсорами, тем меньше шанс неточности;
Развиваются нейронные сети — передовые конструкции модели MobileNetV3 обеспечивают возможность скоростно адаптироваться к свежим особенностям облика пользователя непосредственно на девайсе без отправки данных в облако.
Совершенствуются способы антиспуфинга — теперь телефоны способны отличать подлинные живые лица от статичных фотографий/маскировок по мельчайшим движениям кожи.
Взаимодействие со умными устройствами — смарт-часы могут автоматически закрыть доступ к мобильный телефон, если владелец удалился на значительное расстояние.
Появляются смешанные механизмы — к примеру объединяющие речевую идентификацию + физиономию + дактилоскопический след.

Здесь, те тенденции в особенности популярны на сегодняшний день:

1) Миниатюризация компонентов

Компании намереваются уменьшить величину отверстия (“чёлки”) под датчики на дисплее за счёт встраивания компактных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения конфиденциальности всё более расчётов выполняется на месте без передачи данных во дополнительный облачный услугу.

3) Стандартизация стандартов

Гугл активно пропагандирует стандарт BiometricPrompt API, для того чтобы подобные системы, вроде вулкан россия, и любые Android-аппы могли работать с различными типами биометрии единообразно.

Что решить на сегодня?

В случае если вам всем необходима наивысшая сохранность данных, остановите выбор на топовые модели с интегрированным ИК-излучателем или ToF-датчиком глубины.

iPhone каждого актуальных версий
Huawei Mate/Series P серии
Mix Expert
Vivo X линейки
Oppo Find X серии.

Если средства ограничен – лучше предпочесть традиционным способам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как второстепенную опцию удобства.

Каким способом увеличить удобство работы функции?

Есть пара лайфхаков для пользователей, кто уже использует разблокировку через лицо:

Часто меняйте свою фото-шаблон, если кардинально меняется внешний вид.
Не пренебрегайте чистить объектив фронтальной камеры – пятна могут снизить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам включает камеру как только вы поднимаете его.
При регистрационного процесса постарайтесь держать голову неподвижно впереди камеры не допуская значительного наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от дисплея.

Перспективы эволюции технологии

В скоро наступающие времена можно предвкушать развития полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + голос + шаги + движения рук!

Также вероятно развитие современных способов обеспечения конфиденциальности – скажем, изменяющееся изменение цифрового паттерна после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из самых увлекательных техник нашего периода! Она делает интеракцию со телефоном комфортнее чем до этого, и такие приложения, как vulkan russia, могут существенно улучшить ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как функционирует эта методика внутри, – будете в состоянии более осмысленно выбирать свой очередной устройство!