Каким образом работает идентификация лиц в телефонах

Почему мы останавливаемся на разблокирование по лицу

В недавние времена идентификация лиц является одной из самых популярных опций для открытия умных телефонов. Еще пару лет назад основная часть пользователей удовлетворялись пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект превращает эту конкретную функцию такой востребованной? Для начала, это практично: не нужно запоминать сложные пароли или отыскивать правильный палец в темноте. Также, это мгновенно: современные алгоритмы узнают лицо практически за доли секунды. В-третьем пункте, это чувство футуризма — словно в кинолентах про казино вулкан шпионов.

Однако за этой на первый взгляд несложностью скрывается целый вселенная трудных техник и инженерных разработок. Позвольте нам исследовать, как конкретно действует распознавание лиц в современных смартфонах, какие бывают способы, насколько они надёжны и что нас ждёт впереди.

Краткая история прогресса инноваций

Идентификация лиц как техника имеется уже более 50 годов. Изначальные пробы автоматизированного исследования лиц были сделаны еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины умели лишь обозначать контуры лица и определять расстояния между зрачками и устами на монохромных снимках.

Первые коммерческие системы стали доступны в 1990-х годах, но они были несовершенны: работали медленно и нередко ошибались. Только с прогрессом искусственных сетей и таких платформ, как вулкан россии, сильных мобильных процессоров идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные разработки.

Основные стадии функционирования системы определения

Процесс распознавания лица можно ориентировочно сегментировать на несколько основных этапов:

1. Идентификация лица — устройство распознает присутствие гуманного образа в изображении.
2. Определение признаков — система исследует особенности лица: очертания зрительных органов, носа, уст, позицию надбровных дуг.
3. Построение модели — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с стандартом — сформированный модель сравнивается с зафиксированной при регистрации биометрической информацией владельца.
5. Принятие определения — если совпадение достаточно высокое, смартфон деблокируется.

Любой из указанных этапов запрашивает специальных методов и усовершенствований для быстрой работы непосредственно на девайсе.

Технические компоненты: что находится в их недрах

Типичная селфи камера.

Самый простой вариант определения лица задействует лишь переднюю камеру смартфона мобильного устройства. Подобный способ реализован во различных доступных версиях Android-устройств.

Преимущества:

• Не нуждается в дополнительные датчиков.
• Быстро работает при качественном освещении.

Отрицательные стороны:

• Легко одурачить фотографией или видеозаписью.
• Плохо работает при слабом освещении или необычных точках зрения.

ИК фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс является основой Face ID от Apple.

Каким образом это действует:

• Точечный проекционный прибор показывает на лицо юзера невидимую решетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 точек).
• Инфракрасная камера фиксирует искривление данной решетки по плоскости лица.
• Формируется 3D карта глубины глубины, что почти невозможна для имитации стандартной фотографией или маской.

Преимущества

• Надёжная функционирование даже в полной неосвещённости.
• Большая сопротивляемость к подделкам.
• Точность определения более 99%.

Дополнительные датчики

В определённых девайсах применяются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые определяют период распространения луча до предмета и обратно; RGB-датчики дальности; специальные лазерные лидары для построения более аккуратной 3D-модели физиономии.

Эти инновации используются в основном во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искусственный интеллект в действии

Современные системы опознания лиц невозможны при отсутствии использования искусственного интеллекта и машинного обучения. Именно из-за таким технологиям, как вулкан россии, гаджет может распознавать юзера даже при изменениях внешности: новая причёска, растительность на лице, оптика или косметика не становятся барьером для открытия.

Распознавание физиономии

В начальном шаге программа необходимо оперативно распознать образ лица внутри целого снимка с камеры. Для этого задействуются многоуровневые классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы идентифицировать лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии обнаруживать облик даже при частичном закрытии (например, шарфом или ладонью).

Выделение ключевых моментов

После идентификации лица система, такая как вулкан россии, вычисляет расположение основных точек: края глаз, конец носа, контуры губ и так далее. Как правило применяется от 68 до 128 ключевых меток на лицевой области.

Данное необходимо для выравнивания изображения: если юзер удерживает мобильник под наклоненным, или склонил голову, программа исправляет изображение до обычного угла для дальнейшего анализа.

Создание биометрического идентификатора модели

Далее нейронная сеть строит компактное числовое представление („эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Этот шаблон весьма трудно подделать: он не хранит непосредственно картинку пользователя, а лишь уникальные черты его облика, что делает его идеальным для таких площадок, как vulkan russia.

Сравнительный анализ и осуществление выбора

В случае, когда юзер желает открыть смартфон глазами, программа повторяет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно выше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ не предоставляется.

Адаптация к трансформациям облика

Интересная черта современных систем — возможность самообучения. Если ты регулярно разблокируете смартфон с свежей прической или очками, система постепенно модернизирует основной шаблон вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Безопасность биометрических данных информации.

Большинство пользователи боятся сохранять свои био-идентификационные данные на смартфоне из-за угрозы потери данных или взлома устройства. Иные фирмы, например vulkan russia, предлагают варианты для повышения безопасности информации юзеров.

• Локальное сбережение: Большинство девайсов хранит биометричные шаблоны исключительно внутри защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают устройство и не доступны в том числе изготовителю.

• Шифрование: Все данные сохраняются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних разработчиков не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.

Стоит упомянуть важную особенность: если кто-то получит физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство производители реализуют систему защиты от автоматического разблокирования — например, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют виды распознавания лиц на изображениях?

Сегодня можно различить 3 главных способа к выполнению этой операции:

Программное двухмерное идентификация

Применяется только лицевая видеокамера без экстра датчиков глубины. Подобный способ используется наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость воплощения; низкая стоимость; быстрая деятельность при качественном свете.
Минусы: просто ввести в заблуждение фотографией; нестабильная функционирование ночью; низкая безопасность.

Аппаратное трёхмерное сканирование

Задействует инфракрасную видеокамеру + проектор пикселей + сенсоры дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: высокая достоверность; нельзя обмануть фото/видео; стабильная деятельность в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана („чёлка”)

Комбинированные подходы с интеграцией ИИ

Используют комбинацию программных методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам („anti-spoofing”). Например, такие товары, например вулкан россии и Google Pixel Face Unlock современных поколений, комбинируют фронталку c инфракрасным сенсором мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Иллюстрации эксплуатации разных техник

• iPhone модели X/11/12/13/14 применяют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил эквивалент Face ID среди Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное двухмерное определение по фото фронтальной камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro использует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Вопросы защиты и неверные тревоги

Несмотря на замечательный успехи инноваций за недавние лет, совершенных систем пока не имеется:

1. Шанс обмана: Доступные мобильники просто „разблокируются” качественной снимком владельца или роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные устройства могут ошибиться между монозиготными близнецами либо семьями с очень похожей внешностью.
3. Изменения облика: Внезапное похудение/увеличение массы тела, пластические операции или повреждения порой требуют обновления данных биометрических данных.
4. Условия фотографирования: Интенсивная освещённость солнечным светом или же плотная темнота могут снизить верность идентификации признаков.

Вот несколько подсказок для надёжному использованию:

• Для значимых операций всегда применяйте двухфакторную аутентификацию;
• Не включайте функцию „Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
• Регулярно апгрейдите прошивку телефона для предотвращения угроз от актуальных атак;
• Включайте настройку „Требовать распахнутых глаз” там, где она доступна.

Где также используется технология помимо смартфонов?

Хотя основная мысль данной публикации сосредоточена на именно мобильным устройствам, стоит упомянуть о альтернативных областях использования технологии:

• Управление входа в офисах и резиденциях;
• Платёжные терминалы банков („Face Pay”);
• Цифровые идентификационные документы современного поколения;
• Системы видеоконтроля городских сервисов;
• Автоматизация отслеживания явки школ/институтов;
• Вход пользователей персональных компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по фейсу („Face Pay”) — хватит пройти через турникет без карты или телефона! Схожие программы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как меняется технический процесс в нынешнее время?

Любой годик появляются новые мысли для улучшения качества работы систем распознавания лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше информации фиксируется камерой/датчиками глубины, тем меньше риск неточности;
2. Улучшаются нейронные сети — передовые архитектуры модели MobileNetV3 обеспечивают возможность скоростно обучаться новым чертам вида пользователя напрямую на гаджете без отправки данных в облако.
3. Развиваются методы антиспуфинга — теперь мобильные устройства способны распознавать настоящие живые лица от неподвижных фотографий/маскировок по микроскопическим движениям кожи.
4. Синхронизация со умными устройствами — умные часы могут авто закрыть доступ к мобильный телефон, если владелец удалился на значительное расстояние.
5. Появляются комбинированные механизмы — например комбинирующие аудио опознание + лицо + пальцевой отпечаток.

Итак, какие тренды особенно популярны на сегодняшний день:

1) Сокращение элементов

Производители пытаются уменьшить габариты прорези („чёлки”) под сенсоры на экране за счёт интеграции миниатюрных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для повышения приватности всё больше расчётов происходит локально без отправки данных во сторонний облачный услугу.

3) Унификация стандартов

Google интенсивно продвигает стандарт BiometricPrompt API, для того чтобы такие площадки, вроде вулкан россия, и любые Android-аппы могли работать с всеми формами биометрии стандартизированно.

Что решить на сегодня?

Если вам нужна предельная защита информации, выбирайте флагманские модели с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone всех новейших версий
• Huawei Companion/P серии
• Xiaomi Expert
• Vivo X линейки
• Оппо Найти Икс серий.

Если бюджет невелик – лучше выбирать обычным способам безопасности (PIN-код/сканер пальца), а возможность „разблокировка по лицу”, такую как в вулкан россия, использовать только как опциональную возможность комфорта.

Каким образом повысить комфорт работы возможности?

Есть несколько лайфхаков для пользователей, кто уже пользуется разблокировку по лицу:

1. Часто обновляйте свою фото-шаблон, если сильно меняется облик.
2. Не пренебрегайте чистить линзу фронтальной камеры – загрязнения могут понизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует камеру когда вы поднимаете его.
4. В процессе регистрационного процесса старайтесь сохранять лицевую часть неподвижно напротив видеоустройства без резкого наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от дисплея.

Перспективы прогресса техники

В предстоящие периоды можно предполагать развития полностью безконтактных способов идентификации человека сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + шаги + движения рук!

Также предполагается развитие новых способов защиты конфиденциальности – скажем, переменное изменение цифрового образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых интересных инноваций нашего времени! Она обеспечивает взаимодействие со мобильным устройством проще чем раньше, и такие приложения, как vulkan russia, могут значительно оптимизировать ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как функционирует эта методика внутри, – сможете осознаннее определять свой очередной девайс!