Каким образом работает распознавание лицевых образов в телефонах

Зачем мы предпочитаем разблокирование по лицевому распознаванию

В прошлые годы распознавание физиономий стало одной из самых популярных возможностей для деблокировки смартфонов. Лишь несколько лет ранее большинство юзеров удовлетворялись пин-кодами, паролями или датчиками отпечатков пальцев. Но с появлением подобных технологий, как Вулкан Платинум, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что делает эту конкретную особенность такой востребованной? Во-первых, это комфортно: не нужно запоминать сложные пароли или отыскивать нужный палец в мраке. Кроме того, это оперативно: современные системы идентифицируют лицо практически за мгновение. В-третью очередь, это чувство будущего — как будто в кинолентах про казино Вулкан агентов.

Тем не менее за данной на первый взгляд несложностью прячется целый универсум трудных технологий и инженерных концепций. Давайте разобраться, как именно действует фейсканирование в современных смартфонах, какие бывают методы, насколько они надёжны и что нас ожидает в будущем.

Сжатая история развития технологии

Распознавание лиц как методика существует уже более пятидесяти годов. Начальные пробы автоматизированного анализа лиц были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда ЭВМ способны были лишь обозначать контуры черепа и определять промежутки между глазами и устами на монохромных снимках.

Начальные бизнес установки стали доступны в 90-х, но они были неидеальны: функционировали медленно и часто ошибались. Только с прогрессом искусственных сетей и таких платформ, как Vulkan Platinum, сильных мобильных процессоров распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные решения.

Основные этапы действия системы идентификации

Процесс определения лица можно ориентировочно разделить на несколько важных этапов:

1. Распознавание лиц — камера выявляет присутствие гуманного лица в кадре.
2. Извлечение особенностей — алгоритм изучает особенности лица: конфигурацию глаз, носа, губ, положение бровей.
3. Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с стандартом — созданный модель сопоставляется со сохранённой при внесении биометрической сведениями владельца.
5. Принятие выбора — если сходство достаточно существенное, смартфон разблокируется.

Всякий из данных шагов нуждается в индивидуальных методов и оптимизаций для скорой работы непосредственно на девайсе.

Железные составляющие: что скрыто внутри них

Типичная фронтальная камера.

Самый простой несложный вариант идентификации облика применяет только фронтальную камеру мобильного устройства. Подобный способ осуществлён во многих бюджетных моделях Android-девайсов.

Плюсы:

• Необходимо требует дополнительных датчиков.
• Оперативно работает при достаточном свете.

Минусы:

• Просто одурачить фотографией или видео.
• Неудачно функционирует при плохом освещённости или нестандартных ракурсах.

ИК камера и пунктирный проектор

Более продвинутые системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология лежит в основе Face ID от Apple.

Каким способом это функционирует:

• Точечный проектор показывает на физиономию использующего невидимую решетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
• Инфракрасная устройство записывает деформацию данной сетки по плоскости физиономии.
• Получается 3D карта глубины глубинности, которая практически неосуществима для имитации обычной фото или маской.

Преимущества

• Надёжная деятельность даже в полной неосвещённости.
• Сильная устойчивость к подделкам.
• Точность идентификации выше 99%.

Дополнительные сенсорные устройства

В определённых устройствах применяются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время распространения луча до объекта и обратно; RGB-датчики дальности; специальные световые измерители расстояния для создания более аккуратной 3D-модели физиономии.

Эти разработки используются чаще всего во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный ум в действии

Текущие механизмы опознания физиономий неосуществимы при отсутствии применения ИИ и машинного обучения. Именно вследствие таким инновациям, как Vulkan Platinum, гаджет способно узнавать пользователя даже при изменениях внешнего вида: новая укладка, растительность на лице, оптика или косметика не становятся помехой для деблокировки.

Обнаружение лица

На стартовом шаге система необходимо мгновенно найти образ лица в пределах целого снимка камеры. Для данной цели задействуются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены находить лиц человека среди множества других объектов.

Пример: метод MTCNN может распознавать лицо даже при частичном закрытии (например, платком или рукой).

Выделение важных моментов

После распознавания лица устройство, такая как Vulkan Platinum, определяет местоположение ключевых точек: уголки глаз, кончик носа, контуры губ и так далее. Обычно применяется от 68 до 128 основных маркеров на лицевой поверхности.

Это действие необходимо для выравнивания изображения: если человек находится с мобильник под наклоном, или наклонил головку, программа корректирует картинку до обычного угла для дальнейшего анализа.

Создание биометрического идентификатора образца

Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Такой шаблон очень затруднительно подделать: он не хранит непосредственно картинку пользователя, а лишь особенные черты его облика, что делает его идеальным для таких площадок, как Вулкан Казино Платинум.

Сравнение и принятие заключения

В случае, когда юзер намеревается открыть смартфон глазами, программа осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый порог (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ запрещается.

Приспособление к изменениям внешнего вида

Интересная особенность нынешних системы — способность самообучения. Если вы регулярно разблокируете смартфон с обновленной укладкой или оптикой, программа постепенно освежает эталонный образец вашего облика для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрических данных информации.

Множество юзеры беспокоятся держать свои био-идентификационные данные на мобильном устройстве из-за вероятности потери данных или хакерской атаки. Иные компании, например Вулкан Казино Платинум, предлагают методы для улучшения защиты сведений пользователей.

• Локальное сбережение: Большинство девайсов хранит био-идентификационные образцы только внутри защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из гаджет и недоступны даже производителю.

• Шифрование: Все сведения сберегаются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних разработчиков не обладают прямого возможности доступа к биометрическим данным; они могут лишь требовать подтверждение верификации идентичности через системный API.

Следует упомянуть существенную подробность: в случае, если кто-либо получит доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство производители реализуют меры безопасности от “слепого” разблокирования — в частности, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы идентификации лиц?

В настоящее время можно выделить различить три основных подхода к реализации этой задачи:

Программируемое 2D распознавание

Используется только фронтальная видеокамера без дополнительных детекторов дистанции. Этот способ встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость воплощения; минимальная затраты; скоростная работа при качественном освещении.
Минусы: просто ввести в заблуждение фотографией; неустойчивая функционирование ночью; слабая безопасность.

Аппаратное трёхмерное сканирование

Использует ИК видеокамеру + проекционный модуль пикселей + сенсоры дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: большая достоверность; невозможно исказить изображение/видеозапись; стабильная работа в любых условиях освещения.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с интеграцией ИИ

Задействуют комбинацию софтверных методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например Vulkan Platinum и Google Pixel Face Unlock новейших поколений, объединяют фронталку c инфракрасным сенсором мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Примеры использования разнообразных способов

• iPhone модели X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз внедрил аналог Face ID в ряду Android.
• Samsung Galaxy S10/S20 поддерживают как программное 2D идентификацию по фото селфи-камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro применяет набор из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности защиты и неверные срабатывания

Несмотря на замечательный успехи технологий за прошедшие годы, безупречных систем пока не существует:

1. Возможность подвоха: Бюджетные смартфоны просто доступны четкой изображением хозяина или же видео с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные системы могут спутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Трансформации внешности: Стремительное похудение/набор веса, хирургические вмешательства или травмы иногда необходимы для обновления данных биометрических данных.
4. Условия съёмки: Интенсивная подсветка солнечным светом либо интенсивная темнота могут понизить точность определения признаков.

Ниже пара советов для надёжному эксплуатации:

• Для значимых операций всегда используйте двухфакторную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Постоянно обновляйте прошивку ПО мобильного устройства для защиты от современных угроз;
• Включайте функцию “Требовать распахнутых глаз” там, где она доступна.

Где дополнительно применяется технология кроме мобильных телефонов?

Хотя основная мысль данной публикации сосредоточена на в частности мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:

• Мониторинг доступа в офисах и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Электронные паспорта современного поколения;
• Комплексы видеоконтроля городских сервисов;
• Механизация регистрации присутствия школ/университетов;
• Авторизация пользователей ПК/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через турникет без карты или телефона! Схожие инициативы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом меняется техпроцесс сегодня?

Каждый годочек проявляются свежие мысли для усовершенствования уровня работы систем лицевого распознавания:

1. Увеличивается чёткость сенсоров — чем больше деталей фиксируется видеокамерой/датчиками глубины, тем меньше вероятность погрешности;
2. Совершенствуются нейронные сети — современные структуры типа MobileNetV3 дают возможность быстро адаптироваться к свежим характеристикам вида пользователя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Развиваются способы антиспуфинга — теперь телефоны способны отличать реальные анимированные лица от фиксированных снимков/маскировок по мельчайшим микродвижениям.
4. Синхронизация со смарт-гаджетами — смарт-часы могут авто закрыть доступ к смартфон, если обладатель ушёл далеко.
5. Возникают комбинированные устройства — например комбинирующие речевую идентификацию + физиономию + отпечаток пальца.

Итак, те тенденции очень популярны в данный момент:

1) Миниатюризация элементов

Изготовители стараются минимизировать размер прорези (“чёлки”) для датчики на дисплее за счёт интеграции миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения конфиденциальности всё больше расчётов происходит локально без передачи данных во внешний облачный сервис.

3) Упорядочивание норм

Гугл энергично продвигает стандарт BiometricPrompt API, для того чтобы подобные системы, вроде Вулкан Платинум, и каждые Android-программы могли взаимодействовать с любыми видами биометрии стандартизированно.

Какое выбрать на сегодня?

Когда вам необходима предельная защита информации, выбирайте топовые аппараты с интегрированным ИК-излучателем или ToF-сенсором глубины.

• iPhone каждого последних поколений
• Huawei Mate/P серии
• Xiaomi Pro
• Vivo X модели
• Oppo Найти X линейки.

Если средства ограничен – лучше предпочесть классическим средствам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как опциональную опцию удобства.

Как улучшить удобство использования функции?

Есть пара советов для тех, кто уже применяет разблокировку через лицо:

1. Регулярно обновляйте свою фото-шаблон, если сильно меняется внешность.
2. Не забывайте очищать линзу фронтальной камеры – пятна могут понизить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам включает камеру как только вы поднимаете его.
4. При записи пытайтесь удерживать лицо неподвижно впереди объектива исключая значительного наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвернулись от дисплея.

Будущее развития техники

В скоро наступающие времена можно предвкушать возникновения полностью дистанционных способов опознания персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + голос + шаги + жесты рук!

Также предполагается появление новых способов защиты личной информации – к примеру, изменяющееся корректировка цифрового образца после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень интересных технологий нашего периода! Она делает общение со мобильным устройством комфортнее чем до этого, и такие программы, как Вулкан Казино Платинум, могут значительно оптимизировать ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как работает эта методика внутри, – будете в состоянии вдумчиво подбирать свой очередной девайс!