Как функционирует идентификация лицевых образов в смартфонах

Для чего мы предпочитаем разблокировку по лицу

В недавние времена идентификация физиономий превратилось в одной из самых распространённых возможностей для разблокировки смартфонов. Лишь несколько годов назад большинство юзеров обходились пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, как Вулкан Платинум, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что делает данную функцию такой востребованной? Для начала, это практично: не нужно удерживать в памяти сложные пароли или искать верный палец в темноте. Также, это оперативно: современные системы узнают лицо фактически за мгновения ока. В-третьих, это впечатление футуризма — будто в кинофильмах про vulkan platinum разведчиков.

Впрочем за данной видимой несложностью прячется целый вселенная трудных технологий и инженерных концепций. Позвольте нам разобраться, как именно работает идентификация по лицу в новейших смартфонах, какие существуют технологии, насколько они защищены и что нас предстоит.

Короткая хроника эволюции техники

Распознавание лиц как техника существует уже более 50 годов. Первые эксперименты автоматизированного исследования лиц были осуществлены еще в 1960-х годы в лабораториях США. Тогда компьютеры могли лишь выделять контуры лица и определять промежутки между зрачками и ртом на монохромных снимках.

Начальные торговые установки появились в 90-х, но они были неидеальны: работали медленно и часто давали сбои. Только с развитием синтетических сетей и таких платформ, как Vulkan Platinum, мощных мобильных процессоров распознавание лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным идентификацией лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные решения.

Ключевые стадии функционирования механизма определения

Процесс распознавания лица можно условно разделить на несколько ключевых этапов:

1. Распознавание лиц — устройство выявляет присутствие человеческого лица в изображении.
2. Извлечение признаков — система исследует контуры лица: форму глаз, носа, уст, положение бровей.
3. Построение модели — создаётся особенный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с стандартом — полученный образец сравнивается с сохранённой при учёте биометрической данными владельца.
5. Принятие выбора — если соответствие достаточно значительное, смартфон разблокируется.

Любой из этих этапов запрашивает особых процедур и оптимизаций для скорой работы прямо на устройстве.

Аппаратные элементы: что прячется внутри

Стандартная фронтальная камера.

Самый простой простой метод идентификации лица использует только фронтальную камеру смартфона. Такой метод осуществлён во различных бюджетных моделях Android-устройств.

Достоинства:

• Не требует дополнительных сенсоров.
• Быстро действует при качественном освещённости.

Минусы:

• Несложно обмануть снимком или видео.
• Плохо функционирует при низком освещённости или необычных углах обзора.

ИК фотокамера и пунктирный проектор

Более совершенные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.

Каким образом это работает:

• Точечный устройство проекции отображает на лицо юзера невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 точек).
• ИК устройство регистрирует деформацию данной сетки по плоскости лица.
• Формируется трёхмерная карта глубинности, которая почти что невозможна для фальсификации стандартной снимком или маской.

Достоинства

• Надёжная работа даже в полной тьме.
• Большая устойчивость к имитациям.
• Точность идентификации более 99%.

Добавочные датчики

В определённых устройствах применяются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время распространения света до предмета и обратно; Цветные-датчики глубины; специальные лазерные дальномеры для формирования более детализированной 3D-модели физиономии.

Эти разработки встречаются чаще всего во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искуственный ум на работе

Нынешние механизмы идентификации лиц неосуществимы при отсутствии эксплуатации искусственного интеллекта и машинного обучения. Именно вследствие таким инновациям, как Vulkan Platinum, устройство может узнавать владельца даже при изменениях облика: новая причёска, щетина, оптика или макияж не становятся препятствием для разблокировки.

Обнаружение физиономии

При стартовом этапе система должна мгновенно распознать ликовое изображение внутри полного кадра с камеры. Для этой задачи применяются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые натренированы находить лиц человека среди множества других объектов.

Пример: алгоритм MTCNN способен находить лицо даже в случае неполном перекрытии (например, шалью или ладонью).

Выделение основных точек

После обнаружения лица устройство, такая как Vulkan Platinum, определяет положение основных точек: уголки глаз, конец носа, границы губ и так далее. Как правило применяется от 68 до 128 главных точек на лицевой поверхности.

Это действие нужно для выравнивания изображения: если пользователь находится с мобильник под углом, или наклонил головку, программа « выпрямляет » картинку до нормального состояния для последующего изучения.

Создание биометрии образца

Далее искусственная сеть строит уплотненное математическое представление (« эмбеддинг ») облика пользователя — своеобразный цифровой « отпечаток » внешности длиной от 128 до 512 вещественных чисел.

Этот образец крайне трудно имитировать: он не хранит непосредственно фото пользователя, а лишь исключительные черты его внешности, что делает его идеальным для таких платформ, как Вулкан Казино Платинум.

Сопоставление и вынесение решения

В случае, когда пользователь желает разблокировать телефон глазами, программа повторяет все описанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый границу (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ блокируется.

Адаптация к изменениям облика

Увлекательная особенность современных систем — возможность самостоятельного обучения. Если вы постоянно разблокируете смартфон с обновленной прической или очками, алгоритм постепенно обновляет основной образец вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрических данных данных.

Множество юзеры опасаются сохранять свои биометрические идентификационные данные на мобильном устройстве из-за вероятности утечки информации или взлома гаджета. Иные организации, такие как Вулкан Казино Платинум, предлагают варианты для увеличения безопасности информации юзеров.

• Локальное сохранение: Основная часть девайсов записывает биометрические шаблоны исключительно внутри защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют аппарат и недоступны в том числе создателю.

• Шифрование: Все данные сберегаются только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы сторонних девелоперов не имеют непосредственного доступа к биометрическим данным; они могут лишь требовать факт верификации идентичности через системный API.

Необходимо подчеркнуть значимую особенность: в случае, если кто-то получит физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители реализуют защиту от автоматического разблокирования — в частности, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются категории определения лиц?

В настоящее время можно определить различить 3 главных подхода к выполнению этой задачи:

Программируемое плоское определение

Применяется только фронтальная видеокамера без дополнительных сенсоров дистанции. Этот способ наблюдается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость воплощения; низкая затраты; скоростная работа при качественном свете.
Минусы: легко ввести в заблуждение снимком; нестабильная работа ночью; низкая охрана.

Аппаратное объёмное сканирование

Применяет инфракрасную камеру + проектор точек + сенсоры глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: значительная надёжность; не получится обмануть фото/видео; стабильная деятельность при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (« чёлка »)

Комбинированные методы с дополнением ИИ

Задействуют комбинацию программируемых методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (« anti-spoofing »). Например, подобные товары, как Vulkan Platinum и Google Pixel Face Unlock современных поколений, объединяют фронталку c ИК сенсором мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Иллюстрации эксплуатации различных техник

• iPhone модели X/11/12/13/14 задействуют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID в ряду Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное 2D определение по снимку фронтальной камерой, так и сканер радужки глаза.
• Huawei Mate20 Pro применяет систему из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности безопасности и неверные срабатывания

Несмотря на замечательный успехи технологий за недавние лет, совершенных систем пока не существует:

1. Шанс мошенничества: Доступные телефоны без труда « разблокируются » качественной фотографией владельца или же видео с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые совершенные системы могут перепутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Трансформации облика: Стремительное снижение веса/увеличение массы тела, косметические процедуры или повреждения порой требуют обновления данных биометрических данных.
4. Условия фотографирования: Яркая подсветка солнцем либо интенсивная затенение могут снизить верность распознавания признаков.

Ниже несколько рекомендаций для защищённому применению:

• Для важных операций всегда используйте двухэтапную аутентификацию;
• Не активируйте функцию « Разблокировка по лицу » на недорогих аппаратах без ИК-сенсоров;
• Постоянно обновляйте прошивку прошивку мобильного устройства для предотвращения угроз от актуальных атак;
• Включайте настройку « Требовать открытых глаз » везде, где она доступна.

В каких областях дополнительно применяется технология кроме смартфонов?

Несмотря на то, что тема данной работы касается в частности смартфонам и планшетам, стоит упомянуть о других сферах применения технологии:

• Управление входа в деловых центрах и резиденциях;
• Платёжные устройства финансовых учреждений (« Face Pay »);
• Виртуальные паспорта нового поколения;
• Системы видеонаблюдения муниципальных служб;
• Механизация отслеживания явки учебных заведений/институтов;
• Вход юзеров персональных компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по лицу (« Face Pay ») — достаточно пройти через турникет без карты или мобильника! Схожие инициативы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом меняется технический процесс в наше время?

Каждый годочек проявляются современные концепции для усовершенствования качества деятельности систем распознавания лиц:

1. Увеличивается детализация сенсорных устройств — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше вероятность неточности;
2. Улучшаются нейронные сети — новейшие конструкции модели MobileNetV3 дают возможность быстро осваивать свежим чертам вида обладателя непосредственно на девайсе без отправки данных в облако.
3. Развиваются методы антиспуфинга — теперь мобильные устройства могут различать реальные анимированные лица от неподвижных снимков/масок по микроскопическим микродвижениям.
4. Интеграция со умными устройствами — смарт-часы могут автоматически блокировать телефон, если обладатель удалился на значительное расстояние.
5. Проявляются комбинированные устройства — к примеру совмещающие речевую идентификацию + физиономию + дактилоскопический след.

Итак, какие тенденции очень востребованы в данный момент:

1) Миниатюризация деталей

Производители пытаются минимизировать размер выреза (« чёлки ») под сенсоры на экране за счёт внедрения компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для увеличения конфиденциальности всё больше вычислений выполняется на месте без отправки информации во внешний облачный сервис.

3) Стандартизация стандартов

Гугл энергично продвигает эталон BiometricPrompt API, для того чтобы подобные платформы, например как Вулкан Платинум, и каждые Android-приложения были совместимы с различными типами биометрии стандартизированно.

Какое выбрать сегодня?

Если вам нужна максимальная безопасность информации, остановите выбор на передовые модели с вмонтированным ИК-проектором или же ToF-датчиком глубины.

• iPhone каждого актуальных поколений
• Huawei Mate/Series P ряда
• Mix Pro
• Vivo X линейки
• Oppo Обнаружить Х серии.

Если средства ограничен – лучше предпочесть традиционным методам безопасности (PIN-код/сканер пальца), а опцию « разблокировка по лицу », такую как в Вулкан Платинум, использовать только как дополнительную возможность удобства.

Каким способом повысить удобство работы функции?

Есть пара хитростей для людей, кто уже использует разблокировку по лицу:

1. Периодически меняйте свою изображение-шаблон, если кардинально трансформируется внешность.
2. Не пренебрегайте очищать линзу передней камеры – пятна могут снизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам активирует фотоаппарат когда вы поднимаете его.
4. При регистрации пытайтесь держать лицо неподвижно впереди объектива не допуская сильного наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отворачиваетесь от экрана.

Возможности прогресса технологии

В предстоящие времена можно ожидать возникновения полностью безконтактных способов распознавания персоны сразу по нескольким биометрическим параметрам одновременно: физиономия + голос + манера ходьбы + движения рук!

Также вероятно возникновение свежих подходов охраны личной информации – например, динамическое корректировка электронного образца после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее интересных инноваций нашего эпохи! Она предоставляет взаимодействие со телефоном комфортнее чем когда-либо прежде, и такие аппы, как Вулкан Казино Платинум, могут в разы улучшить ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как работает эта система изнутри, – будете в состоянии осознаннее определять свой очередной устройство!