Каким образом работает распознавание лиц в мобильных устройствах

Почему мы предпочитаем разблокирование по фейсу

В последние времена определение лиц превратилось в одной из самых популярных опций для разблокировки смартфонов. Еще несколько годков ранее большинство использующих удовлетворялись PIN-кодами, паролями или сканерами отпечатков пальцев. Но при появлением подобных технологий, например Вулкан Платинум, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь делает эту конкретную особенность очень нужной? Прежде всего, это удобно: не нужно запоминать замысловатые пароли или находить верный палец в тьме. Также, это мгновенно: современные системы идентифицируют лицо буквально за мгновение. В-третью очередь, это чувство будущего — как будто в фильмах про казино Вулкан разведчиков.

Тем не менее за данной кажущейся несложностью таится весь мир трудных методов и инженерных концепций. Давайте исследовать, как конкретно действует распознавание лиц в современных смартфонах, какие применяются способы, насколько они защищены и что нас ожидает в будущем.

Краткая повествование прогресса техники

Распознавание лиц как технология имеется уже более 50 лет. Первые эксперименты автоматического исследования облика были сделаны еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины умели лишь выделять силуэты лица и вычислять расстояния между зрачками и устами на ахроматических изображениях.

Изначальные торговые платформы появились в девяностых годах, но они были далеки от совершенства: действовали неспешно и часто ошибались. Только с эволюцией нейронных сетей и таких площадок, как Vulkan Platinum, мощных мобильных чипов определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять свои решения.

Ключевые стадии действия системы идентификации

Процесс определения лица можно условно разделить на несколько важных этапов:

1. Идентификация лиц — аппарат выявляет наличие людского лица в кадре.
2. Определение характеристик — алгоритм изучает контуры лица: форму зрительных органов, носа, уст, позицию надбровных дуг.
3. Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со стандартом — полученный шаблон сверяется с сохранённой при учёте биометрической данными владельца.
5. Принятие решения — если совпадение достаточно значительное, смартфон деблокируется.

Любой из указанных стадий требует индивидуальных методов и оптимизаций для оперативной работы непосредственно на девайсе.

Аппаратные составляющие: что прячется внутри них

Стандартная фронтальная камера.

Простейший простой способ идентификации лица использует лишь фронтальную камеру смартфона. Данный подход внедрён во многочисленных бюджетных моделях Android-устройств.

Положительные стороны:

• Необходимо требует дополнительные сенсоров.
• Шустро действует при достаточном освещении.

Отрицательные стороны:

• Легко ввести в заблуждение фотографией или видеозаписью.
• Неудачно действует при плохом свете или непривычных ракурсах.

ИК фотокамера и точечный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика составляет базу Face ID от Apple.

Каким образом это работает:

• Точечный проектор показывает на облик юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 пятен).
• Инфракрасная устройство фиксирует деформацию данной решетки по поверхности физиономии.
• Создаётся трёхмерная карта глубины, что практически неподвластна для имитации типичной фото или маской.

Достоинства

• Надёжная работа даже в полной темноте.
• Высокая защита к фальсификациям.
• Точность определения свыше 99%.

Дополнительные сенсорные устройства

В отдельных девайсах используются также экстра датчики: ToF (Time-of-Flight), которые определяют время распространения света до цели и обратно; RGB-датчики дальности; специальные лазерные лидары для формирования более детализированной 3D-модели лица.

Эти инновации используются чаще всего во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: искусственный интеллект на работе

Современные системы идентификации физиономий немыслимы в отсутствие использования artificial intelligence и машинного обучения. Именно из-за таким разработкам, как Vulkan Platinum, гаджет может идентифицировать владельца даже при метаморфозах внешности: новая стрижка, борода, линзы или грим не становятся препятствием для разблокировки.

Распознавание физиономии

На стартовом этапе алгоритм должна быстро распознать ликовое изображение внутри целого изображения камеры. Для этой задачи используются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы находить лица людей среди множества других объектов.

Пример: алгоритм MTCNN может распознавать облик даже при неполном перекрытии (например, шалью или ладонью).

Определение основных моментов

После идентификации лица устройство, такая как Vulkan Platinum, определяет положение основных точек: края глаз, кончик носа, контуры губ и так далее. Часто используется от 68 до 128 ключевых маркеров на лицевой области.

Данное требуется для нормализации визуала: если юзер удерживает смартфон под наклоненным, или повернул головку, программа “выпрямляет” картинку до нормального состояния для последующего изучения.

Формирование биометрического шаблона

Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный формат очень затруднительно имитировать: он не сохраняет непосредственно фото пользователя, а лишь уникальные характеристики его облика, что делает его идеальным для таких платформ, как Вулкан Казино Платинум.

Сопоставление и принятие выбора

Когда человек хочет открыть смартфон глазами, программа повторяет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный порог (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ не предоставляется.

Приспособление к метаморфозам облика

Занимательная характеристика современных систем — возможность самостоятельного обучения. Если вы постоянно доступаете к смартфон с обновленной стрижкой или очками, система постепенно модернизирует базовый шаблон вашего лица для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрии данных.

Многие клиенты боятся сохранять свои биометрические данные на смартфоне из-за угрозы утечки данных или взлома гаджета. Определенные компании, вроде Вулкан Казино Платинум, предлагают варианты для увеличения сохранности сведений пользователей.

• Локальное сохранение: Преимущественно девайсов хранит биометрические образцы лишь внутрь защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из гаджет и не доступны включая изготовителю.

• Шифрование: Все данные сберегаются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения личности через системный API.

Следует отметить существенную особенность: в случае, если кто-либо сможет получить физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют защиту от неосознанного разблокирования — в частности, просят разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются категории распознавания лиц на изображениях?

В настоящее время можно определить три ключевых способа к выполнению этой функции:

Программируемое 2D идентификация

Применяется только фронтальная видеокамера без экстра сенсоров дистанции. Подобный метод наблюдается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность осуществления; умеренная цена; скоростная функционирование при хорошем освещении.
Минусы: легко ввести в заблуждение фотографией; неустойчивая деятельность ночью; недостаточная охрана.

Аппаратное трёхмерное сканирование

Применяет инфракрасную видеокамеру + проекционный модуль точек + датчики глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Достоинства: высокая достоверность; нельзя подделать фото/видео; устойчивая деятельность при любом освещении.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с ИИ-дополнением

Используют комбинацию софтверных методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как Vulkan Platinum и Google Pixel Face Unlock новейших поколений, сочетают фронталку c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Примеры использования разных способов

• iPhone серии X/11/12/13/14 применяют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые внедрил аналог Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как программное обеспечение плоское идентификацию по изображению селфи-камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro задействует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Проблемы охраны и неверные тревоги

Несмотря на поразительный прогресс техники за прошедшие лет, совершенных механизмов пока не существует:

1. Вероятность обмана: Доступные мобильники просто открываются качественной изображением хозяина или же видеозаписью с экрана другого устройства.
2. Идентичные двойняшки: Даже самые совершенные устройства могут перепутать между монозиготными близнецами либо семьями с очень похожей внешностью.
3. Изменения облика: Внезапное снижение веса/увеличение массы тела, косметические процедуры или повреждения в некоторых случаях необходимы для повторной регистрации биометрии.
4. Условия фотографирования: Интенсивная освещённость солнцем либо плотная затенение могут понизить аккуратность идентификации признаков.

Ниже некоторые рекомендаций по защищённому использованию:

• Для критически важных операций всегда используйте двухэтапную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Постоянно обновляйте ПО телефона для защиты от новых видов атак;
• Включайте функцию “Требовать открытых глаз” там, где она есть.

В каких областях ещё находится применение технологии помимо смартфонов?

Хотя основная мысль этой публикации сосредоточена на в частности мобильным устройствам, следует отметить прочих направлениях внедрения технологии:

• Контроль доступа в деловых центрах и жилых домах;
• Платёжные аппараты банков (“Face Pay”);
• Электронные удостоверения личности последнего типа;
• Системы видеоконтроля городских служб;
• Механизация учёта присутствия образовательных учреждений/университетов;
• Вход юзеров персональных компьютеров/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — достаточно пройти через турникет без пластика или мобильника! Похожие проекты осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом изменяется технический процесс в наше время?

Каждый год возникают современные идеи для повышения стандарта функционирования систем лицевого распознавания:

1. Увеличивается разрешение сенсорных устройств — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше риск неточности;
2. Улучшаются нейросети — передовые конструкции типа MobileNetV3 позволяют оперативно обучаться свежим особенностям облика обладателя напрямую на гаджете без отправки данных в облако.
3. Улучшаются методы антиспуфинга — теперь телефоны умеют отличать реальные движущиеся облики от неподвижных фото/масок по микроскопическим движениям кожи.
4. Взаимодействие со умными устройствами — умные часы могут самостоятельно закрыть доступ к смартфон, если пользователь ушёл далеко.
5. Проявляются гибридные механизмы — например объединяющие речевую аутентификацию + физиономию + пальцевой отпечаток.

Итак, те тенденции в особенности востребованы на сегодняшний день:

1) Уменьшение компонентов

Изготовители намереваются сократить размер выреза (“чёлки”) под сенсоры на дисплее за счёт встраивания компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для повышения приватности всё больше обработки данных происходит на месте без передачи информации во дополнительный облачный услугу.

3) Унификация норм

Гугл активно пропагандирует стандарт BiometricPrompt API, чтобы аналогичные площадки, например как Вулкан Платинум, и каждые Android-приложения могли взаимодействовать с различными типами биометрии унифицированно.

Какое решить на сегодня?

Когда тебе важна максимальная безопасность данных, подбирайте топовые модели с интегрированным ИК-излучателем или ToF-сенсором глубины.

• iPhone всех актуальных поколений
• Huawei Companion/P серии
• Mix Pro
• Vivo X серии
• Оппо Find Х серий.

Если бюджет ограничен – лучше выбирать обычным методам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как опциональную опцию комфорта.

Как улучшить удобство работы возможности?

Есть пара лайфхаков для людей, кто уже применяет разблокировку через лицо:

1. Периодически меняйте свою изображение-шаблон, если значительно трансформируется внешний вид.
2. Не пренебрегайте чистить линзу передней камеры – разводы могут снизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам включает камеру если вы берёте его в руки.
4. При записи старайтесь держать голову прямо впереди объектива не допуская сильного наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отворачиваетесь от дисплея.

Перспективы развития техники

В скоро наступающие годы можно предполагать появления полностью безконтактных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + речь + шаги + движения рук!

Также вероятно появление свежих подходов обеспечения личной информации – скажем, переменное корректировка диджитал шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных техник нашего времени! Она предоставляет взаимодействие со смартфоном удобнее чем раньше, и такие приложения, как Вулкан Казино Платинум, могут существенно повысить ваш юзерский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы знаете, как функционирует эта технология внутри, – сумеете вдумчиво подбирать свой следующий гаджет!