Каким образом действует распознавание лицевых образов в мобильных устройствах

Для чего мы предпочитаем разлочивание по лицу

В недавние времена определение лиц стало одной из наиболее востребованных функций для деблокировки мобильных телефонов. Еще пару лет ранее основная часть пользователей обходились PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением подобных технологий, например cabura, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что обуславливает эту конкретную функцию такой востребованной? Для начала, это удобно: не нужно помнить замысловатые пароли или находить верный палец в темноте. Кроме того, это мгновенно: современные программы узнают лицо фактически за мгновения ока. В-третьих, это ощущение футуристичности — словно в кинофильмах про кабура шпионов.

Однако за этой на первый взгляд простотой таится весь мир трудных методов и инженерных решений. Попробуем исследовать, как конкретно работает идентификация по лицу в актуальных смартфонах, какие бывают способы, насколько они надёжны и что нас предстоит.

Краткая повествование эволюции технологии

Распознавание лиц как техника существует уже более 50 лет. Начальные пробы автоматизированного исследования лиц были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда ЭВМ умели лишь выделять контуры лица и определять промежутки между очами и ртом на черно-белых снимках.

Начальные торговые платформы стали доступны в 90-х, но они были неидеальны: действовали неспешно и часто давали сбои. Только с прогрессом искусственных сетей и таких платформ, как кабура, высокопроизводительных мобильных микросхем определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои разработки.

Главные стадии работы механизма определения

Процесс идентификации лица можно условно разделить на несколько ключевых этапов:

1. Распознавание лиц — устройство выявляет наличие людского лица в снимке.
2. Извлечение признаков — система изучает особенности физиономии: конфигурацию глаз, обонятельного органа, уст, позицию бровей.
3. Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с стандартом — полученный модель сверяется со зафиксированной при регистрации биометрической сведениями владельца.
5. Принятие решения — если сходство достаточно существенное, смартфон разблокируется.

Каждый из данных шагов требует особых процедур и улучшений для быстрой работы прямо на устройстве.

Железные составляющие: что прячется в их недрах

Типичная селфи камера.

Самый простой легкий вариант распознавания облика задействует лишь фронтальную видеокамеру мобильного устройства. Такой метод осуществлён во различных доступных моделях Android-девайсов.

Сильные стороны:

• Не требует дополнительных датчиков.
• Быстро функционирует при качественном свете.

Минусы:

• Легко ввести в заблуждение изображением или видео.
• Плохо функционирует при низком освещённости или непривычных точках зрения.

ИК камера и пунктирный проектор

Более продвинутые системы, такие как кабура, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Каким образом это функционирует:

• Точечный проекционный прибор проецирует на лицо использующего невидимую решетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 меток).
• Инфракрасная устройство регистрирует изменение формы данной сетки по поверхности физиономии.
• Создаётся трёхмерная карта глубины глубинности, что почти неподвластна для имитации стандартной фото или маской.

Плюсы

• Надёжная функционирование даже в полной неосвещённости.
• Большая защита к имитациям.
• Точность определения выше 99%.

Дополнительные датчики

В отдельных девайсах применяются также экстра сенсоры: ToF (Time-of-Flight), которые измеряют период движения света до цели и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для создания более точной 3D-модели физиономии.

Эти инновации используются чаще всего во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искусственный интеллект в работе

Текущие механизмы идентификации лиц невозможны при отсутствии применения искусственного интеллекта и машинного обучения. Именно благодаря таким разработкам, как кабура, аппарат может распознавать юзера даже при трансформациях внешнего вида: новая укладка, растительность на лице, очки или грим не становятся барьером для разблокировки.

Обнаружение лиц

При первом этапе программа должна быстро найти ликовое изображение среди целого снимка камеры. Для данной цели задействуются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы находить лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии находить облик даже в случае частичном перекрытии (например, платком или рукой).

Идентификация ключевых моментов

После идентификации лица система, такая как кабура, устанавливает положение главных точек: уголки глаз, верхушка носа, границы губ и так далее. Часто используется от 68 до 128 основных меток на лице.

Данное нужно для нормализации картинки: если пользователь держит смартфон под наклоненным, или повернул голову, программа корректирует изображение до стандартного положения для дальнейшего анализа.

Построение биометрического идентификатора модели

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Этот образец очень трудно имитировать: он не хранит непосредственно фото пользователя, а лишь исключительные особенности его внешности, что делает его оптимальным для таких платформ, как кабура казино.

Сопоставление и осуществление заключения

В случае, когда человек намеревается разблокировать телефон глазами, программа осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ блокируется.

Привыкание к изменениям внешнего вида

Занимательная черта нынешних систем — возможность самостоятельного обучения. Если ты часто доступаете к телефон с свежей прической или оптикой, алгоритм постепенно освежает основной шаблон вашего облика для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрических данных данных.

Многие пользователи боятся сохранять свои био-идентификационные данные на телефоне из-за риска потери данных или взлома гаджета. Определенные компании, такие как кабура казино, предлагают решения для улучшения защиты данных клиентов.

• Локальное сохранение: Преимущественно устройств хранит био-идентификационные модели исключительно внутрь защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не покидают гаджет и не доступны даже изготовителю.

• Шифрование: Все информация сберегаются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних девелоперов не имеют непосредственного возможности доступа к биометрическим; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Необходимо отметить значимую подробность: если какой-то человек сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство производители внедряют защиту от “слепого” разблокирования — к примеру, просят разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие имеются виды определения лиц на изображениях?

На сегодняшний день можно выделить выделить 3 ключевых метода к осуществлению этой задачи:

Программное плоское распознавание

Эксплуатируется только передняя видеокамера без вспомогательных датчиков глубины. Такой подход наблюдается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота осуществления; минимальная стоимость; быстрая деятельность при хорошем освещении.
Минусы: просто ввести в заблуждение снимком; нестабильная работа ночью; низкая защищенность.

Техническое объёмное сканирование

Задействует инфракрасную камеру + проектор пикселей + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: значительная надёжность; не получится исказить изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с ИИ-дополнением

Используют комбинацию программируемых методов + аппаратную обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, как кабура и Google Pixel Face Unlock современных поколений, комбинируют фронтальную камеру c ИК сенсором мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями чужих устройств.

Примеры использования различных способов

• iPhone модели X/11/12/13/14 применяют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 поддерживают как софтверное двухмерное идентификацию по снимку селфи-камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro использует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Трудности охраны и ложные срабатывания

Несмотря на поразительный прогресс инноваций за недавние годы, совершенных систем пока не имеется:

1. Шанс обмана: Недорогие мобильники просто доступны качественной изображением хозяина или же видео с экрана другого устройства.
2. Идентичные двойняшки: Даже самые идеальные механизмы могут перепутать между однояйцевыми близнецами либо родичами с очень похожей внешностью.
3. Изменения внешнего вида: Резкое похудение/набор веса, пластические операции либо повреждения порой необходимы для обновления данных биометрических данных.
4. Условия записи: Сильная подсветка солнцем или плотная темнота могут уменьшить аккуратность идентификации признаков.

Вот пара рекомендаций по защищённому эксплуатации:

• Для значимых операций всегда применяйте дополнительную аутентификацию;
• Не активируйте возможность “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Систематически обновляйте программное обеспечение мобильного устройства для предотвращения угроз от актуальных атак;
• Включайте настройку “Требовать распахнутых глаз” везде, где она есть.

Где ещё применяется технология за исключением мобильных телефонов?

Хотя основная мысль нашей публикации касается в частности мобильным устройствам, стоит упомянуть о альтернативных областях использования технологии:

• Мониторинг входа в деловых центрах и резиденциях;
• Платёжные терминалы банков (“Face Pay”);
• Цифровые паспорта современного образца;
• Системы видеомониторинга городских подразделений;
• Механизация отслеживания посещаемости учебных заведений/вузов;
• Вход участников компьютеров/ноутбуков.

Например: В столичном метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или телефона! Аналогичные инициативы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как меняется технология сегодня?

Любой годик возникают современные концепции для улучшения уровня деятельности систем распознавания лиц:

1. Увеличивается чёткость сенсоров — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс неточности;
2. Улучшаются искусственные интеллекты — передовые архитектуры модели MobileNetV3 обеспечивают возможность быстро обучаться дополнительным характеристикам вида владельца непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Развиваются способы антиспуфинга — теперь мобильные устройства могут распознавать подлинные анимированные лица от неподвижных снимков/маскировок по мельчайшим движениям кожи.
4. Интеграция со интеллектуальными приборами — смарт-часы могут автоматически заблокировать смартфон, если пользователь отошёл далеко.
5. Появляются гибридные устройства — к примеру объединяющие аудио опознание + физиономию + дактилоскопический след.

Вот, какие направления в особенности актуальны в данный момент:

1) Сокращение компонентов

Компании пытаются сократить габариты выреза (“чёлки”) для датчики на дисплее за счёт внедрения миниатюрных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на аппарате

Для повышения личной безопасности всё более вычислений осуществляется внутри устройства без передачи данных во сторонний облачный сервис.

3) Упорядочивание норм

Google активно продвигает эталон BiometricPrompt API, для того чтобы аналогичные площадки, например как cabura, и любые Android-программы были совместимы с любыми видами биометрии унифицированно.

Какое решить на сегодня?

В случае если тебе важна наивысшая сохранность информации, подбирайте передовые модели со встроенным ИК-излучателем или ToF-датчиком глубины.

• iPhone всех существующих актуальных моделей
• Huawei Mate/P серии
• Mi Pro
• Vivo X линейки
• Oppo Find X серий.

Если финансы скромен – лучше отдавать предпочтение традиционным методам защиты (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в cabura, применять только как опциональную возможность комфорта.

Каким образом повысить удобство работы возможности?

Есть несколько хитростей для пользователей, кто уже использует разблокировку через лицо:

1. Периодически меняйте свою изображение-шаблон, если значительно изменяется внешность.
2. Не забывайте очищать объектив фронтальной камеры – пятна могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам активирует камеру когда вы берёте его в руки.
4. При записи старайтесь держать лицо прямо перед камеры не допуская сильного наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвели взгляд от экрана.

Возможности развития инноваций

В скоро наступающие времена можно предвкушать появления полностью безконтактных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + голос + манера ходьбы + манипуляции руками!

Также вероятно развитие новых методов обеспечения конфиденциальности – к примеру, переменное изменение цифрового образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых интересных технологий нашего эпохи! Она делает интеракцию со мобильным устройством проще чем раньше, и такие программы, как кабура казино, могут значительно улучшить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как устроена эта система внутри, – сможете более осмысленно подбирать свой очередной устройство!