Каким образом работает распознавание лиц в телефонах

Зачем мы предпочитаем разблокирование по лицу

В последние годы идентификация лиц является одной из наиболее востребованных функций для деблокировки мобильных телефонов. Еще некоторые годов ранее основная часть пользователей довольствовались пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, как admiral x, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь обуславливает данную функцию такой востребованной? Прежде всего, это практично: не нужно запоминать сложные пароли или отыскивать правильный палец в темноте. Также, это оперативно: современные алгоритмы идентифицируют лицо буквально за мгновение. В-третьем пункте, это впечатление футуризма — словно в фильмах про адмирал х казино агентов.

Впрочем за данной кажущейся легкостью прячется целый вселенная сложных технологий и инженерных решений. Позвольте нам исследовать, как именно действует распознавание лиц в новейших смартфонах, какие существуют методы, насколько они защищены и что нас ожидает в будущем.

Краткая история эволюции техники

Распознавание лиц как технология присутствует уже более пятидесяти лет. Изначальные пробы машинного изучения облика были сделаны еще в 1960-х годах в лабораториях США. Тогда вычислительные машины способны были лишь выделять контуры черепа и измерять дистанции между зрачками и устами на ахроматических снимках.

Начальные торговые установки появились в 90-х, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с эволюцией искусственных сетей и таких платформ, как адмирал х, сильных мобильных процессоров распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали интегрировать личные решения.

Ключевые шаги работы системы определения

Процесс распознавания лица можно условно сегментировать на несколько основных этапов:

1. Распознавание лиц — камера распознает присутствие человеческого лица в изображении.
2. Извлечение особенностей — механизм исследует черты физиономии: очертания зрительных органов, обонятельного органа, губ, расположение надбровных дуг.
3. Построение шаблона — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — полученный модель сверяется с сохранённой при внесении биометрической информацией владельца.
5. Принятие выбора — если сходство достаточно существенное, смартфон разблокируется.

Каждый из данных стадий нуждается в особых процедур и оптимизаций для скорой работы непосредственно на девайсе.

Железные элементы: что находится внутри них

Типичная передняя камера.

Самый простой простой вариант определения облика применяет исключительно фронтальную камеру смартфона. Данный способ внедрён во многих доступных версиях Android-девайсов.

Достоинства:

• Не потребляет дополнительных сенсоров.
• Шустро работает при достаточном освещении.

Отрицательные стороны:

• Просто обмануть изображением или роликом.
• Неудачно действует при слабом освещённости или необычных углах обзора.

Инфракрасная камера и пунктирный проектор

Более усовершенствованные системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс лежит в основе Face ID от Apple.

Каким способом это работает:

• Точечный проектор проецирует на лицо юзера невидимую сетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 меток).
• Инфракрасная устройство фиксирует искривление этой сетки по плоскости физиономии.
• Формируется 3D глубинная карта глубины, что почти что неосуществима для подделки обычной снимком или маскировкой.

Преимущества

• Надёжная деятельность даже в полной темноте.
• Большая устойчивость к фальсификациям.
• Точность распознавания более 99%.

Добавочные сенсоры

В некоторых девайсах задействуются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют период движения света до объекта и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для создания более аккуратной 3D-модели физиономии.

Эти технологии применяются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искусственный интеллект в исполнении

Современные устройства распознавания лиц немыслимы без эксплуатации artificial intelligence и machine learning. Именно из-за таким разработкам, как адмирал х, гаджет в состоянии идентифицировать юзера даже при метаморфозах внешности: новая причёска, борода, оптика или макияж не становятся препятствием для разблокировки.

Обнаружение лица

При первом стадии программа должна мгновенно найти ликовое изображение внутри полного снимка с камеры. Для этого используются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы распознавать человеческие лица среди множества других объектов.

Пример: метод MTCNN способен находить лицо даже с частичном закрытии (например, шалью или ладонью).

Определение важных точек

После распознавания лица устройство, такая как адмирал х, вычисляет местоположение ключевых точек: края глаз, кончик носа, края губ и так далее. Обычно задействуется от 68 до 128 главных меток на лицевой поверхности.

Данное необходимо для выравнивания изображения: если юзер находится с смартфон под углом, или склонил голову, программа корректирует изображение до нормального состояния для последующего изучения.

Формирование биометрического модели

Далее нейронная сеть строит компактное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Этот формат крайне затруднительно сфальсифицировать: он не сохраняет непосредственно фото юзера, а лишь уникальные особенности его облика, что делает его оптимальным для таких платформ, как admiral-x.

Сравнение и принятие заключения

Когда юзер желает открыть смартфон глазами, система воспроизводит все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый порог (обычно превышает 99%), телефон, как и платформа admiral-x, разблокируется; если нет — доступ запрещается.

Адаптация к метаморфозам внешнего вида

Увлекательная особенность актуальных системы — способность самостоятельного обучения. Если ты часто открываете смартфон с новой стрижкой или оптикой, алгоритм постепенно модернизирует базовый шаблон вашего внешности для повышения точности работы без снижения уровня безопасности.

Защита биометрических данных данных.

Большинство юзеры опасаются держать свои биометрические идентификационные данные на телефоне из-за риска потери данных или хакерской атаки. Иные компании, такие как admiral-x, предлагают решения для увеличения безопасности информации юзеров.

• Локальное хранение: Большинство девайсов сохраняет био-идентификационные модели лишь внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют аппарат и недоступны в том числе создателю.

• Шифрование: Все информация сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Приложения третьих разработчиков не имеют прямого доступа к биометрическим; они могут лишь требовать факт верификации идентичности через системный API.

Следует отметить существенную особенность: если кто-либо сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители внедряют меры безопасности от “слепого” разблокирования — например, заставляют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют категории идентификации лиц на изображениях?

В настоящее время можно определить 3 основных подхода к реализации этой задачи:

Программное двухмерное идентификация

Используется только лицевая видеокамера без вспомогательных сенсоров дистанции. Этот подход встречается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность реализации; низкая стоимость; оперативная функционирование при хорошем освещении.
Минусы: легко ввести в заблуждение фотографией; нестабильная деятельность ночью; недостаточная безопасность.

Техническое трёхмерное оцифровка

Применяет инфракрасную видеокамеру + проектор пикселей + сенсоры дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: значительная достоверность; не получится исказить изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с дополнением ИИ

Используют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например адмирал х и Google Pixel Face Unlock новейших поколений, объединяют фронтальную камеру c инфракрасным датчиком движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации применения разнообразных техник

• iPhone серии X/11/12/13/14 применяют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз предложил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 имеют как программное обеспечение плоское определение по фото фронтальной камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и неверные сигналы

Несмотря на замечательный развитие техники за последние годы, совершенных механизмов пока не имеется:

1. Шанс мошенничества: Недорогие телефоны просто “разблокируются” качественной фотографией хозяина или роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые идеальные системы могут перепутать между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Трансформации облика: Резкое снижение веса/набор веса, пластические операции или повреждения иногда необходимы для повторной регистрации биометрических данных.
4. Условия фотографирования: Интенсивная освещённость солнечным светом либо глубокая затенение могут понизить аккуратность идентификации признаков.

Здесь некоторые рекомендаций по надёжному использованию:

• Для важных операций всегда используйте дополнительную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Регулярно обновляйте ПО смартфона для предотвращения угроз от современных угроз;
• Включайте функцию “Требовать раскрытых глаз” везде, где она доступна.

Где ещё находится применение технологии кроме мобильных телефонов?

Пускай предмет данной работы посвящена именно мобильным устройствам, необходимо сказать о альтернативных областях использования технологии:

• Контроль прохода в рабочих помещениях и жилых домах;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Электронные идентификационные документы последнего поколения;
• Установки видеонаблюдения городских подразделений;
• Автоматизация отслеживания присутствия школ/институтов;
• Вход пользователей компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без пластика или мобильника! Схожие программы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как изменяется технический процесс сегодня?

Каждый годик проявляются новые идеи для повышения уровня работы систем лицевого распознавания:

1. Увеличивается чёткость сенсорных устройств — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше риск неточности;
2. Совершенствуются нейронные сети — новейшие структуры типа MobileNetV3 позволяют быстро адаптироваться к новым чертам облика пользователя прямо на устройстве без пересылки информации в облачное хранилище.
3. Развиваются способы антиспуфинга — теперь телефоны могут различать реальные анимированные лица от фиксированных фото/масок по микроскопическим движениям кожи.
4. Синхронизация со смарт-гаджетами — смарт-часы могут самостоятельно закрыть доступ к телефон, если обладатель отошёл далеко.
5. Возникают смешанные механизмы — к примеру совмещающие голосовую идентификацию + облик + пальцевой отпечаток.

Вот, те тенденции очень актуальны в данный момент:

1) Уменьшение компонентов

Компании пытаются минимизировать габариты прорези (“чёлки”) под сенсоры на экране за счёт встраивания маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения конфиденциальности всё более обработки данных осуществляется на месте без передачи информации во внешний облачный услугу.

3) Стандартизация стандартов

Google активно пропагандирует норму BiometricPrompt API, для того чтобы подобные платформы, например как admiral x, и любые Android-программы могли взаимодействовать с различными типами биометрии стандартизированно.

Какое решить на сегодня?

Когда тебе нужна наивысшая безопасность информации, выбирайте передовые модели с интегрированным ИК-проектором или ToF-датчиком глубины.

• iPhone всех последних моделей
• Huawei Mate/P Series линейки
• Mix Pro
• Vivo X линейки
• Oppo Find Х линейки.

Если средства скромен – лучше предпочесть обычным способам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в admiral x, задействовать только как опциональную опцию комфорта.

Каким способом улучшить комфорт использования опции?

Есть несколько хитростей для пользователей, кто уже использует разблокировку через лицо:

1. Периодически обновляйте свою фото-шаблон, если сильно изменяется внешний вид.
2. Не упускайте из виду очищать объектив фронтальной камеры – разводы могут уменьшить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам активирует камеру когда вы берёте его в руки.
4. Во время записи пытайтесь держать лицевую часть ровно напротив видеоустройства не допуская сильного наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвели взгляд от дисплея.

Перспективы прогресса технологии

В скоро наступающие периоды можно ожидать появления полностью дистанционных способов распознавания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + голос + манера ходьбы + движения рук!

Также вероятно появление новых способов обеспечения личной информации – к примеру, динамическое корректировка диджитал шаблона после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень интересных инноваций нашего периода! Она обеспечивает общение со телефоном комфортнее чем до этого, и такие программы, как admiral-x, могут существенно улучшить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как устроена эта система внутри, – сумеете вдумчиво выбирать свой будущий гаджет!