Каким образом действует идентификация лицевых образов в смартфонах

Зачем мы предпочитаем разблокировку по лицу

В последние годы идентификация лиц является одной из самых популярных функций для открытия смартфонов. Всего несколько лет ранее основная часть юзеров обходились пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением подобных технологий, как admiral x, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает эту возможность такой востребованной? Прежде всего, это удобно: не нужно удерживать в памяти трудные пароли или находить правильный палец в тьме. Кроме того, это оперативно: современные программы узнают лицо практически за доли секунды. В-третьих, это впечатление будущего — будто в кинофильмах про адмирал х разведчиков.

Однако за данной кажущейся несложностью таится целый вселенная комплексных техник и инженерных разработок. Попробуем исследовать, как именно действует фейсканирование в новейших смартфонах, какие существуют способы, насколько они защищены и что нас предстоит.

Короткая повествование развития техники

Распознавание лиц как методика присутствует уже более пятидесяти годов. Начальные попытки машинного исследования лица были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины умели лишь выделять силуэты головы и определять дистанции между зрачками и губами на монохромных изображениях.

Первые бизнес установки возникли в девяностых годах, но они были неидеальны: работали медленно и часто ошибались. Только с прогрессом синтетических сетей и таких систем, как адмирал х, высокопроизводительных мобильных процессоров определение лиц стало по-настоящему массовым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные решения.

Главные шаги действия механизма идентификации

Процесс распознавания лица можно ориентировочно сегментировать на несколько важных этапов:

1. Распознавание лица — аппарат распознает существование людского образа в изображении.
2. Выделение признаков — алгоритм исследует особенности облика: форму глаз, обонятельного органа, губ, расположение бровей.
3. Построение модели — создаётся особенный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с образцом — полученный шаблон сопоставляется с сохранённой при регистрации биометрической сведениями владельца.
5. Принятие решения — если соответствие достаточно существенное, смартфон разблокируется.

Всякий из указанных этапов нуждается в индивидуальных процедур и оптимизаций для оперативной работы прямо на устройстве.

Аппаратные компоненты: что находится внутри них

Обычная селфи камера.

Простейший простой вариант определения облика применяет лишь лицевую видеокамеру смартфона. Подобный метод внедрён во многочисленных доступных моделях Android-девайсов.

Плюсы:

• Не нуждается в нуждается в дополнительные сенсоров.
• Быстро работает при хорошем свете.

Минусы:

• Просто обмануть изображением или видео.
• Плохо действует при плохом освещении или нестандартных точках зрения.

Инфракрасная камера и пунктирный проектор

Более продвинутые системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика составляет базу Face ID от Apple.

Каким способом это работает:

• Точечный проектор отображает на физиономию пользователя невидимую структуру из тысяч инфракрасных меток (например, Face ID использует около 30 000 меток).
• Инфракрасная камера фиксирует деформацию этой решетки по плоскости физиономии.
• Получается 3D карта глубины, что практически неподвластна для подделки обычной фотографией или маскировкой.

Выигрыши

• Надёжная работа даже в полной неосвещённости.
• Высокая устойчивость к имитациям.
• Точность идентификации более 99%.

Дополнительные датчики

В отдельных аппаратах используются также экстра датчики: ToF (Time-of-Flight), которые определяют период распространения света до объекта и обратно; Цветные-датчики дальности; специальные лазерные дальномеры для формирования более точной 3D-модели лица.

Эти технологии используются чаще всего во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искуственный разум на действии

Нынешние устройства опознания физиономий немыслимы в отсутствие использования искусственного интеллекта и машинного обучения. Именно из-за таким инновациям, как адмирал х, устройство может идентифицировать владельца даже при трансформациях внешности: новая причёска, борода, оптика или макияж не становятся помехой для деблокировки.

Обнаружение лица

В стартовом стадии система необходимо мгновенно распознать лицо внутри всего кадра камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN способен обнаруживать лицо даже с частичном перекрытии (например, шалью или рукой).

Определение важных моментов

После обнаружения лица механизм, такая как адмирал х, устанавливает положение ключевых точек: кончики глаз, верхушка носа, края губ и так далее. Как правило применяется от 68 до 128 главных точек на лицевой поверхности.

Данное необходимо для выравнивания картинки: если юзер находится с телефон под наклоненным, или наклонил головку, программа корректирует изображение до стандартного положения для последующего изучения.

Формирование биометрического идентификатора образца

Далее искусственная сеть строит сжатое числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Такой формат очень трудно подделать: он не хранит непосредственно фото пользователя, а лишь исключительные особенности его внешности, что делает его совершенным для таких систем, как admiral-x.

Сравнение и вынесение решения

В случае, когда пользователь хочет разлочить мобильник взором, механизм воспроизводит все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный порог (обычно больше 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ блокируется.

Адаптация к метаморфозам облика

Занимательная характеристика современных систем — способность самостоятельного обучения. Если вы регулярно открываете смартфон с свежей прической или очками, система постепенно обновляет основной образец вашего внешности для повышения точности работы без ухудшения безопасности.

Охрана биометрических данных данных.

Множество пользователи беспокоятся сохранять свои биометрические данные на мобильном устройстве из-за вероятности потери данных или взлома устройства. Некоторые фирмы, такие как admiral-x, предлагают методы для увеличения сохранности данных клиентов.

• Локальное хранение: Преимущественно устройств записывает биометрические модели исключительно внутри защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из аппарат и не доступны включая создателю.

• Шифрование: Все сведения сохраняются только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения внешних разработчиков не имеют прямого доступа к биометрическим; они могут лишь требовать факт верификации личности через системный API.

Стоит подчеркнуть значимую деталь: если какой-то человек получит доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители реализуют систему защиты от “слепого” разблокирования — к примеру, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды определения лиц?

Сегодня можно определить различить 3 ключевых способа к выполнению этой задачи:

Софтверное плоское определение

Применяется только передняя видеокамера без экстра сенсоров дистанции. Такой метод используется наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность воплощения; умеренная затраты; быстрая деятельность при качественном освещении.
Минусы: легко одурачить фотографией; неустойчивая деятельность ночью; низкая безопасность.

Техническое объёмное оцифровка

Применяет инфракрасную видеокамеру + проектор пикселей + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: значительная надежность; невозможно подделать изображение/видеозапись; постоянная деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с дополнением ИИ

Применяют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как адмирал х и Google Pixel Face Unlock новейших поколений, объединяют фронталку c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Примеры эксплуатации разнообразных техник

• iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз предложил подобие Face ID среди Android.
• Samsung Galaxy S10 версия/S20 имеют как программное 2D определение по фото фронтальной камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro задействует систему из ИК-освещения + Dot Projector + ToF-датчик

Трудности охраны и ложные сигналы

Несмотря на замечательный прогресс инноваций за последние лет, безупречных системы пока не существует:

1. Шанс подвоха: Доступные смартфоны просто открываются четкой фотографией хозяина либо видеозаписью с экрана другого устройства.
2. Идентичные близняшки: Даже самые безупречные механизмы могут спутать между однояйцевыми близнецами либо родичами с очень похожей внешностью.
3. Изменения внешнего вида: Внезапное похудение/увеличение массы тела, хирургические вмешательства или травмы порой необходимы для обновления данных биометрических данных.
4. Условия записи: Интенсивная освещённость солнечным светом либо интенсивная тень могут понизить верность определения признаков.

Ниже пара рекомендаций для безопасному применению:

• Для важных операций всегда применяйте двухэтапную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Постоянно обновляйте прошивку программное обеспечение телефона для предотвращения угроз от новых видов атак;
• Включайте настройку “Требовать раскрытых глаз” везде, где она доступна.

В каких местах также применяется технологии за исключением смартфонов?

Пускай тема этой работы посвящена в частности смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

• Контроль доступа в офисах и резиденциях;
• Платёжные терминалы банков (“Face Pay”);
• Виртуальные идентификационные документы последнего поколения;
• Системы видеоконтроля городских сервисов;
• Автоматизация отслеживания явки учебных заведений/институтов;
• Вход участников ПК/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без пластика или мобильника! Схожие инициативы развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как изменяется техпроцесс в наше время?

Всякий год проявляются свежие идеи для повышения стандарта работы систем лицевого распознавания:

1. Увеличивается чёткость сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность неточности;
2. Развиваются искусственные интеллекты — новейшие конструкции типа MobileNetV3 обеспечивают возможность оперативно обучаться новым характеристикам облика владельца напрямую на гаджете без пересылки информации в облачное хранилище.
3. Улучшаются технологии антиспуфинга — теперь смартфоны умеют различать подлинные анимированные облики от статичных снимков/маскировок по незаметным движениям кожи.
4. Синхронизация со интеллектуальными приборами — смарт-часы могут автоматически закрыть доступ к мобильный телефон, если владелец удалился на значительное расстояние.
5. Возникают комбинированные системы — к примеру комбинирующие речевую идентификацию + физиономию + дактилоскопический след.

Вот, которые тенденции особенно востребованы в данный момент:

1) Сокращение деталей

Изготовители намереваются сократить габариты выреза (“чёлки”) для датчики на экране за счёт интеграции компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения личной безопасности всё более расчётов происходит внутри устройства без передачи информации во внешний облачный сервис.

3) Упорядочивание стандартов

Google активно продвигает эталон BiometricPrompt API, для того чтобы такие системы, вроде admiral x, и каждые Android-аппы могли работать с всеми формами биометрии унифицированно.

Какое выбрать на сегодня?

Если тебе важна предельная сохранность данных, остановите выбор на передовые модели со встроенным ИК-излучателем или же ToF-сенсором глубины.

• iPhone всех последних моделей
• Huawei Partner/Series P серии
• Xiaomi Pro
• Vivo X линейки
• Oppo Обнаружить Икс линейки.

Если финансы ограничен – лучше предпочесть традиционным средствам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в admiral x, использовать только как опциональную возможность комфорта.

Каким способом повысить комфорт использования опции?

Есть несколько хитростей для людей, кто уже применяет разблокировку через лицо:

1. Регулярно обновляйте свою фотографию-шаблон, если сильно меняется облик.
2. Не упускайте из виду очищать линзу передней камеры – разводы могут понизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам активирует фотоаппарат как только вы поднимаете его.
4. При регистрационного процесса старайтесь держать лицевую часть прямо напротив видеоустройства без значительного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от экрана.

Возможности эволюции инноваций

В скоро наступающие годы можно ожидать развития полностью дистанционных способов опознания персоны сразу по нескольким биометрическим параметрам одновременно: лицо + звучание + манера ходьбы + движения рук!

Также предполагается появление новых способов охраны личной информации – к примеру, переменное изменение диджитал паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее интересных инноваций нашего периода! Она обеспечивает общение со смартфоном комфортнее чем раньше, и такие приложения, как admiral-x, могут значительно оптимизировать ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как работает эта методика изнутри, – сумеете осознаннее подбирать свой следующий девайс!