Как действует определение лицевых образов в мобильных устройствах

Зачем мы останавливаемся на разблокирование по лицу

В последние времена распознавание лиц является одной из самых распространённых функций для разблокировки умных телефонов. Еще пару годов ранее большинство пользователей довольствовались пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект превращает эту конкретную особенность такой востребованной? Для начала, это практично: не нужно запоминать сложные пароли или находить верный палец в темноте. Кроме того, это быстро: современные программы узнают лицо практически за мгновение. В-третьих, это ощущение будущего — будто в фильмах про vulkan russia разведчиков.

Однако за этой видимой простотой скрывается весь вселенная сложных техник и инженерных концепций. Попробуем исследовать, как точно функционирует идентификация по лицу в актуальных смартфонах, какие применяются технологии, насколько они безопасны и что нас ожидает в будущем.

Краткая история прогресса техники

Идентификация лиц как техника имеется уже более 50 лет. Начальные попытки автоматического анализа лиц были предприняты еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры умели лишь выделять очертания черепа и измерять промежутки между глазами и губами на ахроматических снимках.

Начальные коммерческие платформы появились в 1990-х годах, но они были неидеальны: действовали неспешно и часто давали сбои. Только с развитием нейронных сетей и таких площадок, как вулкан россии, мощных мобильных процессоров идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные разработки.

Ключевые стадии работы устройства идентификации

Процесс распознавания лица можно условно сегментировать на несколько важных этапов:

1. Идентификация лиц — камера распознает существование людского лица в снимке.
2. Извлечение признаков — алгоритм изучает контуры лица: конфигурацию зрительных органов, обонятельного органа, уст, позицию бровей.
3. Построение шаблона — создаётся особенный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с образцом — сформированный образец сверяется со сохранённой при учёте биометрической информацией владельца.
5. Принятие решения — если сходство достаточно высокое, смартфон деблокируется.

Всякий из указанных стадий требует особых методов и оптимизаций для оперативной работы прямо на устройстве.

Технические составляющие: что скрыто внутри

Обычная селфи камера.

Самый несложный вариант определения облика применяет только лицевую камеру смартфона мобильного устройства. Такой подход осуществлён во многих доступных версиях Android-девайсов.

Преимущества:

• Необходимо нуждается в внешних датчиков.
• Быстро действует при хорошем освещённости.

Отрицательные стороны:

• Легко ввести в заблуждение снимком или видео.
• Неудачно действует при низком освещённости или непривычных ракурсах.

ИК фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс составляет базу Face ID от Apple.

Как это функционирует:

• Точечный проектор показывает на облик использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 меток).
• ИК камера регистрирует искривление данной решетки по плоскости физиономии.
• Получается 3D глубинная карта глубинности, которая практически невозможна для имитации стандартной фото или маскировкой.

Плюсы

• Надёжная деятельность даже в полной тьме.
• Высокая защита к подделкам.
• Точность определения более 99%.

Дополнительные датчики

В некоторых устройствах используются также вспомогательные датчики: ToF (Time-of-Flight), которые фиксируют время прохождения луча до цели и обратно; Трехцветные-датчики глубины; специальные лазерные лидары для построения более детализированной 3D-модели лица.

Эти инновации используются чаще всего во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: синтетический разум на действии

Современные устройства опознания физиономий неосуществимы в отсутствие применения ИИ и машинного обучения. Именно благодаря таким разработкам, как вулкан россии, аппарат способно распознавать владельца даже при изменениях внешнего вида: новая укладка, растительность на лице, оптика или макияж не становятся препятствием для деблокировки.

Распознавание лица

При начальном стадии программа необходимо мгновенно найти образ лица в пределах полного изображения с камеры. Для этого используются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые “обучены” идентифицировать лица людей среди множества других объектов.

Пример: процесс MTCNN может распознавать физиономию даже в случае частичном перекрытии (например, платком или ладонью).

Выделение ключевых точек

После распознавания лица система, такая как вулкан россии, определяет расположение главных точек: уголки глаз, кончик носа, границы губ и так далее. Обычно используется от 68 до 128 ключевых точек на лицевой области.

Это требуется для выравнивания картинки: если юзер находится с мобильник под углом, или склонил головку, программа “выпрямляет” изображение до обычного угла для дальнейшего анализа.

Построение биометрии шаблона

Далее нейронная сеть строит уплотненное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 вещественных чисел.

Такой формат очень трудно сфальсифицировать: он не удерживает непосредственно изображение юзера, а лишь уникальные черты его внешности, что делает его совершенным для таких площадок, как vulkan russia.

Сопоставление и вынесение решения

В случае, когда пользователь желает разлочить смартфон глазами, система повторяет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный порог (обычно превышает 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ блокируется.

Привыкание к изменениям облика

Увлекательная характеристика актуальных систем — возможность самостоятельного обучения. Если вы постоянно разблокируете мобильное устройство с новой прической или очками, алгоритм постепенно освежает базовый шаблон вашего облика для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрических данных данных.

Большинство юзеры опасаются хранить свои био-идентификационные данные на телефоне из-за риска утечки информации или взлома устройства. Иные организации, вроде vulkan russia, предлагают методы для улучшения безопасности данных юзеров.

• Локальное сбережение: Преимущественно аппаратов хранит био-идентификационные модели лишь внутрь защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не оставляют аппарат и закрыты в том числе создателю.

• Шифрование: Все информация сберегаются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих разработчиков не имеют непосредственного доступа к биометрическим; они могут лишь запрашивать факт верификации идентичности через системный API.

Необходимо подчеркнуть значимую особенность: в случае, если кто-либо получит физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют систему защиты от “слепого” разблокирования — к примеру, требуют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют категории идентификации лиц на изображениях?

В настоящее время можно различить три ключевых способа к выполнению этой задачи:

Программное двухмерное распознавание

Применяется только фронтальная камера без дополнительных сенсоров глубины. Такой метод используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость реализации; умеренная цена; скоростная работа при достаточном свете.
Минусы: просто одурачить снимком; ненадежная функционирование ночью; низкая безопасность.

Оборудование для трёхмерное сканирование

Использует ИК видеокамеру + проектор точек + датчики глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Плюсы: высокая достоверность; невозможно обмануть фото/видео; постоянная деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с интеграцией ИИ

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как вулкан россии и Google Pixel Face Unlock последних версий, объединяют фронталку c ИК датчиком мобильности Soli Radar для защиты от подделок руками/масками/видеоэкранами посторонних устройств.

Образцы использования разных способов

• iPhone модели X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз представил эквивалент Face ID в числе Android.
• Samsung Galaxy S10/S20 имеют как программное 2D определение по изображению селфи-камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro использует набор из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Проблемы охраны и ложные срабатывания

Несмотря на замечательный успехи техники за последние лет, идеальных систем пока не наблюдается:

1. Вероятность обмана: Недорогие смартфоны просто “разблокируются” высококачественной изображением владельца или роликом с экрана другого устройства.
2. Идентичные двойняшки: Даже самые идеальные системы могут спутать между монозиготными близнецами либо семьями с очень похожей внешностью.
3. Метаморфозы внешности: Внезапное утрата веса/набор веса, хирургические вмешательства либо травмы иногда необходимы для обновления данных биометрических данных.
4. Условия записи: Сильная засветка солнечным светом или глубокая темнота могут уменьшить аккуратность распознавания признаков.

Вот некоторые подсказок для защищённому использованию:

• Для важных операций всегда применяйте дополнительную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Постоянно обновляйте программное обеспечение мобильного устройства для защиты от новых видов атак;
• Включайте настройку “Требовать раскрытых глаз” в тех местах, где она имеется.

Где ещё находится применение технологии помимо мобильных телефонов?

Несмотря на то, что предмет этой работы посвящена в частности мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:

• Контроль доступа в деловых центрах и жилых домах;
• Платёжные устройства банков (“Face Pay”);
• Цифровые паспорта последнего типа;
• Установки видеомониторинга муниципальных служб;
• Автоматизация учёта посещаемости учебных заведений/вузов;
• Вход юзеров персональных компьютеров/ноутбуков.

Например: В московском метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Схожие программы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как изменяется технический процесс в наше время?

Всякий годочек появляются свежие мысли для повышения уровня функционирования систем идентификации лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность ошибки;
2. Совершенствуются искусственные интеллекты — передовые архитектуры вида MobileNetV3 дают возможность быстро обучаться дополнительным чертам облика владельца непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Улучшаются технологии антиспуфинга — теперь мобильные устройства умеют распознавать настоящие живые лица от фиксированных фотографий/масок по мельчайшим микродвижениям.
4. Взаимодействие со интеллектуальными приборами — смарт-часы могут самостоятельно закрыть доступ к телефон, если пользователь удалился на значительное расстояние.
5. Проявляются комбинированные механизмы — например совмещающие голосовую опознание + лицо + дактилоскопический след.

Вот, которые тенденции очень популярны в данный момент:

1) Сокращение деталей

Производители намереваются уменьшить габариты отверстия (“чёлки”) для сенсоры на экране за счёт встраивания компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на девайсе

Для улучшения конфиденциальности всё больше обработки данных выполняется локально без отправки информации во внешний облачный услугу.

3) Упорядочивание регламентов

Гугл энергично продвигает эталон BiometricPrompt API, с целью чтобы такие площадки, например как вулкан россия, и все Android-приложения могли взаимодействовать с различными типами биометрии унифицированно.

Какое выбрать сегодня?

Если вам нужна максимальная сохранность информации, выбирайте флагманские модели с интегрированным ИК-излучателем или же ToF-сенсором глубины.

• iPhone всех существующих последних версий
• Huawei Mate/Series P серии
• Mix Expert
• Vivo X серии
• Oppo Find Икс линейки.

Если бюджет невелик – лучше предпочесть обычным способам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как второстепенную возможность комфорта.

Каким способом увеличить удобство работы опции?

Есть несколько хитростей для пользователей, кто уже пользуется разблокировку по лицу:

1. Периодически обновляйте свою фотографию-шаблон, если кардинально меняется облик.
2. Не упускайте из виду чистить объектив передней камеры – пятна могут понизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам запускает камеру когда вы берёте его в руки.
4. В процессе регистрационного процесса пытайтесь держать лицо ровно перед объектива не допуская сильного наклона головы.
5. Используйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отворачиваетесь от экрана.

Будущее эволюции инноваций

В предстоящие годы можно предполагать появления полностью бесконтактных способов распознавания индивидуума сразу по нескольким биометрическим параметрам одновременно: облик + звучание + манера ходьбы + движения рук!

Также вероятно развитие современных подходов охраны конфиденциальности – например, переменное модификация диджитал образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых увлекательных инноваций нашего периода! Она предоставляет взаимодействие со смартфоном комфортнее чем раньше, и такие приложения, как vulkan russia, могут существенно улучшить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как устроена эта технология изнутри, – сможете более осмысленно определять свой очередной устройство!