Как действует идентификация лиц в мобильных устройствах

Почему мы предпочитаем разблокировку по фейсу

В последние годы распознавание лиц стало одной из самых популярных опций для разблокировки смартфонов. Лишь несколько годов ранее основная масса юзеров удовлетворялись PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект превращает эту конкретную функцию такой востребованной? Во-первых, это комфортно: не нужно помнить сложные пароли или отыскивать верный палец в темноте. Также, это быстро: современные программы распознают лицо буквально за мгновения ока. В-третьем пункте, это ощущение футуризма — как будто в кинолентах про казино вулкан агентов.

Впрочем за такой на первый взгляд несложностью прячется полный мир трудных методов и инженерных концепций. Давайте исследовать, как именно работает идентификация по лицу в новейших мобильных телефонах, какие существуют технологии, насколько они защищены и что нас предстоит.

Короткая хроника эволюции техники

Идентификация лиц как техника имеется уже более 50 лет. Первые эксперименты автоматического анализа лиц были сделаны еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры могли лишь выделять контуры головы и измерять промежутки между зрачками и устами на черно-белых фотографиях.

Первые бизнес платформы появились в 1990-х годах, но они были неидеальны: функционировали медленно и часто ошибались. Только с прогрессом нейронных сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных процессоров распознавание лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные разработки.

Ключевые этапы работы системы определения

Процесс распознавания лица можно условно поделить на несколько важных этапов:

1. Обнаружение лица — камера выявляет существование людского лица в изображении.
2. Определение признаков — алгоритм исследует контуры физиономии: очертания зрительных органов, носа, уст, позицию надбровных дуг.
3. Построение шаблона — создаётся особенный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с образцом — созданный шаблон сопоставляется с зафиксированной при внесении биометрической данными владельца.
5. Принятие решения — если сходство достаточно существенное, смартфон открывается.

Всякий из указанных этапов запрашивает индивидуальных алгоритмов и оптимизаций для скорой работы прямо на устройстве.

Технические компоненты: что скрыто внутри

Обычная фронтальная камера.

Самый простой несложный вариант определения облика применяет лишь лицевую камеру мобильного устройства. Подобный подход осуществлён во различных недорогих моделях Android-устройств.

Положительные стороны:

• Необходимо потребляет дополнительные датчиков.
• Оперативно действует при качественном освещении.

Слабые стороны:

• Легко одурачить снимком или видео.
• Неудачно функционирует при слабом свете или непривычных точках зрения.

ИК камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Каким способом это работает:

• Точечный проекционный прибор показывает на физиономию использующего невидимую структуру из тысяч инфракрасных меток (например, Face ID использует около 30 000 меток).
• Инфракрасная устройство регистрирует искривление этой сетки по поверхности лица.
• Создаётся 3D глубинная карта глубины, что почти невозможна для имитации стандартной снимком или маскировкой.

Выигрыши

• Надёжная функционирование даже в полной темноте.
• Высокая защита к имитациям.
• Точность распознавания свыше 99%.

Дополнительные сенсоры

В определённых аппаратах применяются также дополнительные датчики: ToF (Time-of-Flight), которые определяют период распространения света до объекта и обратно; Цветные-датчики глубины; специальные световые измерители расстояния для создания более детализированной 3D-модели лица.

Эти инновации используются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: синтетический разум в работе

Нынешние системы опознания лиц немыслимы без эксплуатации искусственного интеллекта и machine learning. Именно благодаря таким разработкам, как вулкан россии, гаджет в состоянии распознавать юзера даже при трансформациях внешности: новая стрижка, борода, линзы или макияж не становятся препятствием для деблокировки.

Обнаружение лиц

На первом стадии программа должна мгновенно обнаружить ликовое изображение внутри целого кадра с камеры. Для данной цели используются многоуровневые классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы идентифицировать лица людей среди множества других объектов.

Пример: процесс MTCNN может находить облик даже в случае частичном закрытии (например, шарфом или ладонью).

Идентификация важных аспектов

После распознавания лица устройство, такая как вулкан россии, определяет местоположение главных точек: кончики глаз, верхушка носа, границы губ и так далее. Часто задействуется от 68 до 128 основных меток на лицевой поверхности.

Это необходимо для выравнивания изображения: если человек удерживает смартфон под наклоном, или наклонил голову, программа исправляет изображение до нормального состояния для последующего изучения.

Формирование биометрического модели

Далее нейросеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот формат весьма сложно подделать: он не хранит само изображение юзера, а лишь уникальные характеристики его облика, что делает его идеальным для таких систем, как vulkan russia.

Сравнительный анализ и принятие решения

В случае, когда человек намеревается открыть смартфон глазами, механизм осуществляет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый порог (обычно больше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ не предоставляется.

Привыкание к изменениям облика

Увлекательная особенность нынешних систем — способность самостоятельного обучения. Если вы постоянно открываете мобильное устройство с обновленной укладкой или очками, система постепенно освежает эталонный модель вашего лица для повышения точности работы без ухудшения безопасности.

Охрана биометрических данных данных.

Большинство клиенты опасаются хранить свои биометрические данные на мобильном устройстве из-за угрозы утечки информации или хакерской атаки. Определенные фирмы, такие как vulkan russia, предоставляют варианты для увеличения сохранности информации клиентов.

• Локальное сохранение: Основная часть аппаратов хранит биометричные шаблоны лишь в пределах защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают устройство и закрыты включая производителю.

• Шифрование: Все данные сохраняются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих разработчиков не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь требовать подтверждение верификации личности через системный API.

Стоит подчеркнуть существенную особенность: в случае, если кто-либо достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители внедряют защиту от автоматического разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют типы идентификации лиц?

В настоящее время можно выделить различить три главных подхода к реализации этой операции:

Софтверное двухмерное определение

Эксплуатируется только фронтальная видеокамера без дополнительных детекторов глубины. Подобный метод встречается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость реализации; минимальная стоимость; быстрая деятельность при хорошем свете.
Минусы: просто ввести в заблуждение фотографией; нестабильная деятельность ночью; низкая охрана.

Техническое трёхмерное сканирование

Использует ИК видеокамеру + проектор точек + датчики дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Плюсы: высокая надёжность; невозможно подделать изображение/видеозапись; постоянная работа при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с интеграцией ИИ

Применяют комбинацию программных методов + аппаратную обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как вулкан россии и Google Pixel Face Unlock современных версий, объединяют фронтальную камеру c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Образцы применения разных техник

• iPhone модели X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые внедрил аналог Face ID среди Android.
• Samsung Galaxy S10/S20 поддерживают как программное обеспечение плоское распознавание по фото селфи-камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro применяет систему из ИК-освещения + Dot Projector + ToF-сенсор

Проблемы защиты и неверные тревоги

Несмотря на впечатляющий развитие технологий за недавние лет, идеальных систем пока не имеется:

1. Возможность обмана: Доступные телефоны легко “разблокируются” высококачественной изображением хозяина или же роликом с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые идеальные механизмы могут перепутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
3. Трансформации внешнего вида: Стремительное похудение/набор веса, пластические операции или повреждения порой требуют повторной регистрации биометрических данных.
4. Условия фотографирования: Яркая подсветка солнечным светом или глубокая затенение могут уменьшить верность идентификации признаков.

Вот пара советов для защищённому использованию:

• Для значимых операций всегда внедряйте двухфакторную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Постоянно обновляйте ПО телефона для защиты от новых видов атак;
• Включайте опцию “Требовать раскрытых глаз” в тех местах, где она доступна.

В каких местах дополнительно используется технологии кроме смартфонов?

Хотя тема этой работы касается в частности портативным гаджетам, стоит упомянуть о других сферах применения технологии:

• Мониторинг входа в деловых центрах и жилых домах;
• Платёжные терминалы банков (“Face Pay”);
• Электронные удостоверения личности нового типа;
• Установки видеоконтроля муниципальных служб;
• Механизация отслеживания явки учебных заведений/университетов;
• Аутентификация пользователей компьютеров/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без пластика или телефона! Аналогичные проекты реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом трансформируется технический процесс в нынешнее время?

Каждый год возникают свежие концепции для усовершенствования стандарта работы систем идентификации лиц:

1. Увеличивается разрешение датчиков — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность неточности;
2. Совершенствуются нейросети — современные архитектуры вида MobileNetV3 обеспечивают возможность скоростно осваивать свежим характеристикам внешности обладателя напрямую на гаджете без отправки данных в облако.
3. Совершенствуются методы антиспуфинга — теперь телефоны умеют отличать подлинные живые лица от фиксированных фотографий/маскировок по мельчайшим микродвижениям.
4. Взаимодействие со умными устройствами — смарт-часы могут авто заблокировать мобильный телефон, если пользователь удалился на значительное расстояние.
5. Появляются смешанные механизмы — к примеру комбинирующие голосовую идентификацию + физиономию + дактилоскопический след.

Здесь, какие тренды в особенности популярны сейчас:

1) Миниатюризация элементов

Производители стараются минимизировать габариты выреза (“чёлки”) для сенсоры на экране за счёт внедрения миниатюрных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения приватности всё больше расчётов осуществляется внутри устройства без пересылки информации во дополнительный облачный услугу.

3) Упорядочивание стандартов

Google интенсивно продвигает стандарт BiometricPrompt API, с целью чтобы аналогичные платформы, как вулкан россия, и каждые Android-программы были совместимы с любыми видами биометрии унифицированно.

Какое выбрать сегодня?

Если вам необходима предельная безопасность информации, остановите выбор на передовые модели с интегрированным ИК-проектором или же ToF-датчиком глубины.

• iPhone всех существующих последних моделей
• Huawei Companion/P ряда
• Mi Pro
• Vivo X линейки
• Oppo Обнаружить Х серии.

Если бюджет невелик – лучше выбирать обычным методам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, использовать только как второстепенную возможность удобства.

Каким образом повысить практичность функционирования возможности?

Есть несколько лайфхаков для тех, кто уже применяет разблокировку через лицо:

1. Часто меняйте свою изображение-шаблон, если сильно трансформируется внешний вид.
2. Не упускайте из виду очищать объектив фронтальной камеры – пятна могут уменьшить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает камеру если вы поднимаете его.
4. Во время регистрации пытайтесь держать лицевую часть ровно перед видеоустройства исключая значительного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвернулись от дисплея.

Будущее прогресса технологии

В предстоящие годы можно предвкушать развития полностью бесконтактных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: лицо + речь + походка + движения рук!

Также вероятно появление новых подходов обеспечения приватности – скажем, динамическое корректировка электронного паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из очень увлекательных техник нашего эпохи! Она делает интеракцию со телефоном проще чем до этого, и такие программы, как vulkan russia, могут в разы повысить ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как работает эта технология изнутри, – сумеете вдумчиво подбирать свой следующий устройство!