Как функционирует идентификация лиц в смартфонах

Зачем мы останавливаемся на разлочивание по лицевому распознаванию

В прошлые времена идентификация физиономий стало одной из наиболее востребованных функций для деблокировки смартфонов. Еще пару годов назад большинство юзеров удовлетворялись пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект обуславливает данную возможность очень нужной? Во-первых, это комфортно: не нужно помнить трудные пароли или искать правильный палец в мраке. Также, это оперативно: современные системы узнают лицо буквально за мгновения ока. В-третьих, это чувство футуристичности — как будто в кинофильмах про vulkan russia разведчиков.

Тем не менее за такой на первый взгляд легкостью скрывается полный вселенная трудных техник и инженерных разработок. Позвольте нам исследовать, как конкретно работает идентификация по лицу в современных гаджетах, какие применяются технологии, насколько они защищены и что нас предстоит.

Короткая повествование развития техники

Идентификация лиц как методика существует уже более 50 годов. Первые эксперименты машинного анализа лица были предприняты еще в 1960-х годах в научных учреждениях США. Тогда компьютеры могли лишь определять контуры головы и определять дистанции между зрачками и ртом на черно-белых изображениях.

Изначальные торговые установки появились в 90-х, но они были далеки от совершенства: функционировали медленно и нередко ошибались. Только с прогрессом синтетических сетей и таких платформ, как вулкан россии, мощных мобильных процессоров идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные решения.

Главные стадии работы устройства идентификации

Процесс распознавания лица можно условно разделить на несколько важных этапов:

1. Распознавание лица — камера выявляет существование гуманного лица в кадре.
2. Извлечение особенностей — механизм исследует черты облика: форму зрительных органов, обонятельного органа, уст, положение бровей.
3. Построение модели — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — созданный образец сопоставляется со зафиксированной при учёте биометрической информацией владельца.
5. Принятие определения — если соответствие достаточно значительное, смартфон деблокируется.

Любой из указанных стадий нуждается в специальных методов и усовершенствований для быстрой работы непосредственно на девайсе.

Железные компоненты: что находится внутри них

Обычная селфи камера.

Наиболее легкий способ распознавания облика задействует исключительно лицевую видеокамеру смартфона. Такой подход внедрён во различных доступных вариантах Android-устройств.

Сильные стороны:

• Необходимо требует дополнительных сенсоров.
• Быстро работает при достаточном освещении.

Недостатки:

• Несложно одурачить снимком или видео.
• Плохо работает при слабом освещённости или непривычных точках зрения.

Инфракрасная камера и пунктирный проектор

Более совершенные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология является основой Face ID от Apple.

Каким способом это работает:

• Точечный проекционный прибор проецирует на лицо юзера невидимую сетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
• Инфракрасная камера фиксирует изменение формы данной решетки по плоскости физиономии.
• Создаётся трехмерная карта глубины, что почти невозможна для подделки стандартной фотографией или маской.

Выигрыши

• Надёжная функционирование даже в полной темноте.
• Сильная защита к подделкам.
• Точность идентификации свыше 99%.

Дополнительные сенсоры

В определённых аппаратах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые определяют время движения луча до объекта и обратно; Цветные-датчики глубины; специальные световые дальномеры для формирования более детализированной 3D-модели физиономии.

Эти инновации используются в основном во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искуственный разум на исполнении

Современные устройства опознания лиц немыслимы без эксплуатации ИИ и machine learning. Именно из-за таким инновациям, как вулкан россии, аппарат в состоянии распознавать юзера даже при изменениях внешности: новая стрижка, щетина, очки или грим не становятся барьером для открытия.

Распознавание лиц

На начальном стадии алгоритм обязана оперативно распознать образ лица внутри полного изображения камеры. Для этой задачи используются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN может распознавать лицо даже при частичном закрытии (например, платком или ладонью).

Идентификация ключевых аспектов

После идентификации лица устройство, такая как вулкан россии, определяет положение основных точек: уголки глаз, конец носа, края губ и так далее. Как правило используется от 68 до 128 основных маркеров на лице.

Это нужно для нормализации визуала: если юзер держит мобильник под наклоненным, или наклонил головку, программа исправляет изображение до стандартного положения для последующего изучения.

Формирование биометрии шаблона

Далее искусственная сеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Данный образец очень трудно имитировать: он не хранит само картинку юзера, а лишь уникальные особенности его вида, что делает его оптимальным для таких систем, как vulkan russia.

Сравнительный анализ и вынесение выбора

Когда человек желает разлочить смартфон взглядом, механизм повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный порог (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ не предоставляется.

Приспособление к трансформациям облика

Увлекательная характеристика актуальных систем — способность самообучения. Если ты часто открываете мобильное устройство с новой укладкой или оптикой, алгоритм постепенно обновляет эталонный шаблон вашего лица для увеличения точности действия без ухудшения безопасности.

Защита биометрических данных.

Большинство пользователи опасаются держать свои биометрические данные на телефоне из-за угрозы утечки информации или хакерской атаки. Определенные фирмы, такие как vulkan russia, предлагают варианты для улучшения сохранности информации клиентов.

• Локальное сохранение: Основная часть устройств хранит биометричные модели только внутрь защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не оставляют аппарат и недоступны включая создателю.

• Шифрование: Все данные сохраняются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Приложения третьих девелоперов не обладают непосредственного доступа к биометрическим данным; они могут лишь требовать подтверждение верификации личности через системный API.

Следует подчеркнуть значимую особенность: в случае, если кто-либо сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители реализуют меры безопасности от неосознанного разблокирования — в частности, требуют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды распознавания лиц?

Сегодня можно определить 3 основных подхода к осуществлению этой задачи:

Софтверное 2D определение

Применяется только передняя камера без экстра датчиков дистанции. Такой способ наблюдается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость воплощения; низкая затраты; быстрая деятельность при качественном освещении.
Минусы: легко обмануть фотографией; неустойчивая деятельность ночью; недостаточная защищенность.

Аппаратное трёхмерное сканирование

Использует инфракрасную видеокамеру + проектор точек + датчики дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Достоинства: большая достоверность; нельзя обмануть фото/видео; стабильная деятельность при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с интеграцией ИИ

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock последних версий, объединяют фронталку c инфракрасным датчиком движения Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами чужих устройств.

Иллюстрации применения различных методов

• iPhone серии X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые внедрил аналог Face ID среди Android.
• Samsung Galaxy S10 модель/S20 поддерживают как программное плоское распознавание по фото селфи-камерой, так и сенсор ириса глаза.
• Huawei Mate20 Pro применяет комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Проблемы защиты и неверные срабатывания

Несмотря на поразительный прогресс инноваций за последние лет, безупречных систем пока не имеется:

1. Возможность мошенничества: Недорогие смартфоны без труда “разблокируются” четкой снимком хозяина либо видеозаписью с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые идеальные системы могут ошибиться между монозиготными близнецами либо родственниками с очень схожей внешностью.
3. Метаморфозы облика: Стремительное снижение веса/увеличение массы тела, пластические операции или повреждения порой требуют повторной регистрации биометрических данных.
4. Условия фотографирования: Сильная подсветка солнцем либо плотная затенение могут понизить точность идентификации признаков.

Ниже некоторые рекомендаций по безопасному эксплуатации:

• Для значимых операций всегда применяйте дополнительную аутентификацию;
• Не активируйте функцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Систематически обновляйте ПО телефона для защиты от современных угроз;
• Включайте опцию “Требовать распахнутых глаз” везде, где она есть.

В каких местах также находится применение технологии за исключением мобильных телефонов?

Хотя тема данной публикации касается в частности портативным гаджетам, необходимо сказать о прочих направлениях внедрения технологии:

• Управление входа в рабочих помещениях и резиденциях;
• Платёжные устройства банков (“Face Pay”);
• Цифровые идентификационные документы последнего образца;
• Системы видеоконтроля муниципальных служб;
• Автоматизирование регистрации присутствия учебных заведений/университетов;
• Вход пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без пластика или мобильника! Аналогичные проекты развиваются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как трансформируется техпроцесс сегодня?

Всякий год проявляются современные мысли для улучшения качества функционирования систем лицевого распознавания:

1. Увеличивается детализация сенсоров — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше вероятность ошибки;
2. Развиваются искусственные интеллекты — современные архитектуры вида MobileNetV3 дают возможность оперативно обучаться свежим особенностям внешности владельца непосредственно на девайсе без отправки данных в облако.
3. Улучшаются способы антиспуфинга — теперь мобильные устройства умеют различать реальные анимированные лица от статичных фотографий/маскировок по микроскопическим движениям кожи.
4. Синхронизация со смарт-гаджетами — интеллектуальные часы могут автоматически заблокировать мобильный телефон, если обладатель ушёл далеко.
5. Возникают смешанные механизмы — в частности объединяющие речевую аутентификацию + физиономию + дактилоскопический след.

Вот, которые тенденции особенно популярны сейчас:

1) Уменьшение элементов

Изготовители стараются уменьшить величину прорези (“чёлки”) под датчики на экране за счёт интеграции маленьких ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для повышения конфиденциальности всё более обработки данных выполняется внутри устройства без отправки информации во сторонний облачный сервис.

3) Стандартизация норм

Гугл активно пропагандирует норму BiometricPrompt API, с целью чтобы подобные площадки, например как вулкан россия, и каждые Android-программы могли взаимодействовать с любыми видами биометрии унифицированно.

Какое решить сегодня?

В случае если тебе необходима наивысшая защита данных, подбирайте флагманские устройства с интегрированным ИК-проектором или ToF-сенсором глубины.

• iPhone каждого актуальных поколений
• Huawei Companion/P Series ряда
• Xiaomi Expert
• Vivo X серии
• Oppo Find Х серий.

Если средства ограничен – лучше отдавать предпочтение обычным методам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как опциональную опцию комфорта.

Каким способом повысить комфорт использования опции?

Есть несколько советов для тех, кто уже использует функцию распознавания лица:

1. Часто меняйте свою фото-шаблон, если кардинально меняется внешность.
2. Не пренебрегайте чистить линзу передней камеры – загрязнения могут снизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам запускает фотоаппарат как только вы берёте его в руки.
4. Во время регистрации старайтесь сохранять лицевую часть ровно перед камеры без сильного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отворачиваетесь от экрана.

Будущее развития инноваций

В ближайшие времена можно предполагать возникновения полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + манера ходьбы + манипуляции руками!

Также предполагается появление новых методов обеспечения приватности – например, динамическое изменение электронного образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее интересных инноваций нашего эпохи! Она обеспечивает интеракцию со телефоном комфортнее чем до этого, и такие приложения, как vulkan russia, могут в разы повысить ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как устроена эта методика внутри, – сумеете вдумчиво определять свой следующий гаджет!