Каким способом функционирует распознавание лицевых образов в мобильных устройствах

Для чего мы останавливаемся на разблокировку по лицу

В последние времена определение лиц превратилось в одной из наиболее востребованных опций для открытия смартфонов. Лишь некоторые годков тому назад большинство пользователей удовлетворялись PIN-кодами, паролями или датчиками отпечатков пальцев. Но с появлением таких технологий, например Вулкан Платинум, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь делает эту конкретную возможность такой востребованной? Для начала, это практично: не нужно запоминать замысловатые пароли или находить правильный палец в тьме. Кроме того, это оперативно: современные алгоритмы распознают лицо фактически за доли секунды. В-третью очередь, это впечатление футуризма — словно в кинолентах про вулкан платинум зеркало агентов.

Тем не менее за такой видимой простотой скрывается весь мир комплексных методов и инженерных разработок. Попробуем разобраться, как точно функционирует фейсканирование в современных гаджетах, какие существуют способы, насколько они защищены и что нас ждёт впереди.

Короткая хроника развития технологии

Распознавание лиц как технология имеется уже более 50 лет. Изначальные попытки автоматического изучения облика были сделаны еще в 1960-х годы в лабораториях США. Тогда вычислительные машины способны были лишь обозначать очертания лица и вычислять дистанции между зрачками и устами на ахроматических снимках.

Начальные бизнес платформы стали доступны в 90-х, но они были несовершенны: работали медленно и часто ошибались. Только с прогрессом нейронных сетей и таких систем, как Vulkan Platinum, мощных мобильных процессоров идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали интегрировать личные разработки.

Основные этапы действия системы определения

Процесс определения лица можно ориентировочно разделить на несколько основных этапов:

1. Обнаружение лиц — устройство определяет присутствие людского образа в кадре.
2. Выделение характеристик — система изучает особенности облика: очертания зрительных органов, носа, уст, позицию бровей.
3. Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с стандартом — созданный модель сравнивается со зафиксированной при внесении биометрической данными владельца.
5. Принятие решения — если сходство достаточно высокое, смартфон разблокируется.

Каждый из указанных стадий запрашивает особых процедур и улучшений для быстрой работы прямо на устройстве.

Технические элементы: что прячется внутри них

Типичная передняя камера.

Наиболее простой метод распознавания физиономии использует исключительно лицевую видеокамеру мобильного устройства. Такой способ реализован во многих недорогих вариантах Android-девайсов.

Достоинства:

• Не нуждается в дополнительные датчиков.
• Быстро работает при качественном свете.

Слабые стороны:

• Легко одурачить изображением или видео.
• Неправильно действует при низком освещении или необычных углах обзора.

ИК камера и точечный проекционный аппарат

Более продвинутые системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс является основой Face ID от Apple.

Как это работает:

• Точечный устройство проекции показывает на физиономию использующего невидимую решетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 точек).
• Инфракрасная камера записывает деформацию данной решетки по поверхности лица.
• Получается 3D карта глубинности, которая почти что неосуществима для фальсификации типичной снимком или маскировкой.

Преимущества

• Надёжная деятельность даже в полной неосвещённости.
• Высокая защита к подделкам.
• Точность идентификации свыше 99%.

Добавочные сенсорные устройства

В отдельных устройствах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые определяют время движения света до предмета и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для создания более аккуратной 3D-модели физиономии.

Эти разработки встречаются наиболее часто во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искусственный интеллект в работе

Современные устройства идентификации лиц невозможны при отсутствии применения ИИ и машинного обучения. Именно вследствие таким технологиям, как Vulkan Platinum, устройство способно распознавать владельца даже при метаморфозах облика: новая укладка, борода, линзы или макияж не становятся помехой для деблокировки.

Обнаружение физиономии

На стартовом этапе система необходимо мгновенно обнаружить лицо среди целого кадра с камеры. Для этой задачи используются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые “обучены” находить лиц человека среди множества других объектов.

Пример: алгоритм MTCNN способен находить облик даже с частичном закрытии (например, шарфом или ладонью).

Выделение основных точек

После идентификации лица система, такая как Vulkan Platinum, вычисляет положение основных точек: кончики глаз, конец носа, контуры губ и так далее. Часто используется от 68 до 128 главных маркеров на лице.

Это действие необходимо для нормализации изображения: если человек держит телефон под наклоном, или склонил головку, программа “выпрямляет” изображение до стандартного положения для последующего изучения.

Создание биометрического модели

Далее нейросеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Данный образец крайне сложно подделать: он не хранит непосредственно картинку пользователя, а лишь исключительные особенности его облика, что делает его совершенным для таких платформ, как Вулкан Казино Платинум.

Сопоставление и вынесение выбора

В случае, когда человек намеревается разблокировать мобильник взглядом, программа воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый уровень (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ блокируется.

Приспособление к изменениям внешнего вида

Увлекательная характеристика нынешних систем — возможность самообучения. Если вы постоянно открываете смартфон с новой укладкой или оптикой, система постепенно освежает эталонный шаблон вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических данных.

Большинство пользователи беспокоятся сохранять свои биометрические данные на смартфоне из-за вероятности утечки данных или хакерской атаки. Определенные организации, например Вулкан Казино Платинум, предлагают варианты для увеличения безопасности информации клиентов.

• Локальное сохранение: Большинство аппаратов сохраняет биометричные образцы исключительно в пределах безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не покидают гаджет и закрыты даже создателю.

• Шифрование: Все информация хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних девелоперов не обладают прямого доступа к биометрическим данным; они могут лишь требовать подтверждение верификации идентичности через системный API.

Следует упомянуть значимую деталь: в случае, если какой-то человек сможет получить физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют систему защиты от “слепого” разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие бывают виды распознавания лиц на изображениях?

На сегодняшний день можно определить выделить 3 ключевых способа к выполнению этой операции:

Программируемое плоское идентификация

Эксплуатируется только фронтальная видеокамера без вспомогательных датчиков глубины. Этот подход используется наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость осуществления; минимальная стоимость; быстрая работа при достаточном свете.
Минусы: легко одурачить фотографией; ненадежная деятельность ночью; слабая охрана.

Техническое трёхмерное оцифровка

Использует ИК камеру + проекционный модуль точек + сенсоры глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Достоинства: значительная надёжность; не получится исказить фото/видео; постоянная функционирование при любом освещении.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с дополнением ИИ

Задействуют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, как Vulkan Platinum и Google Pixel Face Unlock новейших поколений, объединяют фронтальную камеру c ИК датчиком движения Soli Radar для предотвращения от подделок руками/масками/видеоэкранами посторонних устройств.

Примеры использования разных техник

• iPhone линейки X/11/12/13/14 используют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые представил эквивалент Face ID среди Android.
• Samsung Galaxy S10/S20 имеют как софтверное плоское определение по фото селфи-камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro использует систему из ИК-подсветки + Dot Projector + ToF-сенсор

Вопросы безопасности и неверные сигналы

Несмотря на поразительный прогресс техники за последние лет, идеальных системы пока не наблюдается:

1. Вероятность обмана: Бюджетные мобильники без труда открываются высококачественной фотографией хозяина либо видеозаписью с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые безупречные системы могут спутать между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Изменения облика: Резкое похудение/увеличение массы тела, косметические процедуры либо повреждения в некоторых случаях требуют обновления данных биометрии.
4. Условия фотографирования: Яркая освещённость солнечным светом или же интенсивная тень могут уменьшить верность распознавания признаков.

Ниже некоторые советов по защищённому использованию:

• Для значимых операций всегда применяйте дополнительную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Систематически апгрейдите программное обеспечение телефона для защиты от актуальных атак;
• Включайте функцию “Требовать раскрытых глаз” в тех местах, где она имеется.

В каких местах также применяется технологии за исключением мобильных телефонов?

Хотя основная мысль нашей статьи посвящена в частности портативным гаджетам, необходимо сказать о других сферах применения технологии:

• Мониторинг прохода в рабочих помещениях и многоквартирных зданиях;
• Платёжные аппараты банков (“Face Pay”);
• Цифровые идентификационные документы современного образца;
• Комплексы видеомониторинга городских сервисов;
• Автоматизация отслеживания посещаемости учебных заведений/вузов;
• Авторизация участников компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Схожие программы реализуются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется техпроцесс в наше время?

Всякий годик проявляются современные концепции для улучшения уровня деятельности систем идентификации лиц:

1. Увеличивается чёткость сенсоров — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность ошибки;
2. Улучшаются искусственные интеллекты — новейшие архитектуры типа MobileNetV3 позволяют скоростно осваивать новым характеристикам вида пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Развиваются способы антиспуфинга — теперь смартфоны умеют различать реальные живые лица от неподвижных фотографий/маскировок по мельчайшим микродвижениям.
4. Интеграция со интеллектуальными приборами — умные часы могут автоматически блокировать смартфон, если обладатель отошёл далеко.
5. Появляются смешанные устройства — в частности объединяющие аудио идентификацию + лицо + пальцевой отпечаток.

Здесь, какие тенденции в особенности популярны сейчас:

1) Сокращение элементов

Компании пытаются минимизировать величину отверстия (“чёлки”) под сенсоры на экране за счёт внедрения компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на девайсе

Для улучшения приватности всё более обработки данных осуществляется на месте без пересылки информации во сторонний облачный услугу.

3) Стандартизация регламентов

Google энергично продвигает стандарт BiometricPrompt API, для того чтобы аналогичные площадки, например как Вулкан Платинум, и любые Android-программы были совместимы с любыми видами биометрии стандартизированно.

Какое решить сегодня?

Если вам всем важна предельная безопасность данных, подбирайте флагманские аппараты с вмонтированным ИК-излучателем или ToF-датчиком глубины.

• iPhone всех новейших версий
• Huawei Companion/P линейки
• Mi Expert
• Vivo X серии
• Oppo Обнаружить Х серии.

Если средства невелик – лучше выбирать традиционным методам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как дополнительную возможность комфорта.

Как улучшить удобство работы опции?

Есть пара советов для тех, кто уже использует разблокировку через лицо:

1. Периодически меняйте свою фото-шаблон, если значительно меняется внешность.
2. Не упускайте из виду чистить линзу передней камеры – загрязнения могут уменьшить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам включает камеру когда вы берёте его в руки.
4. В процессе записи пытайтесь держать лицевую часть ровно напротив камеры не допуская сильного наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от дисплея.

Возможности прогресса техники

В предстоящие годы можно предвкушать возникновения полностью бесконтактных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + речь + шаги + манипуляции руками!

Также вероятно возникновение новых способов обеспечения приватности – скажем, динамическое корректировка электронного образца после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее захватывающих техник нашего времени! Она обеспечивает интеракцию со мобильным устройством комфортнее чем раньше, и такие приложения, как Вулкан Казино Платинум, могут существенно повысить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как устроена эта технология в деталях, – будете в состоянии осознаннее выбирать свой будущий гаджет!