Как функционирует идентификация лиц в мобильных устройствах

Для чего мы выбираем разлочивание по лицевому распознаванию

В последние времена распознавание физиономий стало одной из наиболее востребованных функций для открытия умных телефонов. Всего пару лет тому назад большинство использующих удовлетворялись пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением таких технологий, как Вулкан Платинум, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь превращает эту возможность такой востребованной? Прежде всего, это удобно: не нужно запоминать сложные пароли или отыскивать нужный палец в темноте. Также, это оперативно: современные программы распознают лицо буквально за мгновения ока. В-третьих, это ощущение футуризма — словно в фильмах про вулкан платинум разведчиков.

Тем не менее за такой на первый взгляд простотой скрывается весь мир трудных техник и инженерных концепций. Позвольте нам понять, как конкретно функционирует распознавание лиц в актуальных гаджетах, какие существуют методы, насколько они надёжны и что нас предстоит.

Короткая хроника прогресса техники

Распознавание лиц как технология существует уже более 50 лет. Изначальные пробы машинного изучения облика были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры умели лишь определять силуэты головы и измерять расстояния между зрачками и ртом на монохромных снимках.

Первые торговые системы стали доступны в девяностых годах, но они были неидеальны: функционировали медленно и часто ошибались. Только с прогрессом нейронных сетей и таких платформ, как Vulkan Platinum, сильных мобильных чипов определение лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные решения.

Основные этапы функционирования устройства определения

Процесс идентификации лица можно условно поделить на несколько ключевых этапов:

1. Идентификация лица — аппарат определяет существование гуманного лица в изображении.
2. Извлечение характеристик — система исследует особенности облика: очертания зрительных органов, обонятельного органа, губ, положение бровей.
3. Построение структуры — создаётся неповторимый электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — созданный модель сверяется со записанной при внесении биометрической информацией владельца.
5. Принятие решения — если совпадение достаточно существенное, смартфон деблокируется.

Всякий из данных стадий требует особых алгоритмов и усовершенствований для быстрой работы прямо на устройстве.

Аппаратные составляющие: что находится внутри

Типичная селфи камера.

Простейший простой метод определения физиономии использует только переднюю камеру мобильного устройства. Такой метод внедрён во многочисленных доступных вариантах Android-девайсов.

Плюсы:

• Не нуждается в потребляет дополнительные сенсоров.
• Шустро работает при хорошем свете.

Минусы:

• Легко обмануть изображением или видеозаписью.
• Неправильно функционирует при плохом освещённости или необычных углах обзора.

Инфракрасная камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология является основой Face ID от Apple.

Как это работает:

• Точечный проекционный прибор проецирует на лицо юзера невидимую сетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 пятен).
• ИК камера регистрирует изменение формы данной решетки по плоскости физиономии.
• Получается трехмерная карта глубины глубины, которая практически невозможна для имитации стандартной фотографией или маской.

Плюсы

• Надёжная деятельность даже в полной темноте.
• Большая сопротивляемость к фальсификациям.
• Точность идентификации свыше 99%.

Добавочные сенсорные устройства

В определённых аппаратах используются также дополнительные датчики: ToF (Time-of-Flight), которые определяют время прохождения луча до объекта и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для построения более детализированной 3D-модели физиономии.

Эти инновации применяются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный интеллект на исполнении

Нынешние механизмы идентификации лиц неосуществимы в отсутствие применения artificial intelligence и machine learning. Именно благодаря таким технологиям, как Vulkan Platinum, устройство в состоянии узнавать владельца даже при метаморфозах внешности: новая укладка, растительность на лице, оптика или грим не становятся препятствием для деблокировки.

Обнаружение лиц

На первом этапе программа обязана быстро найти образ лица в пределах целого изображения камеры. Для этого применяются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN способен распознавать лицо даже с частичном перекрытии (например, платком или рукой).

Выделение важных моментов

После обнаружения лица устройство, такая как Vulkan Platinum, устанавливает положение основных точек: кончики глаз, кончик носа, контуры губ и так далее. Как правило используется от 68 до 128 главных точек на лицевой поверхности.

Это необходимо для нормализации визуала: если пользователь удерживает смартфон под наклоном, или склонил голову, программа исправляет картинку до нормального состояния для дальнейшего анализа.

Формирование биометрического модели

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Этот образец весьма затруднительно подделать: он не удерживает само фото юзера, а лишь особенные черты его внешности, что делает его оптимальным для таких платформ, как Вулкан Казино Платинум.

Сравнение и вынесение заключения

В случае, когда пользователь намеревается разблокировать телефон взглядом, механизм осуществляет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ запрещается.

Приспособление к метаморфозам внешности

Занимательная характеристика актуальных систем — способность самостоятельного обучения. Если ты часто разблокируете телефон с обновленной стрижкой или оптикой, система постепенно модернизирует эталонный шаблон вашего внешности для увеличения точности действия без снижения уровня безопасности.

Охрана биометрических данных данных.

Большинство клиенты боятся сохранять свои био-идентификационные данные на смартфоне из-за угрозы потери данных или хакерской атаки. Определенные организации, такие как Вулкан Казино Платинум, предлагают методы для улучшения защиты данных пользователей.

• Локальное хранение: Преимущественно аппаратов сохраняет биометрические модели лишь внутрь защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают устройство и недоступны даже изготовителю.

• Шифрование: Все сведения сохраняются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних девелоперов не обладают непосредственного возможности доступа к биометрическим; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Стоит подчеркнуть существенную подробность: если какой-то человек сможет получить физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители внедряют защиту от автоматического разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды идентификации лиц?

На сегодняшний день можно выделить различить три главных способа к осуществлению этой операции:

Софтверное двухмерное идентификация

Эксплуатируется только фронтальная камера без дополнительных датчиков дистанции. Этот подход встречается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность реализации; минимальная затраты; быстрая деятельность при хорошем освещении.
Минусы: просто одурачить фотографией; нестабильная работа ночью; слабая защищенность.

Оборудование для трёхмерное сканирование

Применяет инфракрасную камеру + проектор пикселей + датчики глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Преимущества: большая надежность; нельзя обмануть изображение/видеозапись; стабильная работа в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с ИИ-дополнением

Используют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например Vulkan Platinum и Google Pixel Face Unlock новейших версий, сочетают фронтальную камеру c ИК сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации использования разнообразных методов

• iPhone модели X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые предложил подобие Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 имеют как софтверное двухмерное идентификацию по снимку селфи-камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro применяет систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Проблемы защиты и ложные срабатывания

Несмотря на замечательный развитие техники за недавние лет, совершенных системы пока не наблюдается:

1. Шанс подвоха: Доступные смартфоны легко доступны четкой снимком владельца или видеозаписью с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые совершенные устройства могут перепутать между однояйцевыми близнецами либо родственниками с очень похожей внешностью.
3. Метаморфозы облика: Внезапное снижение веса/увеличение массы тела, хирургические вмешательства либо травмы иногда необходимы для перерегистрации биометрических данных.
4. Условия фотографирования: Интенсивная засветка солнцем или плотная затенение могут понизить точность распознавания признаков.

Ниже пара рекомендаций по защищённому эксплуатации:

• Для значимых операций всегда внедряйте двухфакторную аутентификацию;
• Не активируйте возможность “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Систематически апгрейдите прошивку смартфона для предотвращения угроз от современных угроз;
• Включайте опцию “Требовать открытых глаз” там, где она есть.

Где ещё находится применение технология кроме смартфонов?

Несмотря на то, что основная мысль этой публикации касается конкретно смартфонам и планшетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Контроль доступа в офисах и многоквартирных зданиях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Цифровые удостоверения личности современного поколения;
• Комплексы видеомониторинга муниципальных подразделений;
• Автоматизация регистрации присутствия школ/университетов;
• Аутентификация юзеров персональных компьютеров/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или мобильника! Аналогичные проекты развиваются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом меняется технический процесс в наше время?

Любой годик возникают современные концепции для усовершенствования качества деятельности систем распознавания лиц:

1. Увеличивается чёткость сенсоров — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше риск неточности;
2. Совершенствуются нейронные сети — современные структуры модели MobileNetV3 обеспечивают возможность быстро адаптироваться к дополнительным особенностям облика пользователя прямо на устройстве без пересылки информации в облачное хранилище.
3. Улучшаются методы антиспуфинга — теперь смартфоны умеют отличать настоящие движущиеся облики от фиксированных снимков/масок по незаметным движениям кожи.
4. Интеграция со умными устройствами — умные часы могут самостоятельно заблокировать мобильный телефон, если обладатель ушёл далеко.
5. Проявляются комбинированные устройства — к примеру объединяющие голосовую опознание + лицо + пальцевой отпечаток.

Итак, которые тренды в особенности востребованы в данный момент:

1) Миниатюризация компонентов

Компании стараются сократить размер выреза (“чёлки”) для сенсоры на экране за счёт встраивания маленьких ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на аппарате

Для улучшения конфиденциальности всё более расчётов осуществляется на месте без отправки информации во внешний облачный сервис.

3) Стандартизация норм

Гугл активно продвигает норму BiometricPrompt API, для того чтобы подобные площадки, вроде Вулкан Платинум, и любые Android-аппы были совместимы с различными типами биометрии стандартизированно.

Что подобрать сегодня?

Если вам всем нужна максимальная сохранность данных, остановите выбор на флагманские модели со встроенным ИК-проектором либо ToF-сенсором глубины.

• iPhone каждого новейших версий
• Huawei Partner/P серии
• Mi Expert
• Vivo X серии
• Оппо Найти X серий.

Если средства скромен – лучше отдавать предпочтение обычным средствам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как второстепенную возможность комфорта.

Как улучшить практичность использования опции?

Есть некоторые хитростей для людей, кто уже пользуется разблокировку через лицо:

1. Периодически обновляйте свою фото-шаблон, если кардинально меняется внешний вид.
2. Не пренебрегайте очищать объектив передней камеры – разводы могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам запускает камеру как только вы берёте его в руки.
4. При регистрации старайтесь удерживать голову прямо впереди объектива без значительного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвели взгляд от дисплея.

Перспективы прогресса техники

В предстоящие периоды можно предвкушать развития полностью безконтактных способов распознавания человека сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + манера ходьбы + жесты рук!

Также вероятно появление новых подходов обеспечения личной информации – например, динамическое изменение диджитал образца после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из очень захватывающих технологий нашего времени! Она предоставляет интеракцию со смартфоном проще чем раньше, и такие аппы, как Вулкан Казино Платинум, могут существенно улучшить ваш опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как функционирует эта система в деталях, – сможете более осмысленно подбирать свой следующий устройство!