Как функционирует идентификация лиц в смартфонах

Для чего мы останавливаемся на разблокирование по фейсу

В последние времена распознавание лиц превратилось в одной из самых распространённых функций для открытия мобильных телефонов. Всего несколько годов ранее основная масса юзеров довольствовались пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением таких технологий, например Вулкан Платинум, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь обуславливает данную функцию настолько популярной? Во-первых, это практично: не нужно удерживать в памяти сложные пароли или находить правильный палец в темноте. Также, это быстро: современные алгоритмы идентифицируют лицо буквально за мгновение. В-третьем пункте, это ощущение футуризма — будто в кинофильмах про Вулкан казино шпионов.

Впрочем за такой на первый взгляд несложностью таится весь универсум сложных технологий и инженерных разработок. Давайте исследовать, как точно действует идентификация по лицу в новейших гаджетах, какие бывают способы, насколько они надёжны и что нас ждёт впереди.

Краткая хроника развития технологии

Идентификация лиц как методика существует уже более пятидесяти годов. Начальные пробы машинного изучения лиц были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ способны были лишь обозначать контуры черепа и измерять промежутки между очами и устами на черно-белых изображениях.

Изначальные коммерческие системы появились в девяностых годах, но они были неидеальны: работали медленно и нередко ошибались. Только с развитием искусственных сетей и таких систем, как Vulkan Platinum, мощных мобильных микросхем идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять личные разработки.

Ключевые этапы действия механизма определения

Процесс определения лица можно ориентировочно разделить на несколько ключевых этапов:

Распознавание лица — камера выявляет наличие людского лица в снимке.
Извлечение признаков — механизм изучает контуры физиономии: конфигурацию зрительных органов, обонятельного органа, уст, позицию бровей.
Построение модели — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
Сравнение со образцом — полученный модель сопоставляется с зафиксированной при учёте биометрической информацией владельца.
Принятие определения — если соответствие достаточно высокое, смартфон открывается.

Каждый из указанных этапов запрашивает индивидуальных алгоритмов и усовершенствований для быстрой работы прямо на устройстве.

Аппаратные компоненты: что скрыто внутри них

Стандартная фронтальная камера.

Наиболее простой способ идентификации лица использует только переднюю камеру смартфона смартфона. Данный метод внедрён во различных доступных моделях Android-устройств.

Преимущества:

Не нуждается в внешних сенсоров.
Шустро работает при хорошем свете.

Отрицательные стороны:

Легко ввести в заблуждение изображением или видеозаписью.
Плохо действует при плохом освещённости или необычных углах обзора.

Инфракрасная фотокамера и точечный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Каким образом это работает:

Точечный проекционный прибор проецирует на физиономию пользователя невидимую структуру из тысяч инфракрасных меток (например, Face ID задействует около 30 000 меток).
Инфракрасная устройство фиксирует искривление данной сетки по поверхности лица.
Создаётся трёхмерная карта глубины глубины, что почти невозможна для фальсификации обычной фотографией или маскировкой.

Преимущества

Надёжная функционирование даже в полной тьме.
Сильная устойчивость к подделкам.
Точность определения свыше 99%.

Добавочные датчики

В отдельных девайсах используются также экстра сенсоры: ToF (Time-of-Flight), которые определяют период прохождения света до предмета и обратно; Трехцветные-датчики глубины; специальные оптические измерители расстояния для формирования более аккуратной 3D-модели физиономии.

Эти технологии используются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искусственный разум на работе

Современные устройства опознания физиономий немыслимы без применения ИИ и машинного обучения. Именно из-за таким разработкам, как Vulkan Platinum, устройство в состоянии идентифицировать юзера даже при трансформациях внешнего вида: новая причёска, борода, линзы или макияж не становятся барьером для открытия.

Обнаружение лиц

При первом шаге система должна мгновенно распознать ликовое изображение внутри целого изображения камеры. Для данной цели задействуются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы идентифицировать лица людей среди множества других объектов.

Пример: процесс MTCNN в состоянии обнаруживать лицо даже в случае неполном перекрытии (например, шалью или ладонью).

Идентификация ключевых аспектов

После распознавания лица устройство, такая как Vulkan Platinum, вычисляет местоположение ключевых точек: уголки глаз, кончик носа, края губ и так далее. Часто используется от 68 до 128 главных маркеров на лицевой области.

Это необходимо для нормализации картинки: если пользователь удерживает мобильник под наклоном, или склонил голову, программа исправляет изображение до стандартного положения для дальнейшего анализа.

Создание биометрии образца

Далее нейросеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот образец очень трудно сфальсифицировать: он не сохраняет непосредственно изображение юзера, а лишь особенные черты его облика, что делает его совершенным для таких систем, как Вулкан Казино Платинум.

Сравнение и принятие решения

В случае, когда юзер намеревается открыть мобильник взором, система осуществляет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный границу (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ запрещается.

Приспособление к изменениям облика

Увлекательная черта актуальных систем — способность самостоятельного обучения. Если ты постоянно открываете телефон с свежей укладкой или очками, система постепенно освежает эталонный модель вашего внешности для увеличения точности действия без ухудшения безопасности.

Охрана биометрических данных.

Множество пользователи опасаются хранить свои биометрические идентификационные данные на смартфоне из-за угрозы утечки информации или взлома гаджета. Иные организации, вроде Вулкан Казино Платинум, предоставляют методы для увеличения сохранности данных юзеров.

Локальное хранение: Большинство девайсов сохраняет биометричные модели только в пределах безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не покидают гаджет и недоступны даже изготовителю.
Шифрование: Все данные сберегаются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Приложения внешних разработчиков не обладают непосредственного возможности доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Следует упомянуть значимую особенность: если какой-то человек достанет доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители реализуют меры безопасности от “слепого” разблокирования — например, просят разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие бывают виды распознавания лиц на изображениях?

В настоящее время можно определить различить три главных подхода к выполнению этой задачи:

Программное плоское идентификация

Применяется только передняя камера без дополнительных сенсоров глубины. Такой метод наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; низкая затраты; скоростная функционирование при качественном свете.
Минусы: легко одурачить снимком; неустойчивая деятельность ночью; низкая безопасность.

Оборудование для 3D оцифровка

Использует инфракрасную камеру + проектор пикселей + датчики дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: значительная надежность; нельзя подделать изображение/видеозапись; стабильная деятельность при любом освещении.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с ИИ-дополнением

Применяют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например Vulkan Platinum и Google Pixel Face Unlock современных поколений, сочетают фронталку c ИК датчиком мобильности Soli Radar для предотвращения от подделок руками/масками/видеодисплеями посторонних устройств.

Образцы использования разнообразных методов

iPhone серии X/11/12/13/14 задействуют только аппаратное трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID в числе Android.
Samsung Galaxy S10 версия/S20 имеют как программное обеспечение 2D определение по снимку селфи-камерой, так и сканер глазного ириса.
Huawei Mate20 Pro применяет набор из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и ошибочные сигналы

Несмотря на замечательный успехи техники за недавние годы, идеальных механизмов пока не существует:

Шанс обмана: Доступные смартфоны легко “разблокируются” качественной фотографией хозяина либо видео с экрана другого устройства.
Идентичные двойняшки: Даже самые идеальные механизмы могут спутать между однояйцевыми близнецами либо родичами с очень похожей внешностью.
Метаморфозы внешности: Резкое утрата веса/набор веса, хирургические вмешательства или повреждения в некоторых случаях требуют перерегистрации биометрии.
Условия записи: Сильная освещённость солнечным светом или же плотная затенение могут уменьшить точность распознавания признаков.

Вот некоторые советов по защищённому применению:

Для критически важных операций всегда применяйте двухэтапную аутентификацию;
Не включайте функцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
Систематически обновляйте прошивку ПО телефона для защиты от актуальных атак;
Включайте функцию “Требовать распахнутых глаз” везде, где она доступна.

В каких областях ещё применяется технологии помимо смартфонов?

Несмотря на то, что предмет данной публикации сосредоточена на конкретно мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:

Контроль входа в рабочих помещениях и многоквартирных зданиях;
Платёжные аппараты банков (“Face Pay”);
Цифровые паспорта современного типа;
Установки видеоконтроля муниципальных подразделений;
Автоматизирование регистрации явки учебных заведений/институтов;
Вход юзеров ПК/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Аналогичные проекты развиваются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом трансформируется технический процесс сегодня?

Всякий годочек возникают современные концепции для улучшения стандарта деятельности систем идентификации лиц:

Увеличивается разрешение сенсоров — чем больше информации фиксируется камерой/датчиками глубины, тем меньше шанс погрешности;
Улучшаются искусственные интеллекты — современные архитектуры модели MobileNetV3 обеспечивают возможность оперативно осваивать дополнительным особенностям внешности пользователя непосредственно на девайсе без отправки данных в облако.
Совершенствуются методы антиспуфинга — теперь мобильные устройства способны отличать подлинные живые лица от неподвижных снимков/масок по незаметным движениям кожи.
Интеграция со умными устройствами — интеллектуальные часы могут авто закрыть доступ к смартфон, если пользователь удалился на значительное расстояние.
Возникают комбинированные устройства — в частности совмещающие голосовую идентификацию + лицо + дактилоскопический след.

Здесь, те тенденции в особенности востребованы в данный момент:

1) Уменьшение компонентов

Изготовители намереваются минимизировать величину отверстия (“чёлки”) для сенсоры на дисплее за счёт интеграции миниатюрных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для повышения конфиденциальности всё более вычислений осуществляется внутри устройства без передачи информации во сторонний облачный сервис.

3) Упорядочивание регламентов

Гугл активно продвигает норму BiometricPrompt API, для того чтобы подобные системы, вроде Вулкан Платинум, и любые Android-аппы могли работать с различными типами биометрии стандартизированно.

Что подобрать сегодня?

В случае если вам всем нужна максимальная защита информации, выбирайте флагманские аппараты с вмонтированным ИК-проектором или же ToF-датчиком глубины.

iPhone всех актуальных версий
Huawei Mate/P Series серии
Mix Professional
Vivo X линейки
Oppo Найти Икс серий.

Если финансы невелик – лучше отдавать предпочтение классическим методам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как второстепенную опцию удобства.

Каким способом улучшить удобство использования функции?

Есть некоторые советов для пользователей, кто уже использует разблокировку через лицо:

Часто меняйте свою фотографию-шаблон, если сильно меняется облик.
Не пренебрегайте чистить линзу фронтальной камеры – пятна могут понизить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам активирует камеру если вы поднимаете его.
Во время регистрационного процесса старайтесь держать лицевую часть ровно напротив камеры без значительного наклона головы.
Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от экрана.

Возможности развития инноваций

В скоро наступающие периоды можно ожидать возникновения полностью безконтактных способов опознания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + шаги + манипуляции руками!

Также возможно появление новых способов охраны конфиденциальности – к примеру, динамическое модификация диджитал шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень захватывающих техник нашего времени! Она предоставляет общение со смартфоном проще чем до этого, и такие приложения, как Вулкан Казино Платинум, могут значительно оптимизировать ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как функционирует эта технология внутри, – будете в состоянии вдумчиво выбирать свой будущий гаджет!