Как функционирует определение лиц в смартфонах

Почему мы останавливаемся на разблокировку по лицу

В прошлые годы определение лиц стало одной из самых распространённых возможностей для разблокировки умных телефонов. Всего некоторые годков назад большинство использующих довольствовались PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, например Вулкан Платинум, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что превращает эту возможность очень нужной? Прежде всего, это практично: не нужно запоминать сложные пароли или искать нужный палец в тьме. Также, это быстро: современные алгоритмы идентифицируют лицо практически за доли секунды. В-третью очередь, это чувство будущего — будто в кинолентах про вулкан платинум зеркало шпионов.

Тем не менее за данной кажущейся легкостью скрывается весь мир сложных техник и инженерных решений. Позвольте нам понять, как точно работает идентификация по лицу в новейших мобильных телефонах, какие существуют способы, насколько они надёжны и что нас предстоит.

Короткая повествование прогресса техники

Идентификация лиц как технология существует уже более 50 годов. Первые попытки автоматизированного исследования облика были сделаны еще в 1960-х годах в лабораториях США. Тогда ЭВМ умели лишь обозначать контуры лица и вычислять дистанции между глазами и устами на черно-белых снимках.

Первые коммерческие установки стали доступны в девяностых годах, но они были далеки от совершенства: действовали неспешно и часто ошибались. Только с прогрессом синтетических сетей и таких систем, как Vulkan Platinum, сильных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои разработки.

Основные шаги действия системы определения

Процесс идентификации лица можно ориентировочно поделить на несколько основных этапов:

1. Идентификация лиц — устройство выявляет присутствие людского лица в кадре.
2. Извлечение особенностей — механизм анализирует особенности физиономии: форму зрительных органов, носа, губ, позицию надбровных дуг.
3. Построение модели — создаётся особенный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — полученный модель сверяется со сохранённой при внесении биометрической данными владельца.
5. Принятие определения — если совпадение достаточно высокое, смартфон открывается.

Любой из указанных шагов нуждается в особых методов и усовершенствований для оперативной работы непосредственно на девайсе.

Аппаратные составляющие: что находится внутри

Типичная фронтальная камера.

Самый простой простой вариант идентификации облика задействует исключительно переднюю камеру смартфона мобильного устройства. Такой подход внедрён во многочисленных недорогих моделях Android-устройств.

Преимущества:

• Не нуждается в потребляет внешних датчиков.
• Оперативно работает при достаточном освещённости.

Минусы:

• Легко одурачить снимком или видео.
• Неудачно работает при низком освещённости или нестандартных ракурсах.

Инфракрасная камера и пунктирный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Каким образом это функционирует:

• Точечный проекционный прибор проецирует на физиономию пользователя невидимую решетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
• Инфракрасная камера регистрирует деформацию данной решетки по поверхности физиономии.
• Получается трёхмерная карта глубины глубины, которая почти невозможна для подделки типичной снимком или маской.

Преимущества

• Надёжная деятельность даже в полной темноте.
• Сильная защита к имитациям.
• Точность определения свыше 99%.

Добавочные сенсорные устройства

В определённых устройствах используются также экстра сенсорные устройства: ToF (Time-of-Flight), которые определяют период прохождения света до объекта и обратно; Цветные-датчики глубины; специальные световые лидары для формирования более точной 3D-модели лица.

Эти инновации встречаются в основном во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: синтетический разум в исполнении

Текущие системы идентификации физиономий немыслимы без применения искусственного интеллекта и machine learning. Именно вследствие таким инновациям, как Vulkan Platinum, устройство способно узнавать юзера даже при метаморфозах внешнего вида: новая причёска, щетина, очки или грим не становятся помехой для деблокировки.

Детектирование физиономии

На стартовом этапе система обязана быстро распознать образ лица внутри целого изображения камеры. Для этого задействуются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые “обучены” находить человеческие лица среди множества других объектов.

Пример: метод MTCNN в состоянии распознавать лицо даже с частичном перекрытии (например, шарфом или рукой).

Идентификация основных аспектов

После идентификации лица механизм, такая как Vulkan Platinum, вычисляет местоположение основных точек: кончики глаз, конец носа, контуры губ и так далее. Часто используется от 68 до 128 основных маркеров на лицевой области.

Это действие необходимо для нормализации изображения: если пользователь удерживает смартфон под углом, или склонил голову, программа исправляет картинку до стандартного положения для дальнейшего анализа.

Формирование биометрического образца

Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Такой образец крайне сложно подделать: он не удерживает непосредственно изображение юзера, а лишь особенные черты его вида, что делает его оптимальным для таких площадок, как Вулкан Казино Платинум.

Сопоставление и принятие заключения

В случае, когда юзер желает разблокировать смартфон глазами, механизм воспроизводит все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный порог (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ блокируется.

Привыкание к трансформациям внешнего вида

Интересная характеристика современных систем — возможность самообучения. Если вы постоянно открываете телефон с свежей прической или оптикой, система постепенно модернизирует основной шаблон вашего лица для увеличения точности действия без ухудшения безопасности.

Охрана биометрических информации.

Многие юзеры опасаются хранить свои биометрические идентификационные данные на смартфоне из-за угрозы утечки данных или взлома устройства. Иные фирмы, такие как Вулкан Казино Платинум, предлагают варианты для повышения сохранности данных клиентов.

• Локальное сбережение: Основная часть аппаратов хранит био-идентификационные шаблоны только в пределах защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают устройство и закрыты в том числе изготовителю.

• Шифрование: Все информация сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних разработчиков не имеют прямого доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения личности через системный API.

Стоит отметить существенную подробность: если какой-то человек достанет физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство компании осуществляют защиту от автоматического разблокирования — например, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются категории распознавания лиц на изображениях?

Сегодня можно выделить различить три основных метода к выполнению этой операции:

Программное плоское идентификация

Применяется только передняя камера без экстра датчиков дистанции. Такой метод встречается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость реализации; низкая цена; скоростная деятельность при хорошем свете.
Минусы: просто одурачить снимком; неустойчивая работа ночью; низкая защищенность.

Техническое объёмное сканирование

Задействует инфракрасную камеру + проектор пикселей + сенсоры глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: значительная надёжность; невозможно обмануть изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с ИИ-дополнением

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, как Vulkan Platinum и Google Pixel Face Unlock новейших поколений, объединяют фронталку c ИК датчиком мобильности Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями чужих устройств.

Иллюстрации использования разнообразных техник

• iPhone модели X/11/12/13/14 задействуют только физическое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition первый раз представил подобие Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 имеют как программное обеспечение плоское идентификацию по снимку фронтальной камерой, так и сканер радужки глаза.
• Huawei Mate20 Pro применяет набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и ложные сигналы

Несмотря на замечательный успехи техники за последние лет, идеальных системы пока не наблюдается:

1. Вероятность мошенничества: Доступные телефоны без труда доступны качественной изображением хозяина или же видео с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные системы могут ошибиться между однояйцевыми близнецами либо родичами с очень схожей внешностью.
3. Трансформации внешности: Резкое похудение/увеличение массы тела, косметические процедуры или травмы в некоторых случаях требуют перерегистрации биометрии.
4. Условия съёмки: Сильная подсветка солнцем или интенсивная тень могут уменьшить верность распознавания признаков.

Вот некоторые подсказок по защищённому эксплуатации:

• Для значимых операций всегда используйте двухфакторную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
• Систематически обновляйте прошивку смартфона для предотвращения угроз от современных угроз;
• Включайте функцию “Требовать открытых глаз” везде, где она доступна.

В каких областях также находится применение технологии кроме смартфонов?

Хотя предмет данной статьи посвящена в частности портативным гаджетам, необходимо сказать о прочих направлениях внедрения технологии:

• Контроль входа в рабочих помещениях и резиденциях;
• Платёжные терминалы банков (“Face Pay”);
• Электронные паспорта современного типа;
• Системы видеонаблюдения городских сервисов;
• Автоматизация регистрации присутствия образовательных учреждений/вузов;
• Вход участников ПК/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без карты или мобильника! Схожие проекты развиваются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом меняется техпроцесс сегодня?

Любой годик возникают свежие мысли для повышения стандарта функционирования систем идентификации лиц:

1. Увеличивается чёткость сенсоров — чем больше деталей фиксируется камерой/датчиками глубины, тем меньше шанс неточности;
2. Совершенствуются нейросети — новейшие архитектуры модели MobileNetV3 дают возможность оперативно адаптироваться к дополнительным особенностям облика владельца непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются способы антиспуфинга — теперь телефоны могут отличать настоящие живые облики от неподвижных фото/маскировок по незаметным микродвижениям.
4. Синхронизация со интеллектуальными приборами — смарт-часы могут автоматически заблокировать мобильный телефон, если владелец отошёл далеко.
5. Проявляются комбинированные механизмы — например комбинирующие речевую опознание + лицо + отпечаток пальца.

Здесь, какие тренды очень популярны сейчас:

1) Миниатюризация деталей

Производители намереваются минимизировать размер выреза (“чёлки”) под сенсоры на экране за счёт встраивания миниатюрных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для улучшения приватности всё больше вычислений выполняется локально без пересылки информации во дополнительный облачный услугу.

3) Упорядочивание норм

Google энергично пропагандирует эталон BiometricPrompt API, для того чтобы такие системы, как Вулкан Платинум, и все Android-приложения могли работать с всеми формами биометрии унифицированно.

Что выбрать на сегодня?

Если вам всем важна наивысшая защита информации, выбирайте передовые устройства с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone каждого актуальных моделей
• Huawei Mate/Series P линейки
• Mix Professional
• Vivo X серии
• Oppo Найти X линейки.

Если бюджет ограничен – лучше предпочесть обычным методам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как дополнительную возможность удобства.

Каким способом увеличить удобство функционирования функции?

Есть некоторые советов для тех, кто уже пользуется функцию распознавания лица:

1. Часто обновляйте свою фотографию-шаблон, если значительно изменяется облик.
2. Не забывайте очищать объектив передней камеры – разводы могут уменьшить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам активирует камеру как только вы поднимаете его.
4. Во время записи старайтесь удерживать лицо ровно напротив объектива без резкого наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отворачиваетесь от экрана.

Возможности развития инноваций

В скоро наступающие времена можно предполагать развития полностью дистанционных способов опознания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + манера ходьбы + движения рук!

Также возможно развитие новых способов защиты приватности – например, переменное изменение цифрового образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень захватывающих инноваций нашего эпохи! Она делает интеракцию со смартфоном проще чем до этого, и такие программы, как Вулкан Казино Платинум, могут значительно оптимизировать ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как функционирует эта технология в деталях, – будете в состоянии осознаннее выбирать свой будущий устройство!