Каким способом работает распознавание лиц в мобильных устройствах

Почему мы выбираем разлочивание по лицу

В прошлые годы определение лиц стало одной из наиболее востребованных функций для деблокировки умных телефонов. Всего несколько годов назад большинство юзеров довольствовались пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, например Вулкан Платинум, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект превращает данную функцию настолько популярной? Прежде всего, это удобно: не нужно удерживать в памяти сложные пароли или искать нужный палец в тьме. Кроме того, это оперативно: современные программы распознают лицо фактически за мгновения ока. В-третью очередь, это чувство будущего — словно в фильмах про Вулкан казино разведчиков.

Тем не менее за такой на первый взгляд простотой таится целый мир комплексных методов и инженерных концепций. Давайте понять, как именно функционирует распознавание лиц в современных смартфонах, какие применяются методы, насколько они безопасны и что нас ожидает в будущем.

Краткая история развития инноваций

Идентификация лиц как технология существует уже более пятидесяти годов. Изначальные эксперименты автоматизированного исследования облика были осуществлены еще в 1960-х годах в лабораториях США. Тогда ЭВМ умели лишь выделять очертания лица и вычислять промежутки между зрачками и губами на ахроматических изображениях.

Изначальные коммерческие установки возникли в девяностых годах, но они были несовершенны: функционировали медленно и часто ошибались. Только с эволюцией искусственных сетей и таких систем, как Vulkan Platinum, сильных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать собственные разработки.

Основные этапы действия системы определения

Процесс распознавания лица можно ориентировочно сегментировать на несколько основных этапов:

1. Распознавание лица — устройство распознает наличие гуманного образа в кадре.
2. Извлечение характеристик — система изучает черты облика: очертания глаз, обонятельного органа, уст, положение надбровных дуг.
3. Построение модели — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с эталоном — созданный образец сопоставляется со сохранённой при регистрации биометрической информацией владельца.
5. Принятие решения — если сходство достаточно существенное, смартфон разблокируется.

Любой из данных стадий запрашивает особых методов и усовершенствований для оперативной работы прямо на устройстве.

Железные элементы: что скрыто внутри них

Стандартная фронтальная камера.

Наиболее простой вариант распознавания физиономии применяет только лицевую видеокамеру мобильного устройства. Данный способ осуществлён во различных бюджетных моделях Android-устройств.

Преимущества:

• Не нуждается в нуждается в дополнительных сенсоров.
• Быстро действует при качественном освещении.

Недостатки:

• Легко ввести в заблуждение снимком или видеозаписью.
• Неправильно действует при слабом свете или непривычных ракурсах.

ИК фотокамера и пунктирный проекционный аппарат

Более продвинутые системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.

Каким способом это функционирует:

• Точечный проекционный прибор показывает на лицо использующего невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 меток).
• Инфракрасная устройство записывает деформацию данной сетки по поверхности лица.
• Создаётся трёхмерная глубинная карта глубины, что практически неподвластна для фальсификации стандартной снимком или маскировкой.

Преимущества

• Надёжная деятельность даже в полной тьме.
• Большая сопротивляемость к фальсификациям.
• Точность идентификации свыше 99%.

Дополнительные сенсоры

В отдельных аппаратах используются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют время распространения света до предмета и обратно; RGB-датчики глубины; специальные оптические лидары для формирования более аккуратной 3D-модели лица.

Эти разработки используются чаще всего во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: искусственный разум в действии

Нынешние системы опознания лиц невозможны при отсутствии эксплуатации ИИ и machine learning. Именно вследствие таким технологиям, как Vulkan Platinum, аппарат способно идентифицировать владельца даже при изменениях облика: новая стрижка, борода, оптика или макияж не становятся помехой для разблокировки.

Распознавание физиономии

На первом стадии алгоритм необходимо оперативно обнаружить ликовое изображение среди полного изображения с камеры. Для данной цели применяются многоуровневые классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены находить лиц человека среди множества других объектов.

Пример: алгоритм MTCNN в состоянии обнаруживать облик даже при частичном перекрытии (например, платком или рукой).

Идентификация важных аспектов

После обнаружения лица механизм, такая как Vulkan Platinum, определяет положение основных точек: края глаз, конец носа, границы губ и так далее. Обычно используется от 68 до 128 ключевых маркеров на лицевой поверхности.

Данное необходимо для стабилизации визуала: если человек держит мобильник под наклоном, или повернул голову, программа исправляет картинку до стандартного положения для последующего изучения.

Формирование биометрии шаблона

Далее нейронная сеть строит компактное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 вещественных чисел.

Этот формат весьма затруднительно сфальсифицировать: он не удерживает непосредственно изображение пользователя, а лишь особенные черты его облика, что делает его совершенным для таких платформ, как Вулкан Казино Платинум.

Сопоставление и принятие заключения

Если юзер желает разлочить мобильник взором, механизм воспроизводит все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный уровень (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ блокируется.

Адаптация к изменениям внешности

Занимательная черта нынешних систем — возможность самостоятельного обучения. Если ты часто разблокируете телефон с свежей прической или очками, программа постепенно модернизирует основной образец вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрических информации.

Многие юзеры беспокоятся сохранять свои био-идентификационные данные на смартфоне из-за вероятности утечки данных или хакерской атаки. Некоторые фирмы, вроде Вулкан Казино Платинум, предлагают методы для увеличения сохранности сведений клиентов.

• Локальное сохранение: Преимущественно девайсов сохраняет биометрические образцы лишь внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют гаджет и закрыты даже создателю.

• Шифрование: Все информация хранятся только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних девелоперов не обладают прямого доступа к биометрическим данным; они могут лишь требовать подтверждение верификации идентичности через системный API.

Стоит подчеркнуть значимую деталь: в случае, если кто-либо сможет получить доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители реализуют защиту от “слепого” разблокирования — к примеру, заставляют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие бывают категории распознавания лиц на изображениях?

В настоящее время можно выделить три главных способа к реализации этой задачи:

Программируемое двухмерное идентификация

Используется только лицевая видеокамера без экстра детекторов дистанции. Этот метод используется наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота реализации; низкая цена; оперативная работа при хорошем свете.
Минусы: легко одурачить фотографией; нестабильная деятельность ночью; низкая защищенность.

Оборудование для объёмное сканирование

Задействует ИК видеокамеру + проектор точек + сенсоры глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: значительная надёжность; не получится подделать фото/видео; стабильная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с дополнением ИИ

Применяют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как Vulkan Platinum и Google Pixel Face Unlock последних версий, объединяют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для защиты от подделок руками/масками/видеоэкранами посторонних устройств.

Образцы применения разных методов

• iPhone линейки X/11/12/13/14 используют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз внедрил подобие Face ID среди Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное обеспечение 2D определение по изображению фронталкой, так и датчик ириса глаза.
• Huawei Mate20 Pro использует систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и неверные срабатывания

Несмотря на впечатляющий прогресс техники за последние лет, совершенных механизмов пока не существует:

1. Возможность подвоха: Бюджетные телефоны просто открываются четкой изображением владельца или видеозаписью с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные устройства могут перепутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
3. Трансформации облика: Стремительное утрата веса/увеличение массы тела, пластические операции либо травмы порой требуют повторной регистрации биометрии.
4. Условия съёмки: Интенсивная подсветка солнцем или же плотная тень могут понизить аккуратность определения признаков.

Ниже пара рекомендаций по надёжному использованию:

• Для критически важных операций всегда используйте дополнительную аутентификацию;
• Не активируйте возможность “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Постоянно апгрейдите программное обеспечение телефона для защиты от новых видов атак;
• Включайте настройку “Требовать открытых глаз” в тех местах, где она имеется.

В каких местах дополнительно используется технологии за исключением смартфонов?

Пускай тема данной статьи посвящена конкретно мобильным устройствам, необходимо сказать о других сферах применения технологии:

• Контроль прохода в офисах и многоквартирных зданиях;
• Платёжные устройства банков (“Face Pay”);
• Электронные удостоверения личности последнего типа;
• Системы видеомониторинга городских подразделений;
• Автоматизация отслеживания присутствия образовательных учреждений/университетов;
• Авторизация юзеров компьютеров/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через барьер без пластика или мобильника! Похожие инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом трансформируется технический процесс в нынешнее время?

Любой годочек появляются современные концепции для усовершенствования уровня деятельности систем лицевого распознавания:

1. Увеличивается разрешение сенсорных устройств — чем больше деталей фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность погрешности;
2. Совершенствуются нейросети — современные архитектуры вида MobileNetV3 дают возможность быстро обучаться дополнительным чертам облика пользователя прямо на устройстве без отправки данных в облако.
3. Развиваются технологии антиспуфинга — теперь смартфоны могут различать реальные живые лица от статичных фото/маскировок по микроскопическим движениям кожи.
4. Взаимодействие со смарт-гаджетами — смарт-часы могут авто заблокировать смартфон, если обладатель отошёл далеко.
5. Возникают смешанные системы — в частности объединяющие голосовую идентификацию + лицо + отпечаток пальца.

Итак, которые направления в особенности востребованы на сегодняшний день:

1) Уменьшение компонентов

Производители намереваются сократить габариты выреза (“чёлки”) под датчики на экране за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для увеличения приватности всё больше вычислений осуществляется локально без пересылки данных во сторонний облачный сервис.

3) Унификация стандартов

Google интенсивно продвигает стандарт BiometricPrompt API, с целью чтобы такие платформы, как Вулкан Платинум, и каждые Android-аппы могли работать с различными типами биометрии унифицированно.

Что подобрать сегодня?

Когда тебе необходима наивысшая защита информации, выбирайте топовые аппараты с вмонтированным ИК-проектором или ToF-датчиком глубины.

• iPhone всех последних моделей
• Huawei Companion/Series P линейки
• Xiaomi Pro
• Vivo X модели
• Оппо Find Икс линейки.

Если средства ограничен – лучше отдавать предпочтение обычным методам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как второстепенную возможность комфорта.

Каким образом увеличить удобство работы возможности?

Есть несколько советов для людей, кто уже использует разблокировку по лицу:

1. Периодически меняйте свою фото-шаблон, если значительно меняется внешность.
2. Не упускайте из виду протирать объектив фронтальной камеры – пятна могут снизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам активирует фотоаппарат как только вы берёте его в руки.
4. При регистрационного процесса старайтесь сохранять лицевую часть ровно перед видеоустройства без резкого наклона головы.
5. Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от экрана.

Возможности эволюции технологии

В ближайшие времена можно предвкушать возникновения полностью дистанционных способов распознавания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + речь + манера ходьбы + жесты рук!

Также вероятно возникновение современных способов охраны приватности – к примеру, изменяющееся модификация диджитал паттерна после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых захватывающих техник нашего эпохи! Она делает интеракцию со мобильным устройством проще чем раньше, и такие приложения, как Вулкан Казино Платинум, могут в разы улучшить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как работает эта система внутри, – сможете более осмысленно подбирать свой будущий девайс!