Каким способом действует определение лиц в смартфонах

Почему мы выбираем разблокировку по лицевому распознаванию

В недавние времена определение лиц превратилось в одной из наиболее востребованных функций для разблокировки смартфонов. Лишь несколько годов ранее основная часть использующих довольствовались пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением подобных технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что превращает эту конкретную функцию настолько популярной? Прежде всего, это практично: не нужно запоминать трудные пароли или отыскивать верный палец в темноте. Во-вторых, это мгновенно: современные системы распознают лицо буквально за мгновение. В-третьих, это впечатление футуризма — словно в кинофильмах про вулкан казино агентов.

Однако за этой кажущейся легкостью скрывается полный универсум комплексных техник и инженерных разработок. Давайте разобраться, как именно функционирует распознавание лиц в современных мобильных телефонах, какие существуют методы, насколько они надёжны и что нас ждёт впереди.

Сжатая история развития инноваций

Идентификация лиц как техника присутствует уже более пятидесяти лет. Первые эксперименты машинного исследования лиц были сделаны еще в 1960-х годы в лабораториях США. Тогда компьютеры могли лишь определять контуры черепа и вычислять дистанции между зрачками и устами на монохромных изображениях.

Начальные бизнес системы появились в девяностых годах, но они были неидеальны: работали медленно и нередко ошибались. Только с эволюцией нейронных сетей и таких систем, как вулкан россии, сильных мобильных чипов распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные разработки.

Основные этапы действия устройства распознавания

Процесс распознавания лица можно примерно разделить на несколько ключевых этапов:

1. Идентификация лиц — камера определяет существование людского образа в кадре.
2. Извлечение признаков — алгоритм исследует черты физиономии: форму глаз, носа, губ, позицию бровей.
3. Построение структуры — создаётся уникальный виртуальный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со образцом — созданный шаблон сверяется с сохранённой при регистрации биометрической информацией владельца.
5. Принятие выбора — если совпадение достаточно значительное, смартфон деблокируется.

Всякий из указанных шагов требует особых процедур и оптимизаций для скорой работы прямо на устройстве.

Аппаратные элементы: что прячется внутри

Обычная фронтальная камера.

Самый простой вариант определения физиономии применяет только фронтальную видеокамеру смартфона. Такой метод реализован во многих недорогих вариантах Android-девайсов.

Преимущества:

• Не нуждается в требует дополнительные сенсоров.
• Шустро действует при качественном свете.

Минусы:

• Просто одурачить снимком или роликом.
• Неудачно действует при низком освещённости или нестандартных углах обзора.

Инфракрасная фотокамера и точечный проектор

Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология лежит в основе Face ID от Apple.

Каким образом это работает:

• Точечный устройство проекции показывает на лицо пользователя невидимую сетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 точек).
• Инфракрасная устройство записывает деформацию этой решетки по плоскости физиономии.
• Формируется 3D карта глубины глубинности, что практически неосуществима для подделки обычной фото или маскировкой.

Преимущества

• Надёжная работа даже в полной неосвещённости.
• Большая устойчивость к подделкам.
• Точность распознавания выше 99%.

Дополнительные датчики

В определённых аппаратах используются также дополнительные сенсоры: ToF (Time-of-Flight), которые фиксируют время движения света до объекта и обратно; Цветные-датчики глубины; специальные лазерные лидары для формирования более точной 3D-модели физиономии.

Эти разработки применяются в основном во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искуственный ум в исполнении

Текущие системы опознания лиц неосуществимы при отсутствии применения artificial intelligence и машинного обучения. Именно из-за таким технологиям, как вулкан россии, аппарат может идентифицировать пользователя даже при трансформациях облика: новая причёска, растительность на лице, очки или грим не становятся помехой для разблокировки.

Распознавание физиономии

В первом стадии система должна мгновенно обнаружить лицо в пределах полного изображения с камеры. Для данной цели используются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” находить лиц человека среди множества других объектов.

Пример: метод MTCNN способен распознавать лицо даже при неполном перекрытии (например, платком или рукой).

Выделение важных точек

После обнаружения лица механизм, такая как вулкан россии, определяет положение основных точек: уголки глаз, конец носа, контуры губ и так далее. Как правило используется от 68 до 128 ключевых меток на лицевой области.

Данное нужно для выравнивания картинки: если человек находится с телефон под углом, или повернул голову, программа исправляет картинку до стандартного положения для дальнейшего анализа.

Создание биометрического образца

Далее нейронная сеть строит уплотненное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Этот шаблон крайне сложно имитировать: он не хранит само фото юзера, а лишь особенные особенности его вида, что делает его идеальным для таких систем, как vulkan russia.

Сравнительный анализ и вынесение выбора

Когда человек желает открыть смартфон глазами, программа осуществляет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ запрещается.

Адаптация к трансформациям облика

Увлекательная черта актуальных системы — возможность самостоятельного обучения. Если вы часто открываете смартфон с свежей прической или оптикой, система постепенно модернизирует эталонный модель вашего облика для улучшения точности функционирования без ухудшения безопасности.

Охрана биометрии информации.

Многие пользователи беспокоятся держать свои био-идентификационные данные на смартфоне из-за угрозы утечки данных или взлома устройства. Определенные компании, вроде vulkan russia, предлагают решения для увеличения сохранности сведений клиентов.

• Локальное хранение: Большинство девайсов сохраняет био-идентификационные модели только внутри безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из аппарат и закрыты в том числе изготовителю.

• Шифрование: Все данные хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы сторонних разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения личности через системный API.

Следует отметить существенную особенность: если кто-либо получит доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство компании реализуют меры безопасности от неосознанного разблокирования — к примеру, требуют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы распознавания лиц на изображениях?

На сегодняшний день можно выделить определить три главных способа к осуществлению этой функции:

Программируемое плоское идентификация

Используется только передняя видеокамера без дополнительных детекторов глубины. Такой способ встречается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость реализации; умеренная затраты; оперативная деятельность при качественном освещении.
Минусы: просто одурачить фотографией; неустойчивая работа ночью; низкая охрана.

Оборудование для объёмное сканирование

Задействует инфракрасную видеокамеру + проекционный модуль пикселей + датчики глубины (Face ID от Apple; подобные решения у Huawei Mate).
Плюсы: большая надежность; нельзя обмануть фото/видео; устойчивая работа в любых условиях освещения.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные методы с интеграцией ИИ

Применяют комбинацию программных методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные товары, как вулкан россии и Google Pixel Face Unlock современных поколений, комбинируют фронтальную камеру c инфракрасным датчиком движения Soli Radar для предотвращения от фальсификаций руками/масками/видеоэкранами посторонних устройств.

Примеры применения различных методов

• iPhone модели X/11/12/13/14 задействуют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил аналог Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 имеют как программное обеспечение 2D идентификацию по снимку фронталкой, так и датчик глазного ириса.
• Huawei Mate20 Pro задействует набор из ИК-освещения + Dot Projector + ToF-датчик

Проблемы защиты и ошибочные срабатывания

Несмотря на впечатляющий прогресс техники за прошедшие лет, идеальных систем пока не существует:

1. Шанс подвоха: Недорогие телефоны без труда “разблокируются” качественной изображением владельца либо роликом с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые совершенные устройства могут ошибиться между однояйцевыми близнецами либо родичами с очень похожей внешностью.
3. Метаморфозы облика: Стремительное снижение веса/увеличение массы тела, косметические процедуры или травмы порой необходимы для перерегистрации биометрии.
4. Условия съёмки: Сильная подсветка солнцем либо плотная темнота могут уменьшить аккуратность распознавания признаков.

Вот несколько рекомендаций для безопасному эксплуатации:

• Для важных операций всегда внедряйте двухэтапную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Регулярно обновляйте прошивку телефона для защиты от современных угроз;
• Включайте настройку “Требовать раскрытых глаз” везде, где она доступна.

В каких областях дополнительно находится применение технология помимо смартфонов?

Хотя основная мысль этой статьи сосредоточена на в частности мобильным устройствам, следует отметить альтернативных областях использования технологии:

• Мониторинг прохода в рабочих помещениях и многоквартирных зданиях;
• Платёжные аппараты банков (“Face Pay”);
• Виртуальные удостоверения личности современного образца;
• Системы видеонаблюдения муниципальных служб;
• Автоматизирование учёта явки учебных заведений/вузов;
• Аутентификация пользователей ПК/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через турникет без карты или мобильника! Похожие программы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом изменяется технология в нынешнее время?

Каждый годочек возникают свежие идеи для повышения качества функционирования систем распознавания лиц:

1. Увеличивается детализация сенсорных устройств — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше вероятность погрешности;
2. Развиваются искусственные интеллекты — современные структуры вида MobileNetV3 дают возможность быстро адаптироваться к свежим особенностям вида владельца прямо на устройстве без отправки данных в облако.
3. Развиваются методы антиспуфинга — теперь смартфоны способны распознавать реальные анимированные облики от статичных снимков/маскировок по незаметным движениям кожи.
4. Интеграция со умными устройствами — смарт-часы могут автоматически заблокировать смартфон, если обладатель отошёл далеко.
5. Появляются смешанные механизмы — например объединяющие голосовую аутентификацию + физиономию + пальцевой отпечаток.

Здесь, какие тренды в особенности популярны сейчас:

1) Миниатюризация элементов

Производители пытаются уменьшить размер выреза (“чёлки”) для датчики на дисплее за счёт встраивания компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на аппарате

Для увеличения приватности всё более расчётов осуществляется на месте без пересылки информации во дополнительный облачный услугу.

3) Унификация стандартов

Google интенсивно пропагандирует стандарт BiometricPrompt API, с целью чтобы такие площадки, вроде вулкан россия, и любые Android-программы могли взаимодействовать с всеми формами биометрии единообразно.

Какое подобрать сегодня?

Когда тебе нужна предельная безопасность данных, остановите выбор на топовые модели с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone всех новейших поколений
• Huawei Companion/P Series линейки
• Xiaomi Pro
• Vivo X серии
• Oppo Обнаружить Икс линейки.

Если средства невелик – лучше предпочесть традиционным способам защиты (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как второстепенную опцию удобства.

Каким способом улучшить комфорт работы функции?

Есть некоторые лайфхаков для тех, кто уже пользуется разблокировку через лицо:

1. Периодически обновляйте свою фотографию-шаблон, если сильно изменяется облик.
2. Не забывайте очищать линзу фронтальной камеры – пятна могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает фотоаппарат когда вы берёте его в руки.
4. В процессе записи старайтесь сохранять голову прямо впереди объектива без значительного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отворачиваетесь от дисплея.

Перспективы развития технологии

В предстоящие времена можно предвкушать развития полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + манера ходьбы + манипуляции руками!

Также предполагается появление свежих подходов защиты конфиденциальности – скажем, переменное модификация диджитал паттерна после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из очень захватывающих технологий нашего периода! Она обеспечивает взаимодействие со мобильным устройством комфортнее чем до этого, и такие приложения, как vulkan russia, могут в разы оптимизировать ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как устроена эта технология внутри, – сможете осознаннее определять свой будущий устройство!