Как работает определение лицевых образов в мобильных устройствах

Почему мы выбираем разблокировку по лицевому распознаванию

В недавние годы определение лиц стало одной из самых распространённых возможностей для деблокировки смартфонов. Всего некоторые годов ранее основная часть использующих довольствовались пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, как Вулкан Платинум, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь делает эту конкретную возможность настолько популярной? Прежде всего, это комфортно: не нужно запоминать замысловатые пароли или отыскивать нужный палец в темноте. Кроме того, это быстро: современные алгоритмы распознают лицо буквально за доли секунды. В-третью очередь, это впечатление футуризма — будто в кинолентах про казино Вулкан шпионов.

Впрочем за этой видимой несложностью таится весь мир сложных технологий и инженерных разработок. Попробуем понять, как конкретно действует идентификация по лицу в новейших мобильных телефонах, какие применяются технологии, насколько они защищены и что нас предстоит.

Короткая повествование эволюции инноваций

Идентификация лиц как техника существует уже более 50 годов. Первые эксперименты машинного изучения лиц были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда вычислительные машины умели лишь определять контуры головы и измерять расстояния между очами и губами на черно-белых изображениях.

Изначальные коммерческие системы возникли в 1990-х годах, но они были несовершенны: работали медленно и часто давали сбои. Только с эволюцией искусственных сетей и таких платформ, как Vulkan Platinum, сильных мобильных чипов распознавание лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали интегрировать свои решения.

Ключевые стадии действия системы определения

Процесс распознавания лица можно условно сегментировать на несколько ключевых этапов:

1. Обнаружение лиц — аппарат выявляет существование людского образа в изображении.
2. Определение признаков — система изучает контуры облика: конфигурацию глаз, обонятельного органа, губ, положение надбровных дуг.
3. Построение структуры — создаётся особенный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с эталоном — полученный модель сопоставляется со сохранённой при внесении биометрической данными владельца.
5. Принятие решения — если соответствие достаточно значительное, смартфон открывается.

Каждый из этих стадий требует особых алгоритмов и усовершенствований для скорой работы непосредственно на девайсе.

Железные компоненты: что прячется внутри

Стандартная селфи камера.

Самый простой метод определения физиономии задействует только лицевую видеокамеру мобильного устройства. Такой подход осуществлён во многих бюджетных моделях Android-устройств.

Сильные стороны:

• Не нуждается в нуждается в дополнительных датчиков.
• Шустро работает при качественном освещении.

Отрицательные стороны:

• Легко одурачить изображением или роликом.
• Неудачно действует при низком освещении или непривычных углах обзора.

Инфракрасная камера и точечный проектор

Более совершенные системы, такие как Vulkan Platinum, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс составляет базу Face ID от Apple.

Как это действует:

• Точечный проектор проецирует на лицо юзера невидимую структуру из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
• Инфракрасная устройство фиксирует искривление этой сетки по поверхности физиономии.
• Получается трехмерная карта глубины глубинности, которая почти неподвластна для фальсификации стандартной снимком или маскировкой.

Выигрыши

• Надёжная функционирование даже в полной темноте.
• Сильная устойчивость к имитациям.
• Точность определения выше 99%.

Добавочные сенсоры

В некоторых устройствах используются также вспомогательные сенсоры: ToF (Time-of-Flight), которые измеряют время движения луча до объекта и обратно; RGB-датчики глубины; специальные оптические лидары для создания более детализированной 3D-модели физиономии.

Эти инновации встречаются чаще всего во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: синтетический разум на действии

Нынешние устройства распознавания физиономий невозможны при отсутствии эксплуатации ИИ и machine learning. Именно из-за таким инновациям, как Vulkan Platinum, устройство может распознавать пользователя даже при трансформациях внешнего вида: новая укладка, борода, оптика или косметика не становятся помехой для разблокировки.

Распознавание лица

В стартовом стадии система должна быстро найти ликовое изображение среди всего снимка камеры. Для данной цели применяются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” распознавать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN может находить лицо даже в случае неполном перекрытии (например, шарфом или ладонью).

Идентификация ключевых точек

После идентификации лица система, такая как Vulkan Platinum, определяет местоположение основных точек: края глаз, верхушка носа, края губ и так далее. Обычно применяется от 68 до 128 основных меток на лицевой поверхности.

Данное необходимо для стабилизации изображения: если юзер удерживает телефон под углом, или склонил головку, программа “выпрямляет” изображение до нормального состояния для последующего изучения.

Формирование биометрии шаблона

Далее нейронная сеть строит сжатое математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Данный формат очень затруднительно подделать: он не удерживает само фото пользователя, а лишь особенные особенности его вида, что делает его оптимальным для таких систем, как Вулкан Казино Платинум.

Сопоставление и принятие решения

Когда юзер намеревается разблокировать смартфон глазами, механизм осуществляет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ запрещается.

Адаптация к метаморфозам облика

Увлекательная характеристика актуальных систем — способность самостоятельного обучения. Если ты регулярно разблокируете телефон с новой укладкой или оптикой, алгоритм постепенно модернизирует эталонный шаблон вашего лица для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических данных данных.

Многие юзеры боятся хранить свои био-идентификационные данные на телефоне из-за вероятности утечки информации или взлома устройства. Определенные организации, вроде Вулкан Казино Платинум, предлагают методы для улучшения безопасности информации пользователей.

• Локальное хранение: Большинство аппаратов сохраняет биометрические модели лишь внутрь защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не выходят из аппарат и недоступны включая создателю.

• Шифрование: Все сведения хранятся только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних девелоперов не имеют прямого доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.

Следует подчеркнуть значимую деталь: если кто-либо сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители реализуют систему защиты от неосознанного разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются типы определения лиц на изображениях?

Сегодня можно выделить 3 ключевых способа к осуществлению этой задачи:

Программное двухмерное идентификация

Применяется только лицевая видеокамера без экстра детекторов глубины. Такой способ используется обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота реализации; низкая стоимость; оперативная работа при достаточном свете.
Минусы: просто одурачить фотографией; нестабильная деятельность ночью; низкая защищенность.

Аппаратное трёхмерное сканирование

Использует ИК видеокамеру + проекционный модуль точек + датчики глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Плюсы: значительная надежность; не получится исказить фото/видео; устойчивая функционирование в любых условиях освещения.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с дополнением ИИ

Применяют комбинацию софтверных методов + аппаратную обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как Vulkan Platinum и Google Pixel Face Unlock последних поколений, комбинируют фронтальную камеру c ИК датчиком движения Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Примеры применения разнообразных техник

• iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз предложил аналог Face ID в числе Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное двухмерное идентификацию по фото фронтальной камерой, так и датчик радужки глаза.
• Huawei Mate20 Pro применяет набор из ИК-подсветки + Dot Projector + ToF-датчик

Проблемы охраны и ложные срабатывания

Несмотря на поразительный прогресс технологий за недавние годы, безупречных систем пока не наблюдается:

1. Возможность подвоха: Бюджетные смартфоны без труда открываются высококачественной фотографией владельца или видеозаписью с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые совершенные устройства могут спутать между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Изменения внешности: Резкое утрата веса/набор веса, пластические операции или повреждения порой необходимы для повторной регистрации биометрии.
4. Условия фотографирования: Яркая подсветка солнцем или глубокая затенение могут понизить точность идентификации признаков.

Ниже несколько советов для надёжному применению:

• Для важных операций всегда используйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Систематически обновляйте ПО телефона для обеспечения безопасности от современных угроз;
• Включайте функцию “Требовать распахнутых глаз” там, где она имеется.

Где ещё применяется технологии за исключением смартфонов?

Пускай предмет нашей статьи сосредоточена на в частности мобильным устройствам, стоит упомянуть о других сферах применения технологии:

• Управление прохода в деловых центрах и жилых домах;
• Платёжные устройства банков (“Face Pay”);
• Цифровые идентификационные документы современного образца;
• Установки видеонаблюдения городских сервисов;
• Автоматизация регистрации присутствия школ/вузов;
• Вход юзеров компьютеров/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Аналогичные инициативы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом меняется техпроцесс в наше время?

Любой год проявляются свежие идеи для улучшения уровня деятельности систем идентификации лиц:

1. Увеличивается чёткость датчиков — чем больше деталей фиксируется фотоаппаратом/датчиками глубины, тем меньше риск неточности;
2. Развиваются нейросети — современные конструкции вида MobileNetV3 дают возможность скоростно осваивать новым характеристикам внешности пользователя прямо на устройстве без отправки данных в облако.
3. Развиваются способы антиспуфинга — теперь смартфоны умеют различать подлинные анимированные облики от статичных снимков/масок по микроскопическим движениям кожи.
4. Взаимодействие со интеллектуальными приборами — умные часы могут автоматически закрыть доступ к смартфон, если обладатель отошёл далеко.
5. Появляются гибридные механизмы — к примеру комбинирующие аудио идентификацию + физиономию + отпечаток пальца.

Вот, какие тенденции очень востребованы сейчас:

1) Уменьшение элементов

Компании пытаются сократить габариты прорези (“чёлки”) для сенсоры на экране за счёт интеграции маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения приватности всё больше обработки данных происходит локально без передачи данных во дополнительный облачный услугу.

3) Стандартизация регламентов

Google интенсивно продвигает эталон BiometricPrompt API, для того чтобы такие системы, как Вулкан Платинум, и любые Android-аппы могли взаимодействовать с различными типами биометрии стандартизированно.

Какое решить сегодня?

В случае если вам нужна наивысшая защита информации, выбирайте флагманские модели с вмонтированным ИК-проектором или ToF-датчиком глубины.

• iPhone каждого актуальных версий
• Huawei Companion/Series P линейки
• Xiaomi Pro
• Vivo X модели
• Oppo Обнаружить Икс серий.

Если финансы скромен – лучше предпочесть традиционным средствам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как второстепенную возможность удобства.

Каким способом улучшить комфорт работы опции?

Есть пара советов для тех, кто уже использует функцию распознавания лица:

1. Периодически меняйте свою фотографию-шаблон, если значительно меняется внешность.
2. Не забывайте протирать линзу передней камеры – загрязнения могут уменьшить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует камеру как только вы берёте его в руки.
4. Во время записи старайтесь сохранять лицевую часть неподвижно напротив камеры исключая резкого наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от дисплея.

Возможности развития техники

В скоро наступающие времена можно предполагать появления полностью дистанционных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + речь + походка + жесты рук!

Также возможно развитие свежих подходов охраны личной информации – скажем, переменное изменение электронного паттерна после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из очень захватывающих техник нашего эпохи! Она делает интеракцию со смартфоном комфортнее чем когда-либо прежде, и такие приложения, как Вулкан Казино Платинум, могут в разы повысить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы осведомлены, как функционирует эта методика в деталях, – сумеете более осмысленно выбирать свой будущий гаджет!