Каким образом работает распознавание лиц в мобильных устройствах

Почему мы выбираем разлочивание по фейсу

В прошлые годы идентификация лиц стало одной из самых популярных опций для деблокировки умных телефонов. Лишь пару лет ранее основная масса использующих обходились PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, например вулкан россия, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект делает данную особенность очень нужной? Прежде всего, это комфортно: не нужно удерживать в памяти трудные пароли или искать правильный палец в мраке. Во-вторых, это мгновенно: современные алгоритмы узнают лицо практически за доли секунды. В-третьих, это чувство футуристичности — как будто в фильмах про vulkan russia агентов.

Впрочем за этой видимой простотой скрывается весь вселенная трудных техник и инженерных решений. Позвольте нам разобраться, как точно работает распознавание лиц в актуальных мобильных телефонах, какие существуют способы, насколько они надёжны и что нас ожидает в будущем.

Краткая хроника эволюции технологии

Распознавание лиц как технология присутствует уже более пятидесяти лет. Изначальные попытки машинного исследования облика были сделаны еще в 1960-х годах в лабораториях США. Тогда вычислительные машины умели лишь обозначать силуэты лица и измерять промежутки между зрачками и ртом на ахроматических изображениях.

Первые торговые установки возникли в девяностых годах, но они были несовершенны: функционировали медленно и нередко ошибались. Только с прогрессом синтетических сетей и таких систем, как вулкан россии, мощных мобильных чипов распознавание лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным сканированием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать собственные решения.

Главные стадии работы системы определения

Процесс определения лица можно ориентировочно сегментировать на несколько основных этапов:

1. Распознавание лица — аппарат распознает присутствие гуманного лица в кадре.
2. Выделение характеристик — система анализирует черты облика: форму глаз, обонятельного органа, губ, положение бровей.
3. Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — созданный образец сравнивается с записанной при внесении биометрической данными владельца.
5. Принятие выбора — если соответствие достаточно высокое, смартфон разблокируется.

Всякий из указанных шагов нуждается в специальных методов и усовершенствований для скорой работы прямо на устройстве.

Железные элементы: что прячется в их недрах

Обычная селфи камера.

Простейший простой метод распознавания лица применяет исключительно лицевую камеру смартфона. Данный подход внедрён во различных доступных версиях Android-устройств.

Плюсы:

• Не потребляет дополнительные датчиков.
• Шустро работает при достаточном освещении.

Слабые стороны:

• Просто обмануть изображением или видеозаписью.
• Плохо действует при плохом свете или необычных ракурсах.

ИК фотокамера и точечный проекционный аппарат

Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология лежит в основе Face ID от Apple.

Как это функционирует:

• Точечный устройство проекции показывает на физиономию пользователя невидимую структуру из тысяч инфракрасных пятен (например, Face ID использует около 30 000 меток).
• ИК камера записывает искривление этой сетки по поверхности физиономии.
• Создаётся трёхмерная глубинная карта глубинности, которая почти что неподвластна для фальсификации типичной фото или маскировкой.

Выигрыши

• Надёжная работа даже в полной тьме.
• Сильная устойчивость к фальсификациям.
• Точность идентификации выше 99%.

Дополнительные сенсорные устройства

В определённых аппаратах применяются также экстра датчики: ToF (Time-of-Flight), которые определяют время движения света до цели и обратно; RGB-датчики глубины; специальные лазерные дальномеры для построения более детализированной 3D-модели лица.

Эти разработки применяются чаще всего во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: синтетический разум в исполнении

Нынешние механизмы идентификации физиономий невозможны при отсутствии использования artificial intelligence и машинного обучения. Именно вследствие таким разработкам, как вулкан россии, аппарат способно распознавать владельца даже при изменениях внешности: новая укладка, щетина, оптика или макияж не становятся барьером для открытия.

Детектирование лица

При начальном этапе программа обязана быстро найти ликовое изображение среди целого изображения с камеры. Для данной цели применяются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: метод MTCNN может находить физиономию даже при частичном закрытии (например, шарфом или ладонью).

Выделение важных точек

После идентификации лица система, такая как вулкан россии, вычисляет расположение ключевых точек: кончики глаз, конец носа, края губ и так далее. Как правило задействуется от 68 до 128 главных меток на лицевой области.

Это действие нужно для нормализации визуала: если пользователь удерживает телефон под наклоном, или склонил головку, программа корректирует изображение до обычного угла для дальнейшего анализа.

Создание биометрии модели

Далее нейронная сеть строит сжатое математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Такой формат очень сложно сфальсифицировать: он не удерживает непосредственно изображение юзера, а лишь исключительные характеристики его облика, что делает его совершенным для таких площадок, как vulkan russia.

Сопоставление и осуществление решения

Если пользователь желает открыть смартфон взором, программа осуществляет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ не предоставляется.

Приспособление к метаморфозам внешности

Увлекательная характеристика нынешних системы — возможность самообучения. Если ты регулярно доступаете к смартфон с обновленной прической или оптикой, программа постепенно модернизирует основной шаблон вашего облика для повышения точности работы без ухудшения безопасности.

Безопасность биометрии данных.

Большинство клиенты беспокоятся сохранять свои био-идентификационные данные на смартфоне из-за угрозы потери данных или взлома устройства. Иные организации, например vulkan russia, предлагают варианты для повышения защиты сведений клиентов.

• Локальное хранение: Преимущественно аппаратов записывает биометрические модели только внутрь безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не покидают гаджет и недоступны включая производителю.

• Шифрование: Все данные сберегаются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих разработчиков не имеют непосредственного доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения личности через системный API.

Необходимо подчеркнуть важную подробность: если кто-либо получит физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители реализуют защиту от “слепого” разблокирования — в частности, просят раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды идентификации лиц на изображениях?

В настоящее время можно выделить определить 3 основных метода к реализации этой функции:

Программное 2D распознавание

Используется только лицевая видеокамера без экстра детекторов глубины. Этот подход наблюдается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; минимальная цена; скоростная работа при качественном освещении.
Минусы: несложно ввести в заблуждение снимком; неустойчивая работа ночью; недостаточная защищенность.

Аппаратное объёмное оцифровка

Использует инфракрасную видеокамеру + проектор пикселей + сенсоры глубины (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: большая надёжность; не получится обмануть изображение/видеозапись; постоянная функционирование в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с ИИ-дополнением

Применяют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие товары, например вулкан россии и Google Pixel Face Unlock новейших версий, комбинируют фронтальную камеру c ИК сенсором мобильности Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями посторонних устройств.

Образцы эксплуатации разных техник

• iPhone серии X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил аналог Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как софтверное плоское распознавание по снимку фронтальной камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro применяет комплекс из ИК-освещения + Dot Projector + ToF-датчик

Проблемы защиты и ошибочные сигналы

Несмотря на замечательный развитие инноваций за последние лет, совершенных механизмов пока не имеется:

1. Вероятность подвоха: Недорогие смартфоны просто доступны четкой снимком владельца или видеозаписью с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые совершенные механизмы могут спутать между монозиготными близнецами либо семьями с очень схожей внешностью.
3. Изменения внешнего вида: Внезапное похудение/увеличение массы тела, косметические процедуры или травмы порой необходимы для повторной регистрации биометрии.
4. Условия записи: Сильная засветка солнечным светом либо глубокая тень могут уменьшить верность распознавания признаков.

Ниже пара рекомендаций по защищённому применению:

• Для значимых операций всегда используйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Постоянно апгрейдите прошивку смартфона для защиты от современных угроз;
• Включайте функцию “Требовать открытых глаз” в тех местах, где она имеется.

В каких областях также находится применение технологии кроме мобильных телефонов?

Хотя основная мысль данной работы касается конкретно мобильным устройствам, следует отметить прочих направлениях внедрения технологии:

• Мониторинг прохода в офисах и резиденциях;
• Платёжные терминалы банков (“Face Pay”);
• Цифровые удостоверения личности последнего типа;
• Системы видеонаблюдения городских подразделений;
• Механизация отслеживания присутствия образовательных учреждений/институтов;
• Аутентификация пользователей ПК/ноутбуков.

Например: В московском метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Аналогичные программы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как изменяется технический процесс в нынешнее время?

Любой годик проявляются современные мысли для усовершенствования стандарта деятельности систем лицевого распознавания:

1. Увеличивается чёткость сенсорных устройств — чем больше деталей фиксируется камерой/датчиками глубины, тем меньше вероятность ошибки;
2. Развиваются нейросети — современные структуры модели MobileNetV3 дают возможность скоростно адаптироваться к дополнительным характеристикам внешности обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь смартфоны способны различать настоящие живые лица от неподвижных снимков/масок по незаметным микродвижениям.
4. Интеграция со интеллектуальными приборами — умные часы могут авто заблокировать телефон, если владелец отошёл далеко.
5. Появляются гибридные устройства — к примеру комбинирующие речевую опознание + облик + отпечаток пальца.

Здесь, какие направления очень востребованы в данный момент:

1) Уменьшение компонентов

Компании стараются сократить размер отверстия (“чёлки”) для датчики на экране за счёт внедрения компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения личной безопасности всё больше вычислений выполняется локально без передачи информации во сторонний облачный сервис.

3) Упорядочивание стандартов

Google энергично пропагандирует норму BiometricPrompt API, для того чтобы такие платформы, например как вулкан россия, и любые Android-приложения были совместимы с любыми видами биометрии унифицированно.

Что решить сегодня?

Когда тебе необходима предельная защита данных, подбирайте передовые аппараты с вмонтированным ИК-проектором или ToF-сенсором глубины.

• iPhone всех новейших версий
• Huawei Mate/P ряда
• Mi Pro
• Vivo X линейки
• Oppo Find Икс серии.

Если финансы скромен – лучше предпочесть обычным способам защиты (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как второстепенную возможность удобства.

Каким образом улучшить практичность использования функции?

Есть некоторые советов для пользователей, кто уже использует разблокировку по лицу:

1. Периодически обновляйте свою фото-шаблон, если значительно трансформируется внешность.
2. Не упускайте из виду протирать объектив передней камеры – разводы могут снизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует камеру как только вы берёте его в руки.
4. Во время регистрации пытайтесь удерживать голову прямо перед камеры без резкого наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвернулись от экрана.

Перспективы развития технологии

В ближайшие годы можно ожидать развития полностью безконтактных способов опознания человека сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + походка + манипуляции руками!

Также возможно развитие новых подходов защиты конфиденциальности – к примеру, динамическое корректировка цифрового шаблона после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых увлекательных технологий нашего эпохи! Она делает общение со смартфоном комфортнее чем раньше, и такие приложения, как vulkan russia, могут в разы улучшить ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как устроена эта методика в деталях, – сможете более осмысленно выбирать свой следующий гаджет!