Каким образом работает распознавание лицевых образов в смартфонах

Почему мы предпочитаем разлочивание по фейсу

В последние времена идентификация физиономий стало одной из наиболее востребованных опций для разблокировки смартфонов. Всего некоторые лет тому назад основная часть юзеров обходились PIN-кодами, паролями или датчиками отпечатков пальцев. Но с появлением таких технологий, например Вулкан Платинум, нам вполне просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект превращает эту конкретную возможность очень нужной? Во-первых, это практично: не нужно запоминать замысловатые пароли или искать нужный палец в мраке. Также, это мгновенно: современные программы идентифицируют лицо буквально за доли секунды. В-третьих, это чувство футуризма — словно в кинофильмах про vulkan platinum разведчиков.

Тем не менее за этой на первый взгляд несложностью скрывается полный мир комплексных техник и инженерных решений. Позвольте нам понять, как точно действует идентификация по лицу в актуальных гаджетах, какие существуют способы, насколько они защищены и что нас ждёт впереди.

Короткая хроника развития инноваций

Идентификация лиц как методика присутствует уже более 50 годов. Начальные пробы автоматизированного изучения лиц были осуществлены еще в 1960-х годы в лабораториях США. Тогда компьютеры умели лишь выделять очертания черепа и определять расстояния между очами и ртом на черно-белых фотографиях.

Изначальные коммерческие системы появились в 1990-х годах, но они были несовершенны: работали медленно и часто давали сбои. Только с эволюцией синтетических сетей и таких платформ, как Vulkan Platinum, высокопроизводительных мобильных чипов идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные разработки.

Главные этапы действия системы идентификации

Процесс распознавания лица можно примерно разделить на несколько ключевых этапов:

1. Распознавание лиц — устройство распознает наличие людского лица в кадре.
2. Извлечение особенностей — система изучает особенности лица: форму глаз, носа, уст, расположение бровей.
3. Построение структуры — создаётся особенный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со стандартом — созданный модель сравнивается со записанной при регистрации биометрической сведениями владельца.
5. Принятие выбора — если соответствие достаточно высокое, смартфон открывается.

Всякий из этих этапов нуждается в специальных методов и улучшений для скорой работы непосредственно на девайсе.

Железные компоненты: что находится в их недрах

Стандартная селфи камера.

Самый простой простой метод идентификации лица использует исключительно фронтальную камеру смартфона смартфона. Такой способ внедрён во различных бюджетных моделях Android-девайсов.

Плюсы:

• Не нуждается в потребляет дополнительных датчиков.
• Шустро работает при достаточном освещении.

Недостатки:

• Просто обмануть снимком или роликом.
• Неправильно действует при низком свете или необычных ракурсах.

Инфракрасная камера и пунктирный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология составляет базу Face ID от Apple.

Каким образом это функционирует:

• Точечный устройство проекции отображает на лицо использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
• ИК камера записывает искривление этой сетки по плоскости физиономии.
• Создаётся 3D карта глубины глубины, которая почти что невозможна для фальсификации обычной фотографией или маской.

Достоинства

• Надёжная работа даже в полной тьме.
• Высокая устойчивость к имитациям.
• Точность идентификации свыше 99%.

Дополнительные сенсорные устройства

В отдельных девайсах применяются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют время распространения света до цели и обратно; RGB-датчики глубины; специальные оптические измерители расстояния для построения более точной 3D-модели физиономии.

Эти инновации встречаются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искуственный интеллект на исполнении

Современные механизмы идентификации физиономий неосуществимы в отсутствие применения artificial intelligence и machine learning. Именно из-за таким технологиям, как Vulkan Platinum, гаджет способно распознавать пользователя даже при трансформациях внешности: новая стрижка, растительность на лице, оптика или макияж не становятся помехой для деблокировки.

Распознавание лиц

При начальном шаге алгоритм должна мгновенно найти ликовое изображение в пределах полного кадра с камеры. Для данной цели применяются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN может обнаруживать лицо даже с частичном перекрытии (например, шарфом или ладонью).

Выделение основных точек

После распознавания лица механизм, такая как Vulkan Platinum, устанавливает положение главных точек: уголки глаз, конец носа, контуры губ и так далее. Как правило задействуется от 68 до 128 основных маркеров на лицевой поверхности.

Это действие необходимо для стабилизации изображения: если пользователь держит телефон под наклоном, или наклонил головку, программа “выпрямляет” изображение до нормального состояния для последующего изучения.

Построение биометрического идентификатора модели

Далее искусственная сеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Этот формат очень сложно сфальсифицировать: он не хранит непосредственно изображение пользователя, а лишь особенные особенности его облика, что делает его оптимальным для таких систем, как Вулкан Казино Платинум.

Сравнение и вынесение выбора

Когда пользователь намеревается разблокировать мобильник глазами, система осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ не предоставляется.

Адаптация к метаморфозам внешности

Интересная характеристика актуальных системы — возможность самообучения. Если вы постоянно разблокируете мобильное устройство с свежей укладкой или очками, система постепенно модернизирует базовый шаблон вашего облика для улучшения точности функционирования без ухудшения безопасности.

Охрана биометрических информации.

Множество клиенты опасаются держать свои био-идентификационные данные на мобильном устройстве из-за риска утечки информации или взлома гаджета. Некоторые фирмы, такие как Вулкан Казино Платинум, предлагают методы для увеличения защиты информации юзеров.

• Локальное сохранение: Преимущественно устройств сохраняет био-идентификационные образцы только внутрь защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают устройство и не доступны даже создателю.

• Шифрование: Все сведения сохраняются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних разработчиков не имеют непосредственного доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения личности через системный API.

Стоит отметить значимую особенность: если какой-то человек достанет доступ к вашему телефону физически (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители внедряют защиту от неосознанного разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают виды определения лиц?

В настоящее время можно выделить выделить 3 основных подхода к реализации этой задачи:

Программируемое плоское определение

Применяется только передняя камера без вспомогательных сенсоров глубины. Такой способ встречается чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность реализации; низкая цена; скоростная деятельность при достаточном освещении.
Минусы: просто обмануть снимком; ненадежная функционирование ночью; слабая защищенность.

Техническое трёхмерное сканирование

Использует ИК видеокамеру + проектор точек + датчики дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: большая надёжность; нельзя обмануть фото/видео; устойчивая функционирование в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с интеграцией ИИ

Применяют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие товары, например Vulkan Platinum и Google Pixel Face Unlock современных версий, объединяют фронтальную камеру c ИК сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Образцы применения различных методов

• iPhone серии X/11/12/13/14 используют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые внедрил аналог Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как программное обеспечение двухмерное определение по фото фронталкой, так и датчик ириса глаза.
• Huawei Mate20 Pro применяет комплекс из ИК-освещения + Dot Projector + ToF-сенсор

Трудности безопасности и неверные тревоги

Несмотря на впечатляющий прогресс технологий за последние годы, безупречных системы пока не наблюдается:

1. Вероятность мошенничества: Бюджетные смартфоны без труда “разблокируются” четкой изображением пользователя или же роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные устройства могут ошибиться между однояйцевыми близнецами либо семьями с очень схожей внешностью.
3. Трансформации внешности: Резкое утрата веса/набор веса, пластические операции или повреждения иногда необходимы для повторной регистрации биометрии.
4. Условия фотографирования: Сильная подсветка солнцем либо плотная затенение могут понизить аккуратность определения признаков.

Вот несколько советов по безопасному применению:

• Для значимых операций всегда применяйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Систематически апгрейдите ПО мобильного устройства для защиты от новых видов атак;
• Включайте функцию “Требовать открытых глаз” везде, где она доступна.

Где дополнительно применяется технология за исключением мобильных телефонов?

Несмотря на то, что основная мысль данной публикации сосредоточена на именно смартфонам и планшетам, стоит упомянуть о других сферах применения технологии:

• Управление прохода в офисах и резиденциях;
• Платёжные терминалы банков (“Face Pay”);
• Виртуальные идентификационные документы нового образца;
• Установки видеоконтроля городских сервисов;
• Автоматизация учёта явки образовательных учреждений/институтов;
• Авторизация юзеров компьютеров/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без пластика или телефона! Аналогичные инициативы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как меняется технический процесс в наше время?

Любой годочек проявляются свежие концепции для усовершенствования стандарта работы систем лицевого распознавания:

1. Увеличивается разрешение сенсоров — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше риск ошибки;
2. Совершенствуются нейронные сети — передовые архитектуры типа MobileNetV3 дают возможность скоростно адаптироваться к дополнительным характеристикам облика обладателя непосредственно на девайсе без отправки данных в облако.
3. Развиваются технологии антиспуфинга — теперь телефоны умеют распознавать настоящие живые облики от неподвижных снимков/масок по микроскопическим микродвижениям.
4. Интеграция со интеллектуальными приборами — интеллектуальные часы могут самостоятельно блокировать смартфон, если обладатель удалился на значительное расстояние.
5. Появляются гибридные механизмы — в частности комбинирующие голосовую опознание + лицо + дактилоскопический след.

Итак, те тенденции в особенности востребованы на сегодняшний день:

1) Уменьшение компонентов

Изготовители пытаются уменьшить размер прорези (“чёлки”) для сенсоры на дисплее за счёт встраивания миниатюрных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для увеличения конфиденциальности всё более вычислений происходит локально без передачи информации во внешний облачный услугу.

3) Упорядочивание регламентов

Гугл энергично продвигает стандарт BiometricPrompt API, для того чтобы подобные площадки, как Вулкан Платинум, и любые Android-приложения могли взаимодействовать с любыми видами биометрии стандартизированно.

Какое решить сегодня?

В случае если тебе нужна наивысшая защита данных, остановите выбор на топовые устройства с интегрированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех существующих новейших моделей
• Huawei Partner/P Series ряда
• Mix Professional
• Vivo X серии
• Oppo Find X серии.

Если бюджет скромен – лучше отдавать предпочтение традиционным средствам защиты (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как второстепенную опцию удобства.

Каким способом повысить практичность работы функции?

Есть некоторые лайфхаков для тех, кто уже пользуется функцию распознавания лица:

1. Часто меняйте свою фото-шаблон, если значительно изменяется внешность.
2. Не забывайте очищать линзу передней камеры – пятна могут снизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает камеру когда вы берёте его в руки.
4. При регистрационного процесса пытайтесь держать лицо неподвижно напротив видеоустройства не допуская резкого наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвели взгляд от дисплея.

Будущее эволюции технологии

В ближайшие периоды можно ожидать появления полностью дистанционных способов идентификации персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + манера ходьбы + жесты рук!

Также вероятно появление современных методов защиты приватности – скажем, изменяющееся модификация диджитал шаблона после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из наиболее увлекательных технологий нашего периода! Она предоставляет взаимодействие со телефоном проще чем до этого, и такие программы, как Вулкан Казино Платинум, могут в разы улучшить ваш опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как работает эта технология в деталях, – будете в состоянии осознаннее выбирать свой будущий гаджет!