Каким образом работает идентификация лиц в смартфонах

Почему мы выбираем разлочивание по фейсу

В недавние годы идентификация лиц является одной из самых распространённых опций для деблокировки умных телефонов. Еще некоторые годков тому назад большинство юзеров довольствовались пин-кодами, паролями или датчиками отпечатков пальцев. Но с появлением подобных технологий, как admiral x, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект обуславливает данную особенность такой востребованной? Во-первых, это удобно: не нужно запоминать трудные пароли или находить верный палец в тьме. Кроме того, это мгновенно: современные системы распознают лицо буквально за доли секунды. В-третьих, это ощущение футуристичности — как будто в кинолентах про адмирал x шпионов.

Впрочем за данной кажущейся несложностью прячется полный мир трудных техник и инженерных разработок. Давайте разобраться, как конкретно работает распознавание лиц в новейших смартфонах, какие бывают технологии, насколько они безопасны и что нас предстоит.

Краткая повествование прогресса техники

Идентификация лиц как техника присутствует уже более пятидесяти годов. Изначальные эксперименты автоматизированного анализа лица были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры умели лишь выделять контуры головы и измерять расстояния между глазами и губами на черно-белых фотографиях.

Первые коммерческие платформы появились в девяностых годах, но они были далеки от совершенства: действовали неспешно и нередко ошибались. Только с развитием искусственных сетей и таких систем, как адмирал х, сильных мобильных микросхем распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять личные разработки.

Основные этапы функционирования устройства распознавания

Процесс идентификации лица можно условно сегментировать на несколько основных этапов:

1. Идентификация лица — устройство распознает наличие человеческого образа в изображении.
2. Извлечение характеристик — система исследует контуры физиономии: форму зрительных органов, обонятельного органа, уст, позицию бровей.
3. Построение структуры — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со эталоном — созданный образец сопоставляется с записанной при регистрации биометрической сведениями владельца.
5. Принятие решения — если совпадение достаточно высокое, смартфон разблокируется.

Каждый из данных этапов запрашивает индивидуальных методов и улучшений для быстрой работы непосредственно на девайсе.

Технические элементы: что скрыто внутри

Типичная передняя камера.

Самый несложный метод идентификации облика применяет лишь переднюю камеру мобильного устройства. Данный подход осуществлён во многочисленных недорогих моделях Android-девайсов.

Достоинства:

• Необходимо требует дополнительных сенсоров.
• Быстро работает при хорошем освещённости.

Отрицательные стороны:

• Просто обмануть фотографией или роликом.
• Неудачно действует при плохом освещении или необычных углах обзора.

Инфракрасная камера и точечный проектор

Более продвинутые системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс составляет базу Face ID от Apple.

Как это функционирует:

• Точечный устройство проекции показывает на облик пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 пятен).
• ИК камера записывает изменение формы данной решетки по плоскости лица.
• Создаётся трёхмерная карта глубинности, что практически неподвластна для фальсификации обычной фотографией или маской.

Плюсы

• Надёжная функционирование даже в полной неосвещённости.
• Сильная защита к имитациям.
• Точность идентификации выше 99%.

Добавочные сенсорные устройства

В определённых девайсах задействуются также экстра датчики: ToF (Time-of-Flight), которые фиксируют время распространения света до предмета и обратно; RGB-датчики дальности; специальные лазерные измерители расстояния для формирования более аккуратной 3D-модели физиономии.

Эти технологии встречаются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: синтетический интеллект в работе

Текущие системы распознавания физиономий невозможны при отсутствии эксплуатации ИИ и machine learning. Именно благодаря таким разработкам, как адмирал х, гаджет способно идентифицировать владельца даже при метаморфозах внешности: новая укладка, растительность на лице, очки или макияж не становятся барьером для разблокировки.

Обнаружение лица

При первом стадии программа обязана оперативно найти ликовое изображение среди всего кадра с камеры. Для этой задачи задействуются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы находить лица людей среди множества других объектов.

Пример: метод MTCNN способен распознавать лицо даже с неполном перекрытии (например, платком или рукой).

Определение важных моментов

После идентификации лица система, такая как адмирал х, устанавливает расположение ключевых точек: уголки глаз, кончик носа, контуры губ и так далее. Часто применяется от 68 до 128 основных маркеров на лицевой поверхности.

Это действие нужно для стабилизации визуала: если пользователь держит мобильник под наклоненным, или склонил головку, программа исправляет изображение до обычного угла для дальнейшего анализа.

Построение биометрического идентификатора образца

Далее искусственная сеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Такой шаблон очень трудно сфальсифицировать: он не сохраняет непосредственно картинку юзера, а лишь особенные черты его внешности, что делает его совершенным для таких систем, как admiral-x.

Сравнение и осуществление заключения

В случае, когда пользователь желает разлочить мобильник взглядом, механизм повторяет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный уровень (обычно больше 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ блокируется.

Адаптация к изменениям облика

Интересная особенность современных системы — способность самостоятельного обучения. Если вы постоянно доступаете к телефон с обновленной стрижкой или оптикой, алгоритм постепенно обновляет эталонный шаблон вашего внешности для повышения точности работы без ухудшения безопасности.

Защита биометрических данных данных.

Многие пользователи беспокоятся держать свои биометрические идентификационные данные на мобильном устройстве из-за угрозы утечки данных или хакерской атаки. Определенные фирмы, такие как admiral-x, предлагают методы для повышения защиты сведений клиентов.

• Локальное сохранение: Большинство устройств хранит биометричные образцы только внутрь безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из гаджет и не доступны в том числе создателю.

• Шифрование: Все сведения сберегаются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних разработчиков не обладают прямого возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения личности через системный API.

Стоит подчеркнуть важную особенность: в случае, если кто-либо достанет доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители осуществляют меры безопасности от “слепого” разблокирования — например, просят раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют категории определения лиц?

В настоящее время можно выделить выделить 3 основных метода к осуществлению этой операции:

Программное плоское идентификация

Используется только фронтальная видеокамера без дополнительных детекторов глубины. Этот подход наблюдается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость осуществления; умеренная стоимость; скоростная деятельность при достаточном освещении.
Минусы: легко ввести в заблуждение фотографией; неустойчивая деятельность ночью; низкая безопасность.

Аппаратное объёмное сканирование

Использует инфракрасную камеру + проекционный модуль пикселей + датчики дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: большая достоверность; не получится обмануть фото/видео; стабильная работа при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с интеграцией ИИ

Используют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как адмирал х и Google Pixel Face Unlock современных поколений, объединяют фронтальную камеру c инфракрасным сенсором движения Soli Radar для предотвращения от подделок руками/масками/видеоэкранами чужих устройств.

Иллюстрации использования различных техник

• iPhone модели X/11/12/13/14 используют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил подобие Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное плоское распознавание по фото фронталкой, так и сенсор ириса глаза.
• Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и ложные срабатывания

Несмотря на поразительный успехи технологий за прошедшие лет, совершенных механизмов пока не наблюдается:

1. Возможность мошенничества: Доступные смартфоны легко “разблокируются” качественной снимком пользователя или видео с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые идеальные системы могут перепутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
3. Трансформации облика: Внезапное похудение/увеличение массы тела, хирургические вмешательства либо травмы иногда требуют перерегистрации биометрии.
4. Условия записи: Интенсивная подсветка солнцем или глубокая затенение могут понизить аккуратность идентификации признаков.

Вот несколько рекомендаций для защищённому использованию:

• Для значимых операций всегда применяйте двухэтапную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Регулярно обновляйте программное обеспечение телефона для защиты от современных угроз;
• Включайте функцию “Требовать раскрытых глаз” везде, где она доступна.

В каких местах также используется технологии кроме смартфонов?

Пускай предмет этой публикации посвящена конкретно портативным гаджетам, необходимо сказать о прочих направлениях внедрения технологии:

• Мониторинг доступа в рабочих помещениях и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Электронные паспорта нового типа;
• Системы видеоконтроля городских служб;
• Автоматизирование регистрации посещаемости образовательных учреждений/вузов;
• Авторизация участников компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через турникет без карты или мобильника! Схожие инициативы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом трансформируется технический процесс в нынешнее время?

Всякий годочек проявляются современные концепции для повышения стандарта деятельности систем идентификации лиц:

1. Увеличивается детализация сенсоров — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность ошибки;
2. Улучшаются нейронные сети — передовые структуры модели MobileNetV3 дают возможность скоростно обучаться новым особенностям облика обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Совершенствуются способы антиспуфинга — теперь смартфоны способны отличать реальные анимированные лица от неподвижных фото/маскировок по микроскопическим движениям кожи.
4. Взаимодействие со смарт-гаджетами — смарт-часы могут самостоятельно заблокировать телефон, если обладатель удалился на значительное расстояние.
5. Проявляются комбинированные системы — в частности совмещающие речевую идентификацию + облик + пальцевой отпечаток.

Итак, какие тренды особенно популярны сейчас:

1) Миниатюризация элементов

Производители пытаются сократить габариты отверстия (“чёлки”) под сенсоры на экране за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на аппарате

Для улучшения личной безопасности всё больше вычислений осуществляется внутри устройства без пересылки информации во дополнительный облачный услугу.

3) Унификация стандартов

Google интенсивно пропагандирует стандарт BiometricPrompt API, чтобы аналогичные системы, как admiral x, и каждые Android-приложения могли работать с любыми видами биометрии стандартизированно.

Что решить сегодня?

Когда вам важна предельная безопасность информации, подбирайте топовые модели с вмонтированным ИК-излучателем или ToF-датчиком глубины.

• iPhone всех существующих последних моделей
• Huawei Companion/P Series линейки
• Mix Professional
• Vivo X линейки
• Оппо Найти Х линейки.

Если финансы невелик – лучше предпочесть обычным средствам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в admiral x, задействовать только как второстепенную опцию удобства.

Каким способом улучшить практичность функционирования опции?

Есть пара лайфхаков для пользователей, кто уже применяет разблокировку через лицо:

1. Часто обновляйте свою фото-шаблон, если значительно меняется внешность.
2. Не упускайте из виду чистить объектив передней камеры – пятна могут снизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает камеру если вы поднимаете его.
4. При записи старайтесь держать голову прямо напротив видеоустройства не допуская сильного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвели взгляд от дисплея.

Возможности развития техники

В ближайшие времена можно предвкушать развития полностью бесконтактных способов распознавания человека сразу по нескольким биометрическим параметрам одновременно: облик + голос + манера ходьбы + движения рук!

Также предполагается появление новых способов обеспечения личной информации – к примеру, переменное корректировка цифрового паттерна после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых увлекательных техник нашего времени! Она предоставляет взаимодействие со мобильным устройством удобнее чем раньше, и такие программы, как admiral-x, могут в разы оптимизировать ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как устроена эта система в деталях, – сумеете более осмысленно подбирать свой очередной устройство!