Каким образом действует определение лицевых образов в телефонах

Для чего мы выбираем разблокировку по лицу

В последние времена распознавание лиц является одной из самых распространённых функций для деблокировки умных телефонов. Лишь некоторые годков назад большинство пользователей довольствовались пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, например admiral x, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь делает эту конкретную особенность очень нужной? Для начала, это комфортно: не нужно помнить трудные пароли или находить нужный палец в тьме. Во-вторых, это мгновенно: современные алгоритмы узнают лицо буквально за доли секунды. В-третью очередь, это впечатление футуризма — словно в кинолентах про admiral x зеркало разведчиков.

Впрочем за данной видимой простотой таится целый мир трудных технологий и инженерных концепций. Попробуем разобраться, как именно действует идентификация по лицу в современных мобильных телефонах, какие существуют способы, насколько они защищены и что нас предстоит.

Короткая повествование развития инноваций

Идентификация лиц как техника имеется уже более пятидесяти лет. Изначальные попытки машинного исследования облика были осуществлены еще в 1960-х годах в лабораториях США. Тогда вычислительные машины умели лишь определять контуры черепа и определять расстояния между очами и устами на монохромных изображениях.

Начальные торговые платформы стали доступны в 90-х, но они были несовершенны: действовали неспешно и нередко ошибались. Только с эволюцией искусственных сетей и таких платформ, как адмирал х, сильных мобильных чипов распознавание лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным сканированием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои решения.

Главные стадии работы механизма распознавания

Процесс распознавания лица можно условно разделить на несколько основных этапов:

1. Обнаружение лица — аппарат определяет существование гуманного лица в кадре.
2. Определение особенностей — алгоритм изучает контуры облика: форму зрительных органов, носа, губ, положение бровей.
3. Построение модели — создаётся особенный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с стандартом — полученный модель сверяется с сохранённой при регистрации биометрической информацией владельца.
5. Принятие определения — если соответствие достаточно высокое, смартфон открывается.

Любой из этих стадий запрашивает индивидуальных методов и усовершенствований для оперативной работы непосредственно на девайсе.

Аппаратные компоненты: что находится в их недрах

Типичная передняя камера.

Простейший несложный вариант определения облика использует исключительно переднюю камеру смартфона смартфона. Данный метод осуществлён во многих недорогих вариантах Android-девайсов.

Достоинства:

• Не нуждается в внешних сенсоров.
• Быстро работает при хорошем освещённости.

Слабые стороны:

• Несложно одурачить фотографией или видео.
• Плохо действует при слабом освещении или необычных ракурсах.

Инфракрасная фотокамера и пунктирный проекционный аппарат

Более продвинутые системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология лежит в основе Face ID от Apple.

Каким образом это функционирует:

• Точечный проекционный прибор показывает на облик использующего невидимую решетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 точек).
• ИК устройство записывает изменение формы данной решетки по плоскости физиономии.
• Создаётся трехмерная карта глубинности, что практически неподвластна для подделки обычной снимком или маскировкой.

Преимущества

• Надёжная работа даже в полной неосвещённости.
• Высокая устойчивость к подделкам.
• Точность определения свыше 99%.

Дополнительные сенсорные устройства

В отдельных девайсах задействуются также вспомогательные датчики: ToF (Time-of-Flight), которые фиксируют период прохождения света до цели и обратно; Трехцветные-датчики дальности; специальные оптические измерители расстояния для построения более точной 3D-модели физиономии.

Эти инновации встречаются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искусственный интеллект на исполнении

Текущие механизмы идентификации физиономий неосуществимы в отсутствие эксплуатации ИИ и machine learning. Именно благодаря таким инновациям, как адмирал х, аппарат может идентифицировать владельца даже при метаморфозах внешности: новая причёска, щетина, очки или грим не становятся помехой для разблокировки.

Обнаружение физиономии

При начальном этапе система должна быстро найти ликовое изображение среди полного изображения камеры. Для этого задействуются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN способен обнаруживать физиономию даже в случае неполном перекрытии (например, платком или рукой).

Идентификация ключевых аспектов

После распознавания лица система, такая как адмирал х, устанавливает положение основных точек: кончики глаз, конец носа, края губ и так далее. Часто задействуется от 68 до 128 основных меток на лице.

Это нужно для нормализации изображения: если человек находится с смартфон под наклоненным, или наклонил головку, программа исправляет изображение до обычного угла для дальнейшего анализа.

Создание биометрического образца

Далее нейронная сеть строит уплотненное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 чисел с плавающей запятой.

Такой образец крайне трудно подделать: он не хранит само фото юзера, а лишь особенные черты его вида, что делает его оптимальным для таких площадок, как admiral-x.

Сравнение и вынесение выбора

Если пользователь желает открыть телефон взором, программа осуществляет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный уровень (обычно превышает 99%), телефон, как и платформа admiral-x, разблокируется; если нет — доступ не предоставляется.

Приспособление к трансформациям внешнего вида

Увлекательная черта актуальных систем — способность самостоятельного обучения. Если ты постоянно доступаете к телефон с новой укладкой или очками, алгоритм постепенно освежает эталонный образец вашего облика для повышения точности работы без ухудшения безопасности.

Защита биометрических данных данных.

Многие клиенты опасаются держать свои биометрические данные на смартфоне из-за вероятности утечки данных или хакерской атаки. Некоторые организации, например admiral-x, предлагают решения для увеличения сохранности сведений пользователей.

• Локальное сохранение: Основная часть устройств хранит биометрические образцы лишь внутрь безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из устройство и не доступны даже производителю.

• Шифрование: Все информация сберегаются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения внешних девелоперов не имеют прямого возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Стоит отметить важную особенность: если кто-либо сможет получить доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют меры безопасности от неосознанного разблокирования — например, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются категории идентификации лиц?

Сегодня можно определить 3 ключевых метода к реализации этой задачи:

Программное 2D распознавание

Применяется только фронтальная видеокамера без вспомогательных сенсоров глубины. Такой способ используется обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность осуществления; минимальная затраты; быстрая работа при качественном свете.
Минусы: несложно обмануть снимком; неустойчивая работа ночью; низкая охрана.

Аппаратное трёхмерное сканирование

Применяет ИК камеру + проекционный модуль точек + датчики дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Плюсы: высокая надежность; нельзя подделать изображение/видеозапись; устойчивая функционирование в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные способы с ИИ-дополнением

Задействуют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие товары, например адмирал х и Google Pixel Face Unlock последних версий, объединяют фронтальную камеру c ИК сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Образцы применения разных методов

• iPhone линейки X/11/12/13/14 применяют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые внедрил аналог Face ID среди Android.
• Samsung Galaxy S10 версия/S20 поддерживают как софтверное двухмерное определение по фото фронтальной камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro задействует систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Вопросы охраны и ошибочные тревоги

Несмотря на замечательный успехи техники за недавние годы, безупречных систем пока не существует:

1. Вероятность подвоха: Недорогие мобильники легко доступны четкой фотографией пользователя или видео с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые совершенные системы могут ошибиться между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Метаморфозы внешности: Внезапное снижение веса/набор веса, хирургические вмешательства либо травмы порой необходимы для повторной регистрации биометрии.
4. Условия фотографирования: Яркая засветка солнечным светом или плотная тень могут снизить верность идентификации признаков.

Ниже несколько советов по безопасному эксплуатации:

• Для критически важных операций всегда используйте двухэтапную аутентификацию;
• Не активируйте функцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Постоянно обновляйте программное обеспечение смартфона для предотвращения угроз от современных угроз;
• Включайте опцию “Требовать раскрытых глаз” в тех местах, где она есть.

В каких областях дополнительно применяется технологии кроме смартфонов?

Хотя предмет данной работы сосредоточена на именно смартфонам и планшетам, следует отметить прочих направлениях внедрения технологии:

• Управление входа в офисах и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Цифровые удостоверения личности современного образца;
• Комплексы видеомониторинга городских сервисов;
• Автоматизация отслеживания присутствия школ/вузов;
• Авторизация участников ПК/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без карты или мобильника! Схожие инициативы реализуются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом трансформируется техпроцесс в нынешнее время?

Любой год появляются современные идеи для усовершенствования стандарта работы систем распознавания лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше информации фиксируется камерой/датчиками глубины, тем меньше риск ошибки;
2. Развиваются искусственные интеллекты — новейшие конструкции вида MobileNetV3 позволяют быстро адаптироваться к дополнительным характеристикам облика владельца прямо на устройстве без отправки данных в облако.
3. Развиваются методы антиспуфинга — теперь телефоны способны распознавать подлинные движущиеся облики от неподвижных фото/масок по микроскопическим микродвижениям.
4. Интеграция со интеллектуальными приборами — умные часы могут самостоятельно закрыть доступ к мобильный телефон, если пользователь отошёл далеко.
5. Появляются гибридные механизмы — к примеру объединяющие аудио аутентификацию + физиономию + отпечаток пальца.

Итак, те направления в особенности популярны сейчас:

1) Сокращение компонентов

Изготовители стараются сократить величину прорези (“чёлки”) для датчики на экране за счёт внедрения миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на аппарате

Для повышения приватности всё более расчётов осуществляется локально без отправки данных во внешний облачный сервис.

3) Упорядочивание стандартов

Google интенсивно пропагандирует стандарт BiometricPrompt API, для того чтобы такие платформы, как admiral x, и каждые Android-программы могли работать с любыми видами биометрии унифицированно.

Какое выбрать на сегодня?

Если вам всем важна предельная сохранность данных, выбирайте передовые устройства со встроенным ИК-излучателем или ToF-сенсором глубины.

• iPhone всех существующих актуальных моделей
• Huawei Mate/Series P ряда
• Mi Expert
• Vivo X серии
• Oppo Обнаружить X серий.

Если бюджет скромен – лучше предпочесть классическим способам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в admiral x, задействовать только как дополнительную опцию удобства.

Как улучшить практичность работы возможности?

Есть некоторые хитростей для тех, кто уже пользуется разблокировку по лицу:

1. Регулярно меняйте свою фото-шаблон, если значительно изменяется внешность.
2. Не забывайте протирать линзу фронтальной камеры – разводы могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает фотоаппарат как только вы поднимаете его.
4. При регистрации постарайтесь удерживать лицевую часть прямо впереди объектива без сильного наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отворачиваетесь от дисплея.

Перспективы эволюции инноваций

В ближайшие времена можно предвкушать появления полностью дистанционных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + речь + шаги + манипуляции руками!

Также предполагается развитие новых способов охраны личной информации – к примеру, переменное модификация цифрового шаблона после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных инноваций нашего эпохи! Она предоставляет общение со смартфоном удобнее чем раньше, и такие приложения, как admiral-x, могут существенно оптимизировать ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как функционирует эта система изнутри, – будете в состоянии более осмысленно выбирать свой будущий гаджет!