Каким способом функционирует определение лиц в смартфонах

Почему мы останавливаемся на разблокирование по лицевому распознаванию

В недавние годы идентификация физиономий является одной из наиболее востребованных функций для открытия умных телефонов. Лишь некоторые годов тому назад основная часть использующих обходились PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект превращает эту конкретную функцию такой востребованной? Прежде всего, это практично: не нужно запоминать замысловатые пароли или находить правильный палец в темноте. Кроме того, это мгновенно: современные алгоритмы идентифицируют лицо практически за мгновения ока. В-третьих, это впечатление футуристичности — будто в кинолентах про казино вулкан агентов.

Тем не менее за данной видимой легкостью скрывается полный мир комплексных техник и инженерных разработок. Попробуем исследовать, как точно функционирует фейсканирование в новейших смартфонах, какие существуют методы, насколько они безопасны и что нас предстоит.

Сжатая повествование развития технологии

Идентификация лиц как технология имеется уже более пятидесяти лет. Первые эксперименты машинного изучения облика были предприняты еще в 1960-х годах в научных учреждениях США. Тогда компьютеры могли лишь определять очертания черепа и вычислять промежутки между очами и устами на ахроматических снимках.

Начальные бизнес установки стали доступны в 90-х, но они были далеки от совершенства: действовали неспешно и часто ошибались. Только с эволюцией нейронных сетей и таких платформ, как вулкан россии, сильных мобильных микросхем определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным сканированием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные решения.

Ключевые стадии функционирования механизма распознавания

Процесс идентификации лица можно условно сегментировать на несколько основных этапов:

1. Распознавание лица — устройство определяет присутствие гуманного образа в снимке.
2. Выделение характеристик — система анализирует особенности физиономии: конфигурацию зрительных органов, обонятельного органа, губ, расположение бровей.
3. Построение структуры — создаётся неповторимый электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со стандартом — сформированный шаблон сопоставляется со зафиксированной при внесении биометрической информацией владельца.
5. Принятие выбора — если сходство достаточно значительное, смартфон открывается.

Каждый из указанных этапов нуждается в специальных методов и оптимизаций для оперативной работы непосредственно на девайсе.

Железные составляющие: что находится внутри них

Типичная передняя камера.

Наиболее простой вариант распознавания лица задействует исключительно лицевую камеру смартфона смартфона. Данный способ реализован во многочисленных доступных моделях Android-девайсов.

Положительные стороны:

• Не нуждается в потребляет внешних сенсоров.
• Быстро действует при качественном освещённости.

Отрицательные стороны:

• Просто ввести в заблуждение фотографией или видео.
• Неудачно работает при плохом освещённости или необычных ракурсах.

Инфракрасная фотокамера и точечный проектор

Более усовершенствованные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Каким способом это действует:

• Точечный проекционный прибор показывает на лицо использующего невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 меток).
• ИК камера фиксирует изменение формы данной сетки по плоскости физиономии.
• Получается 3D карта глубины глубины, которая почти неподвластна для имитации типичной фото или маской.

Выигрыши

• Надёжная функционирование даже в полной неосвещённости.
• Большая защита к подделкам.
• Точность определения свыше 99%.

Добавочные сенсоры

В определённых аппаратах используются также вспомогательные сенсоры: ToF (Time-of-Flight), которые измеряют период распространения света до предмета и обратно; RGB-датчики дальности; специальные оптические измерители расстояния для построения более детализированной 3D-модели физиономии.

Эти инновации используются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: искуственный интеллект на исполнении

Современные механизмы идентификации физиономий невозможны без применения искусственного интеллекта и машинного обучения. Именно благодаря таким разработкам, как вулкан россии, устройство может распознавать пользователя даже при метаморфозах внешности: новая укладка, растительность на лице, очки или косметика не становятся помехой для деблокировки.

Распознавание лиц

В первом стадии система должна мгновенно распознать лицо внутри полного изображения камеры. Для данной цели применяются многоуровневые классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены находить лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии находить физиономию даже при неполном перекрытии (например, платком или ладонью).

Определение важных точек

После идентификации лица механизм, такая как вулкан россии, устанавливает положение основных точек: кончики глаз, верхушка носа, границы губ и так далее. Часто задействуется от 68 до 128 основных меток на лицевой области.

Это требуется для выравнивания картинки: если человек удерживает смартфон под наклоненным, или склонил голову, программа “выпрямляет” изображение до нормального состояния для последующего изучения.

Построение биометрического идентификатора образца

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 вещественных чисел.

Такой формат очень трудно сфальсифицировать: он не сохраняет непосредственно изображение пользователя, а лишь особенные характеристики его вида, что делает его совершенным для таких площадок, как vulkan russia.

Сравнительный анализ и осуществление выбора

Если юзер хочет открыть телефон глазами, механизм осуществляет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный границу (обычно больше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ блокируется.

Приспособление к изменениям внешности

Занимательная характеристика нынешних системы — способность самообучения. Если вы регулярно открываете мобильное устройство с новой укладкой или очками, система постепенно модернизирует эталонный образец вашего лица для увеличения точности действия без ухудшения безопасности.

Защита биометрических данных.

Множество клиенты опасаются хранить свои био-идентификационные данные на смартфоне из-за угрозы потери данных или взлома устройства. Иные фирмы, такие как vulkan russia, предлагают варианты для повышения безопасности сведений юзеров.

• Локальное сбережение: Преимущественно аппаратов сохраняет био-идентификационные шаблоны лишь в пределах защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из гаджет и недоступны в том числе производителю.

• Шифрование: Все данные сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих девелоперов не имеют прямого возможности доступа к биометрическим данным; они могут лишь требовать факт верификации идентичности через системный API.

Необходимо упомянуть важную деталь: если кто-либо достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители реализуют меры безопасности от автоматического разблокирования — к примеру, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют категории идентификации лиц на изображениях?

На сегодняшний день можно определить различить 3 ключевых подхода к выполнению этой задачи:

Софтверное 2D распознавание

Эксплуатируется только фронтальная видеокамера без экстра датчиков глубины. Подобный способ используется наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость осуществления; умеренная стоимость; оперативная деятельность при хорошем освещении.
Минусы: легко обмануть фотографией; ненадежная функционирование ночью; слабая безопасность.

Техническое объёмное сканирование

Использует инфракрасную камеру + проекционный модуль точек + датчики дистанции (Face ID у Apple; подобные технологии у Huawei Mate).
Плюсы: значительная надежность; невозможно подделать изображение/видеозапись; стабильная функционирование в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с ИИ-дополнением

Задействуют комбинацию софтверных методов + аппаратную обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, как вулкан россии и Google Pixel Face Unlock новейших поколений, комбинируют фронтальную камеру c инфракрасным сенсором движения Soli Radar для защиты от подделок руками/масками/видеоэкранами посторонних устройств.

Иллюстрации эксплуатации различных методов

• iPhone линейки X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз внедрил подобие Face ID в числе Android.
• Samsung Galaxy S10/S20 поддерживают как программное обеспечение плоское определение по изображению селфи-камерой, так и сенсор ириса глаза.
• Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Вопросы защиты и ложные сигналы

Несмотря на поразительный развитие технологий за прошедшие лет, совершенных систем пока не существует:

1. Шанс обмана: Недорогие телефоны без труда доступны качественной фотографией пользователя или роликом с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые совершенные устройства могут ошибиться между монозиготными близнецами либо семьями с очень похожей внешностью.
3. Метаморфозы внешнего вида: Внезапное снижение веса/увеличение массы тела, косметические процедуры либо повреждения иногда требуют обновления данных биометрических данных.
4. Условия съёмки: Интенсивная освещённость солнечным светом или же плотная затенение могут понизить точность распознавания признаков.

Вот некоторые советов по безопасному использованию:

• Для критически важных операций всегда применяйте двухэтапную аутентификацию;
• Не активируйте функцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Постоянно обновляйте прошивку мобильного устройства для защиты от новых видов атак;
• Включайте настройку “Требовать раскрытых глаз” там, где она имеется.

В каких областях дополнительно применяется технология помимо мобильных телефонов?

Несмотря на то, что основная мысль нашей статьи посвящена в частности смартфонам и планшетам, стоит упомянуть о других сферах применения технологии:

• Мониторинг входа в рабочих помещениях и резиденциях;
• Платёжные аппараты банков (“Face Pay”);
• Виртуальные паспорта современного образца;
• Системы видеонаблюдения городских подразделений;
• Автоматизация учёта посещаемости учебных заведений/вузов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже испытывается система платежа проезда по лицу (“Face Pay”) — хватит пройти через барьер без карты или мобильника! Схожие программы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом изменяется технология в нынешнее время?

Всякий год появляются современные идеи для повышения уровня работы систем лицевого распознавания:

1. Увеличивается детализация датчиков — чем больше деталей фиксируется камерой/датчиками глубины, тем меньше риск погрешности;
2. Совершенствуются нейросети — новейшие архитектуры вида MobileNetV3 дают возможность оперативно обучаться дополнительным чертам вида пользователя прямо на устройстве без отправки данных в облако.
3. Развиваются способы антиспуфинга — теперь мобильные устройства умеют различать реальные движущиеся лица от фиксированных фото/масок по микроскопическим микродвижениям.
4. Интеграция со интеллектуальными приборами — смарт-часы могут самостоятельно блокировать мобильный телефон, если обладатель ушёл далеко.
5. Возникают комбинированные механизмы — к примеру комбинирующие голосовую идентификацию + облик + пальцевой отпечаток.

Вот, те тенденции очень актуальны в данный момент:

1) Миниатюризация элементов

Изготовители стараются минимизировать размер выреза (“чёлки”) для сенсоры на экране за счёт внедрения компактных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения личной безопасности всё больше вычислений осуществляется локально без пересылки информации во дополнительный облачный сервис.

3) Стандартизация норм

Гугл активно продвигает эталон BiometricPrompt API, чтобы такие системы, вроде вулкан россия, и все Android-аппы были совместимы с всеми формами биометрии унифицированно.

Что подобрать на сегодня?

Если тебе нужна максимальная безопасность информации, выбирайте флагманские устройства с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone каждого новейших поколений
• Huawei Companion/P Series линейки
• Mi Expert
• Vivo X модели
• Oppo Обнаружить Х серии.

Если средства невелик – лучше отдавать предпочтение классическим средствам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную опцию удобства.

Каким образом улучшить практичность использования возможности?

Есть пара хитростей для пользователей, кто уже применяет разблокировку через лицо:

1. Часто меняйте свою изображение-шаблон, если значительно трансформируется внешность.
2. Не забывайте чистить линзу фронтальной камеры – пятна могут понизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам запускает камеру если вы берёте его в руки.
4. В процессе регистрационного процесса пытайтесь удерживать голову прямо перед камеры не допуская сильного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отворачиваетесь от дисплея.

Возможности эволюции инноваций

В скоро наступающие годы можно предполагать появления полностью безконтактных способов опознания персоны сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + шаги + движения рук!

Также предполагается возникновение новых способов охраны личной информации – например, переменное изменение электронного шаблона после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых захватывающих технологий нашего времени! Она делает общение со телефоном удобнее чем когда-либо прежде, и такие аппы, как vulkan russia, могут в разы оптимизировать ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как функционирует эта методика внутри, – сможете осознаннее выбирать свой очередной девайс!