Каким образом функционирует распознавание лицевых образов в мобильных устройствах

Для чего мы выбираем разлочивание по лицу

В недавние времена распознавание лиц является одной из наиболее востребованных возможностей для деблокировки умных телефонов. Еще несколько лет назад основная масса пользователей обходились пин-кодами, паролями или датчиками отпечатков пальцев. Но при появлением таких технологий, как admiral x, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что обуславливает эту конкретную особенность такой востребованной? Во-первых, это комфортно: не нужно удерживать в памяти замысловатые пароли или находить верный палец в тьме. Во-вторых, это мгновенно: современные системы идентифицируют лицо фактически за мгновения ока. В-третью очередь, это ощущение футуристичности — будто в кинолентах про адмирал x разведчиков.

Впрочем за такой видимой легкостью скрывается весь универсум трудных методов и инженерных разработок. Давайте понять, как точно функционирует фейсканирование в современных мобильных телефонах, какие существуют технологии, насколько они надёжны и что нас ждёт впереди.

Короткая повествование развития технологии

Распознавание лиц как технология существует уже более пятидесяти годов. Изначальные эксперименты машинного изучения лица были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда вычислительные машины способны были лишь выделять контуры лица и определять дистанции между зрачками и губами на ахроматических изображениях.

Начальные коммерческие установки появились в девяностых годах, но они были неидеальны: работали медленно и часто ошибались. Только с развитием синтетических сетей и таких систем, как адмирал х, высокопроизводительных мобильных процессоров определение лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать свои разработки.

Главные стадии работы механизма распознавания

Процесс идентификации лица можно условно поделить на несколько ключевых этапов:

1. Распознавание лица — аппарат определяет существование гуманного образа в снимке.
2. Извлечение особенностей — система исследует контуры лица: конфигурацию зрительных органов, обонятельного органа, губ, расположение надбровных дуг.
3. Построение шаблона — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с эталоном — сформированный шаблон сравнивается со зафиксированной при внесении биометрической информацией владельца.
5. Принятие определения — если сходство достаточно значительное, смартфон открывается.

Любой из данных шагов нуждается в особых алгоритмов и усовершенствований для оперативной работы непосредственно на девайсе.

Аппаратные элементы: что находится внутри них

Типичная фронтальная камера.

Самый легкий вариант распознавания физиономии использует только переднюю видеокамеру мобильного устройства. Подобный подход реализован во многочисленных бюджетных версиях Android-устройств.

Преимущества:

• Необходимо нуждается в дополнительные сенсоров.
• Быстро работает при хорошем освещённости.

Минусы:

• Несложно одурачить снимком или видео.
• Плохо функционирует при слабом освещении или нестандартных точках зрения.

Инфракрасная камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс является основой Face ID от Apple.

Как это работает:

• Точечный проектор отображает на лицо пользователя невидимую сетку из тысяч инфракрасных точек (например, Face ID применяет около 30 000 меток).
• Инфракрасная камера фиксирует деформацию данной решетки по поверхности физиономии.
• Создаётся 3D карта глубины, которая практически неподвластна для подделки типичной фото или маской.

Достоинства

• Надёжная деятельность даже в полной неосвещённости.
• Высокая устойчивость к фальсификациям.
• Точность определения выше 99%.

Добавочные датчики

В определённых устройствах задействуются также экстра сенсорные устройства: ToF (Time-of-Flight), которые измеряют время движения луча до цели и обратно; RGB-датчики глубины; специальные оптические дальномеры для формирования более точной 3D-модели физиономии.

Эти инновации встречаются в основном во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: синтетический разум в действии

Нынешние системы идентификации лиц немыслимы в отсутствие использования ИИ и машинного обучения. Именно благодаря таким технологиям, как адмирал х, устройство в состоянии идентифицировать владельца даже при метаморфозах внешнего вида: новая стрижка, щетина, очки или косметика не становятся препятствием для открытия.

Распознавание физиономии

На стартовом стадии система должна мгновенно распознать образ лица в пределах полного изображения камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые “обучены” распознавать человеческие лица среди множества других объектов.

Пример: метод MTCNN может обнаруживать лицо даже при частичном перекрытии (например, шарфом или ладонью).

Определение основных точек

После обнаружения лица устройство, такая как адмирал х, вычисляет расположение основных точек: кончики глаз, верхушка носа, границы губ и так далее. Часто используется от 68 до 128 основных точек на лицевой области.

Это нужно для выравнивания визуала: если пользователь находится с телефон под наклоненным, или склонил голову, программа “выпрямляет” картинку до обычного угла для последующего изучения.

Построение биометрического идентификатора модели

Далее искусственная сеть строит компактное цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Такой шаблон весьма сложно подделать: он не сохраняет непосредственно изображение юзера, а лишь уникальные характеристики его облика, что делает его идеальным для таких платформ, как admiral-x.

Сравнение и осуществление выбора

Когда юзер хочет открыть мобильник глазами, программа воспроизводит все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый границу (обычно превышает 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ блокируется.

Адаптация к метаморфозам внешности

Занимательная черта современных систем — возможность самостоятельного обучения. Если вы регулярно открываете мобильное устройство с обновленной стрижкой или оптикой, алгоритм постепенно обновляет эталонный шаблон вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрических данных данных.

Большинство пользователи беспокоятся хранить свои биометрические идентификационные данные на смартфоне из-за вероятности утечки данных или хакерской атаки. Иные компании, такие как admiral-x, предоставляют методы для увеличения безопасности данных пользователей.

• Локальное сбережение: Преимущественно девайсов сохраняет био-идентификационные модели только внутри безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют аппарат и не доступны даже создателю.

• Шифрование: Все информация сберегаются только в шифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы сторонних девелоперов не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения личности через системный API.

Необходимо упомянуть важную деталь: если какой-то человек получит физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители внедряют меры безопасности от “слепого” разблокирования — к примеру, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют виды идентификации лиц?

Сегодня можно различить 3 основных подхода к выполнению этой задачи:

Программируемое двухмерное распознавание

Используется только лицевая видеокамера без вспомогательных сенсоров глубины. Подобный метод наблюдается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность осуществления; минимальная цена; быстрая деятельность при достаточном свете.
Минусы: несложно обмануть фотографией; нестабильная работа ночью; недостаточная охрана.

Аппаратное объёмное сканирование

Использует инфракрасную видеокамеру + проектор точек + датчики глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Достоинства: большая достоверность; нельзя обмануть фото/видео; устойчивая деятельность при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные методы с интеграцией ИИ

Задействуют комбинацию софтверных методов + аппаратно-техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как адмирал х и Google Pixel Face Unlock современных поколений, объединяют фронталку c инфракрасным датчиком мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Образцы эксплуатации разных способов

• iPhone линейки X/11/12/13/14 используют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID среди Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное двухмерное распознавание по снимку селфи-камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro использует систему из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности безопасности и неверные срабатывания

Несмотря на поразительный успехи инноваций за последние годы, идеальных систем пока не наблюдается:

1. Шанс мошенничества: Недорогие телефоны без труда доступны качественной снимком хозяина или же роликом с экрана другого устройства.
2. Идентичные близняшки: Даже самые идеальные устройства могут ошибиться между монозиготными близнецами либо родичами с очень схожей внешностью.
3. Изменения внешности: Внезапное утрата веса/набор веса, косметические процедуры либо повреждения порой требуют обновления данных биометрии.
4. Условия съёмки: Интенсивная освещённость солнечным светом либо глубокая затенение могут снизить верность определения признаков.

Вот некоторые рекомендаций по защищённому применению:

• Для важных операций всегда используйте двухфакторную аутентификацию;
• Не запускайте функцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
• Постоянно апгрейдите прошивку телефона для обеспечения безопасности от современных угроз;
• Включайте функцию “Требовать раскрытых глаз” везде, где она есть.

В каких местах ещё применяется технология за исключением мобильных телефонов?

Несмотря на то, что предмет этой работы посвящена в частности портативным гаджетам, следует отметить прочих направлениях внедрения технологии:

• Управление доступа в офисах и жилых домах;
• Платёжные аппараты банков (“Face Pay”);
• Электронные удостоверения личности последнего типа;
• Комплексы видеомониторинга муниципальных подразделений;
• Автоматизирование отслеживания присутствия образовательных учреждений/университетов;
• Аутентификация пользователей компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или мобильника! Аналогичные проекты развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется техпроцесс в наше время?

Каждый год проявляются новые мысли для повышения стандарта работы систем лицевого распознавания:

1. Увеличивается детализация сенсорных устройств — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность неточности;
2. Развиваются искусственные интеллекты — современные конструкции модели MobileNetV3 обеспечивают возможность быстро обучаться свежим особенностям вида обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Совершенствуются способы антиспуфинга — теперь телефоны могут различать подлинные движущиеся лица от неподвижных снимков/масок по мельчайшим микродвижениям.
4. Синхронизация со умными устройствами — умные часы могут автоматически блокировать телефон, если пользователь отошёл далеко.
5. Появляются гибридные механизмы — к примеру объединяющие речевую идентификацию + лицо + отпечаток пальца.

Вот, какие направления в особенности актуальны сейчас:

1) Уменьшение компонентов

Изготовители намереваются минимизировать величину отверстия (“чёлки”) для датчики на экране за счёт внедрения компактных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на аппарате

Для увеличения конфиденциальности всё больше вычислений происходит на месте без передачи данных во дополнительный облачный сервис.

3) Упорядочивание норм

Google активно продвигает стандарт BiometricPrompt API, чтобы такие площадки, например как admiral x, и каждые Android-приложения могли работать с всеми формами биометрии единообразно.

Какое подобрать на сегодня?

Если вам всем нужна максимальная сохранность данных, остановите выбор на топовые устройства с вмонтированным ИК-проектором или же ToF-сенсором глубины.

• iPhone каждого последних версий
• Huawei Mate/P Series ряда
• Mix Pro
• Vivo X серии
• Oppo Find X линейки.

Если финансы скромен – лучше выбирать классическим средствам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в admiral x, задействовать только как дополнительную возможность комфорта.

Каким способом повысить практичность работы опции?

Есть несколько лайфхаков для пользователей, кто уже использует разблокировку через лицо:

1. Часто обновляйте свою фотографию-шаблон, если значительно меняется облик.
2. Не пренебрегайте чистить линзу передней камеры – пятна могут уменьшить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам активирует фотоаппарат как только вы поднимаете его.
4. Во время регистрационного процесса постарайтесь удерживать лицо неподвижно впереди объектива исключая резкого наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от дисплея.

Перспективы прогресса инноваций

В ближайшие времена можно ожидать развития полностью бесконтактных способов опознания персоны сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + шаги + манипуляции руками!

Также вероятно развитие свежих подходов защиты конфиденциальности – например, динамическое модификация цифрового шаблона после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из самых захватывающих инноваций нашего периода! Она обеспечивает интеракцию со смартфоном удобнее чем раньше, и такие программы, как admiral-x, могут значительно улучшить ваш опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как устроена эта система изнутри, – будете в состоянии осознаннее подбирать свой очередной устройство!