Как действует идентификация лицевых образов в смартфонах
Зачем мы предпочитаем разлочивание по лицевому распознаванию
В недавние годы идентификация лиц стало одной из наиболее востребованных опций для разблокировки мобильных телефонов. Всего пару лет назад основная масса пользователей обходились пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением подобных технологий, например admiral x, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.
Какая вещь делает эту особенность такой востребованной? Для начала, это удобно: не нужно запоминать трудные пароли или искать правильный палец в темноте. Также, это мгновенно: современные программы идентифицируют лицо практически за мгновение. В-третьих, это впечатление футуристичности — как будто в кинофильмах про адмирал х разведчиков.
Впрочем за такой кажущейся легкостью скрывается весь мир трудных техник и инженерных решений. Попробуем разобраться, как конкретно работает фейсканирование в современных гаджетах, какие применяются способы, насколько они надёжны и что нас ожидает в будущем.
Короткая хроника прогресса инноваций
Идентификация лиц как технология имеется уже более пятидесяти лет. Первые пробы машинного исследования лица были предприняты еще в 1960-х годах в исследовательских центрах США. Тогда ЭВМ способны были лишь обозначать силуэты головы и измерять дистанции между глазами и устами на ахроматических снимках.
Изначальные торговые системы возникли в 1990-х годах, но они были неидеальны: функционировали медленно и часто давали сбои. Только с эволюцией синтетических сетей и таких платформ, как адмирал х, мощных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.
В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали интегрировать свои разработки.
Основные шаги работы устройства распознавания
Процесс идентификации лица можно ориентировочно сегментировать на несколько основных этапов:
- Обнаружение лиц — устройство распознает присутствие человеческого лица в кадре.
- Извлечение характеристик — алгоритм изучает особенности физиономии: конфигурацию глаз, носа, уст, расположение надбровных дуг.
- Построение структуры — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
- Сравнение со эталоном — сформированный шаблон сверяется с сохранённой при учёте биометрической сведениями владельца.
- Принятие выбора — если совпадение достаточно существенное, смартфон открывается.
Каждый из этих этапов нуждается в особых методов и оптимизаций для оперативной работы прямо на устройстве.
Аппаратные элементы: что скрыто внутри
Обычная передняя камера.
Самый простой вариант идентификации облика использует исключительно переднюю видеокамеру смартфона. Подобный способ осуществлён во многих недорогих версиях Android-девайсов.
Достоинства:
- Необходимо требует дополнительных датчиков.
- Оперативно функционирует при достаточном освещении.
Слабые стороны:
- Просто обмануть снимком или роликом.
- Неправильно работает при плохом освещении или необычных ракурсах.
Инфракрасная камера и пунктирный проектор
Более совершенные системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика составляет базу Face ID от Apple.
Как это функционирует:
- Точечный проектор показывает на облик использующего невидимую структуру из тысяч инфракрасных точек (например, Face ID задействует около 30 000 точек).
- ИК камера записывает изменение формы этой решетки по поверхности физиономии.
- Создаётся трёхмерная карта глубины глубины, которая практически невозможна для подделки типичной снимком или маскировкой.
Преимущества
- Надёжная работа даже в полной темноте.
- Сильная защита к подделкам.
- Точность распознавания выше 99%.
Добавочные сенсоры
В отдельных аппаратах задействуются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период движения луча до цели и обратно; Цветные-датчики глубины; специальные лазерные измерители расстояния для создания более аккуратной 3D-модели физиономии.
Эти технологии используются наиболее часто во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).
Софтверные методы: искусственный интеллект на действии
Современные устройства опознания лиц немыслимы в отсутствие эксплуатации искусственного интеллекта и машинного обучения. Именно из-за таким разработкам, как адмирал х, аппарат может идентифицировать юзера даже при трансформациях внешности: новая стрижка, борода, очки или макияж не становятся препятствием для разблокировки.
Распознавание лица
На стартовом стадии алгоритм обязана быстро обнаружить лицо среди всего изображения камеры. Для этого применяются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые “обучены” находить лиц человека среди множества других объектов.
Пример: метод MTCNN в состоянии находить физиономию даже в случае неполном перекрытии (например, шарфом или ладонью).
Идентификация важных моментов
После обнаружения лица механизм, такая как адмирал х, вычисляет положение основных точек: края глаз, верхушка носа, границы губ и так далее. Часто задействуется от 68 до 128 ключевых маркеров на лице.
Это необходимо для нормализации картинки: если пользователь держит смартфон под наклоном, или повернул головку, программа “выпрямляет” картинку до стандартного положения для последующего изучения.
Формирование биометрии модели
Далее нейронная сеть строит сжатое цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.
Этот формат крайне затруднительно сфальсифицировать: он не удерживает само изображение пользователя, а лишь особенные характеристики его вида, что делает его совершенным для таких платформ, как admiral-x.
Сравнительный анализ и принятие решения
Когда юзер желает разблокировать смартфон взором, программа осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.
Если схожесть превышает установленный порог (обычно превышает 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ запрещается.
Привыкание к изменениям внешнего вида
Занимательная характеристика современных систем — возможность самообучения. Если ты постоянно разблокируете мобильное устройство с новой укладкой или очками, алгоритм постепенно обновляет эталонный образец вашего внешности для улучшения точности функционирования без ухудшения безопасности.
Безопасность биометрии информации.
Множество клиенты опасаются сохранять свои биометрические данные на мобильном устройстве из-за угрозы потери данных или взлома гаджета. Иные организации, вроде admiral-x, предоставляют методы для увеличения безопасности данных юзеров.
-
Локальное сбережение: Основная часть девайсов сохраняет биометричные шаблоны исключительно внутри безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют гаджет и закрыты включая производителю.
-
Шифрование: Все данные хранятся только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.
-
Изоляция программ: Программы сторонних разработчиков не имеют непосредственного возможности доступа к биометрическим; они могут лишь требовать факт верификации идентичности через системный API.
Следует подчеркнуть важную подробность: если какой-то человек получит доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании осуществляют меры безопасности от автоматического разблокирования — в частности, требуют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.
Какие бывают виды распознавания лиц?
Сегодня можно выделить различить три ключевых метода к реализации этой функции:
Софтверное 2D определение
Эксплуатируется только передняя камера без вспомогательных детекторов глубины. Такой подход используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).
Плюсы: несложность осуществления; низкая стоимость; оперативная работа при достаточном свете.
Минусы: несложно ввести в заблуждение фотографией; ненадежная функционирование ночью; слабая защищенность.
Оборудование для 3D сканирование
Применяет ИК камеру + проекционный модуль точек + датчики дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: значительная надежность; нельзя обмануть фото/видео; постоянная деятельность при любом освещении.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)
Комбинированные способы с интеграцией ИИ
Задействуют комбинацию софтверных методов + техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как адмирал х и Google Pixel Face Unlock новейших версий, объединяют фронталку c инфракрасным датчиком мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.
Примеры использования различных техник
- iPhone серии X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
- Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID в ряду Android.
- Samsung Galaxy S10 версия/S20 поддерживают как софтверное двухмерное определение по изображению фронтальной камерой, так и датчик ириса глаза.
- Huawei Mate20 Pro применяет набор из ИК-инфракрасного света + Dot Projector + ToF-датчик
Проблемы охраны и неверные срабатывания
Несмотря на впечатляющий развитие инноваций за последние годы, совершенных системы пока не имеется:
- Возможность подвоха: Недорогие смартфоны просто открываются четкой снимком хозяина либо видео с дисплея иного гаджета.
- Идентичные близняшки: Даже самые безупречные механизмы могут спутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
- Метаморфозы облика: Внезапное снижение веса/увеличение массы тела, хирургические вмешательства или травмы порой необходимы для повторной регистрации биометрии.
- Условия фотографирования: Яркая подсветка солнцем либо плотная затенение могут уменьшить точность определения признаков.
Вот некоторые советов для безопасному эксплуатации:
- Для критически важных операций всегда используйте двухэтапную аутентификацию;
- Не запускайте опцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
- Регулярно обновляйте прошивку ПО смартфона для предотвращения угроз от современных угроз;
- Включайте функцию “Требовать раскрытых глаз” в тех местах, где она имеется.
Где также находится применение технология за исключением смартфонов?
Несмотря на то, что тема данной статьи касается конкретно мобильным устройствам, стоит упомянуть о альтернативных областях использования технологии:
- Контроль прохода в деловых центрах и резиденциях;
- Платёжные аппараты банков (“Face Pay”);
- Электронные идентификационные документы последнего образца;
- Системы видеоконтроля городских служб;
- Автоматизирование отслеживания присутствия образовательных учреждений/институтов;
- Вход участников персональных компьютеров/ноутбуков.
Например: В городском метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без карты или мобильника! Похожие программы реализуются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.
Как меняется техпроцесс в нынешнее время?
Каждый годик появляются свежие концепции для усовершенствования уровня функционирования систем распознавания лиц:
- Увеличивается детализация сенсоров — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше риск погрешности;
- Развиваются нейросети — новейшие конструкции модели MobileNetV3 позволяют оперативно адаптироваться к новым характеристикам вида владельца прямо на устройстве без отправки данных в облако.
- Улучшаются технологии антиспуфинга — теперь телефоны способны распознавать подлинные движущиеся лица от неподвижных снимков/масок по микроскопическим движениям кожи.
- Взаимодействие со умными устройствами — смарт-часы могут автоматически блокировать телефон, если пользователь ушёл далеко.
- Возникают смешанные системы — например объединяющие речевую идентификацию + лицо + дактилоскопический след.
Итак, какие направления очень популярны сейчас:
1) Сокращение деталей
Компании намереваются сократить размер выреза (“чёлки”) под сенсоры на дисплее за счёт интеграции миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.
2) Обработка прямо на девайсе
Для повышения личной безопасности всё более обработки данных выполняется внутри устройства без пересылки информации во сторонний облачный сервис.
3) Унификация стандартов
Гугл интенсивно пропагандирует стандарт BiometricPrompt API, с целью чтобы такие системы, как admiral x, и каждые Android-приложения могли взаимодействовать с любыми видами биометрии стандартизированно.
Что выбрать сегодня?
В случае если вам всем необходима наивысшая безопасность данных, остановите выбор на передовые устройства с вмонтированным ИК-проектором или ToF-датчиком глубины.
- iPhone всех существующих последних моделей
- Huawei Partner/Series P серии
- Xiaomi Expert
- Vivo X линейки
- Oppo Обнаружить Икс серии.
Если средства ограничен – лучше выбирать традиционным способам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в admiral x, задействовать только как опциональную опцию удобства.
Как улучшить комфорт использования функции?
Есть несколько лайфхаков для людей, кто уже использует функцию распознавания лица:
- Регулярно обновляйте свою изображение-шаблон, если кардинально трансформируется облик.
- Не забывайте чистить объектив передней камеры – разводы могут понизить четкость!
- Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам включает фотоаппарат как только вы берёте его в руки.
- Во время записи старайтесь сохранять лицо прямо перед объектива без резкого наклона головы.
- Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отворачиваетесь от дисплея.
Возможности эволюции техники
В скоро наступающие периоды можно предвкушать появления полностью бесконтактных способов идентификации человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + походка + манипуляции руками!
Также предполагается развитие современных подходов обеспечения приватности – например, переменное изменение электронного паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.
Идентификация лиц – единственная из очень увлекательных техник нашего времени! Она обеспечивает взаимодействие со телефоном удобнее чем когда-либо прежде, и такие программы, как admiral-x, могут в разы улучшить ваш опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.
Теперь, когда вы знаете, как устроена эта методика в деталях, – сможете вдумчиво подбирать свой очередной устройство!
Add comment