Каким образом функционирует идентификация лиц в мобильных устройствах

Почему мы останавливаемся на разлочивание по фейсу

В прошлые годы идентификация лиц является одной из самых популярных опций для деблокировки мобильных телефонов. Еще пару годов тому назад основная масса пользователей удовлетворялись пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что делает эту конкретную особенность очень нужной? Прежде всего, это комфортно: не нужно удерживать в памяти сложные пароли или отыскивать верный палец в темноте. Кроме того, это мгновенно: современные программы распознают лицо буквально за мгновение. В-третью очередь, это чувство будущего — будто в кинолентах про вулкан казино агентов.

Тем не менее за данной на первый взгляд простотой скрывается весь мир трудных методов и инженерных разработок. Давайте исследовать, как точно работает распознавание лиц в новейших мобильных телефонах, какие применяются методы, насколько они надёжны и что нас ожидает в будущем.

Короткая хроника эволюции технологии

Распознавание лиц как техника присутствует уже более 50 лет. Изначальные попытки автоматизированного анализа лица были сделаны еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины способны были лишь определять силуэты головы и вычислять дистанции между глазами и ртом на монохромных снимках.

Первые торговые системы появились в 1990-х годах, но они были неидеальны: работали медленно и часто ошибались. Только с развитием синтетических сетей и таких площадок, как вулкан россии, сильных мобильных процессоров определение лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным идентификацией лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять свои решения.

Главные этапы работы устройства идентификации

Процесс определения лица можно примерно разделить на несколько основных этапов:

Обнаружение лиц — аппарат распознает наличие человеческого лица в изображении.
Определение характеристик — механизм исследует контуры облика: конфигурацию глаз, обонятельного органа, губ, позицию бровей.
Построение структуры — создаётся особенный виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение с образцом — сформированный модель сверяется с зафиксированной при внесении биометрической информацией владельца.
Принятие выбора — если сходство достаточно существенное, смартфон открывается.

Каждый из этих этапов требует индивидуальных алгоритмов и улучшений для скорой работы прямо на устройстве.

Железные компоненты: что прячется в их недрах

Обычная фронтальная камера.

Простейший простой метод определения облика использует лишь фронтальную камеру мобильного устройства. Подобный метод реализован во различных доступных моделях Android-устройств.

Плюсы:

Необходимо потребляет внешних датчиков.
Быстро работает при качественном свете.

Отрицательные стороны:

Несложно обмануть изображением или видеозаписью.
Неправильно работает при плохом освещённости или необычных точках зрения.

ИК камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Как это действует:

Точечный проекционный прибор показывает на лицо юзера невидимую сетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 пятен).
ИК устройство фиксирует изменение формы данной решетки по поверхности лица.
Формируется 3D глубинная карта глубинности, что почти что неосуществима для фальсификации типичной фото или маской.

Плюсы

Надёжная деятельность даже в полной тьме.
Высокая устойчивость к фальсификациям.
Точность распознавания свыше 99%.

Дополнительные датчики

В отдельных аппаратах используются также вспомогательные датчики: ToF (Time-of-Flight), которые фиксируют время движения луча до цели и обратно; Трехцветные-датчики глубины; специальные световые лидары для формирования более аккуратной 3D-модели лица.

Эти технологии применяются в основном во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искусственный ум в работе

Современные механизмы идентификации лиц невозможны без применения artificial intelligence и машинного обучения. Именно из-за таким инновациям, как вулкан россии, гаджет в состоянии распознавать юзера даже при изменениях внешнего вида: новая стрижка, щетина, линзы или грим не становятся барьером для разблокировки.

Распознавание лиц

В первом стадии система обязана мгновенно обнаружить образ лица среди полного кадра с камеры. Для данной цели задействуются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые “обучены” распознавать лица людей среди множества других объектов.

Пример: процесс MTCNN может распознавать лицо даже с частичном закрытии (например, шалью или рукой).

Идентификация ключевых точек

После обнаружения лица механизм, такая как вулкан россии, вычисляет положение главных точек: кончики глаз, кончик носа, границы губ и так далее. Обычно применяется от 68 до 128 ключевых меток на лицевой области.

Данное требуется для выравнивания картинки: если юзер удерживает мобильник под углом, или наклонил головку, программа корректирует картинку до обычного угла для дальнейшего анализа.

Создание биометрического шаблона

Далее нейросеть строит уплотненное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Такой образец очень трудно сфальсифицировать: он не сохраняет непосредственно картинку юзера, а лишь особенные черты его внешности, что делает его идеальным для таких систем, как vulkan russia.

Сравнение и осуществление заключения

Если пользователь желает разлочить мобильник взором, механизм повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный порог (обычно превышает 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ не предоставляется.

Приспособление к метаморфозам внешности

Интересная характеристика актуальных систем — возможность самостоятельного обучения. Если вы постоянно разблокируете мобильное устройство с обновленной укладкой или оптикой, программа постепенно обновляет базовый шаблон вашего облика для повышения точности работы без ухудшения безопасности.

Охрана биометрических данных данных.

Большинство клиенты беспокоятся держать свои биометрические данные на мобильном устройстве из-за риска утечки информации или взлома устройства. Определенные фирмы, например vulkan russia, предлагают варианты для улучшения защиты данных клиентов.

Локальное сбережение: Основная часть девайсов записывает биометрические образцы лишь внутрь безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют гаджет и недоступны даже производителю.
Шифрование: Все сведения хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.
Изоляция приложений: Приложения сторонних разработчиков не обладают непосредственного доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения личности через системный API.

Следует отметить важную подробность: в случае, если какой-то человек сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители внедряют систему защиты от автоматического разблокирования — например, требуют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают категории определения лиц?

В настоящее время можно выделить 3 главных способа к осуществлению этой задачи:

Программируемое двухмерное распознавание

Используется только лицевая камера без экстра детекторов дистанции. Такой подход используется наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность воплощения; минимальная стоимость; быстрая функционирование при достаточном свете.
Минусы: просто обмануть снимком; неустойчивая деятельность ночью; слабая защищенность.

Техническое объёмное оцифровка

Применяет инфракрасную видеокамеру + проектор точек + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Плюсы: большая надёжность; невозможно подделать изображение/видеозапись; устойчивая деятельность в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с интеграцией ИИ

Используют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например вулкан россии и Google Pixel Face Unlock современных версий, сочетают фронтальную камеру c ИК сенсором движения Soli Radar для предотвращения от подделок руками/масками/видеодисплеями чужих устройств.

Примеры эксплуатации различных способов

iPhone линейки X/11/12/13/14 используют только аппаратное трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition первый раз представил подобие Face ID в числе Android.
Samsung Galaxy S10 версия/S20 имеют как программное плоское определение по изображению селфи-камерой, так и датчик ириса глаза.
Huawei Mate20 Pro использует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Трудности защиты и неверные срабатывания

Несмотря на замечательный прогресс технологий за недавние лет, безупречных системы пока не наблюдается:

Возможность обмана: Доступные смартфоны легко доступны качественной изображением владельца либо видеозаписью с дисплея иного гаджета.
Идентичные близнецы: Даже самые совершенные системы могут перепутать между однояйцевыми близнецами либо родичами с очень схожей внешностью.
Изменения внешности: Внезапное похудение/набор веса, хирургические вмешательства либо повреждения иногда необходимы для перерегистрации биометрических данных.
Условия фотографирования: Сильная засветка солнцем или же глубокая темнота могут понизить аккуратность определения признаков.

Здесь пара рекомендаций по безопасному применению:

Для значимых операций всегда применяйте двухфакторную аутентификацию;
Не включайте опцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
Систематически обновляйте программное обеспечение мобильного устройства для обеспечения безопасности от новых видов атак;
Включайте настройку “Требовать открытых глаз” там, где она доступна.

В каких областях ещё применяется технологии помимо мобильных телефонов?

Пускай предмет нашей статьи посвящена в частности портативным гаджетам, следует отметить прочих направлениях внедрения технологии:

Управление прохода в рабочих помещениях и жилых домах;
Платёжные устройства банков (“Face Pay”);
Виртуальные идентификационные документы современного образца;
Системы видеомониторинга городских сервисов;
Автоматизация регистрации явки школ/университетов;
Авторизация участников ПК/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по лицу (“Face Pay”) — нужно лишь пройти через турникет без карты или телефона! Схожие инициативы реализуются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом трансформируется техпроцесс в нынешнее время?

Каждый год проявляются свежие мысли для повышения качества работы систем идентификации лиц:

Увеличивается детализация датчиков — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше вероятность ошибки;
Развиваются искусственные интеллекты — передовые архитектуры типа MobileNetV3 обеспечивают возможность оперативно осваивать новым особенностям облика обладателя напрямую на гаджете без отправки данных в облако.
Развиваются способы антиспуфинга — теперь телефоны могут различать настоящие живые лица от статичных снимков/масок по незаметным движениям кожи.
Синхронизация со умными устройствами — умные часы могут авто закрыть доступ к телефон, если обладатель удалился на значительное расстояние.
Проявляются гибридные устройства — например объединяющие аудио опознание + облик + дактилоскопический след.

Вот, которые тренды в особенности востребованы на сегодняшний день:

1) Миниатюризация элементов

Изготовители пытаются минимизировать размер отверстия (“чёлки”) под сенсоры на экране за счёт внедрения компактных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для увеличения конфиденциальности всё больше вычислений осуществляется локально без пересылки данных во сторонний облачный сервис.

3) Стандартизация стандартов

Гугл активно продвигает стандарт BiometricPrompt API, чтобы аналогичные платформы, например как вулкан россия, и любые Android-приложения могли взаимодействовать с любыми видами биометрии единообразно.

Какое решить сегодня?

В случае если тебе нужна максимальная защита информации, подбирайте передовые модели со встроенным ИК-излучателем или же ToF-датчиком глубины.

iPhone всех существующих новейших версий
Huawei Companion/Series P ряда
Xiaomi Professional
Vivo X модели
Oppo Найти Х линейки.

Если финансы ограничен – лучше отдавать предпочтение традиционным способам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, применять только как дополнительную опцию удобства.

Каким способом увеличить удобство функционирования возможности?

Есть пара советов для людей, кто уже пользуется разблокировку через лицо:

Часто обновляйте свою изображение-шаблон, если сильно изменяется облик.
Не пренебрегайте протирать объектив фронтальной камеры – пятна могут снизить точность!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам активирует камеру как только вы берёте его в руки.
При регистрации постарайтесь сохранять голову прямо напротив видеоустройства без значительного наклона головы.
Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвели взгляд от экрана.

Будущее развития инноваций

В предстоящие годы можно предполагать возникновения полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + манера ходьбы + жесты рук!

Также предполагается возникновение свежих подходов обеспечения личной информации – скажем, изменяющееся модификация электронного шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из очень интересных инноваций нашего эпохи! Она обеспечивает интеракцию со смартфоном комфортнее чем когда-либо прежде, и такие аппы, как vulkan russia, могут в разы оптимизировать ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как функционирует эта система внутри, – будете в состоянии более осмысленно выбирать свой будущий гаджет!