Каким образом работает распознавание лиц в телефонах

Каким образом работает распознавание лиц в телефонах

Зачем мы предпочитаем разлочивание по лицевому распознаванию

В недавние годы идентификация физиономий является одной из наиболее востребованных функций для деблокировки смартфонов. Еще пару годков ранее основная масса юзеров довольствовались PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, как admiral x, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что обуславливает данную функцию очень нужной? Для начала, это комфортно: не нужно помнить замысловатые пароли или искать нужный палец в темноте. Также, это мгновенно: современные программы узнают лицо практически за мгновения ока. В-третью очередь, это ощущение футуризма — как будто в кинолентах про admiral x шпионов.

Тем не менее за такой на первый взгляд легкостью прячется целый вселенная сложных технологий и инженерных решений. Давайте понять, как именно работает распознавание лиц в новейших смартфонах, какие существуют технологии, насколько они надёжны и что нас предстоит.

Сжатая повествование развития инноваций

Распознавание лиц как методика имеется уже более 50 годов. Первые эксперименты автоматического анализа облика были сделаны еще в 1960-х годах в лабораториях США. Тогда вычислительные машины способны были лишь обозначать силуэты черепа и определять дистанции между глазами и устами на монохромных снимках.

Изначальные бизнес установки возникли в девяностых годах, но они были несовершенны: функционировали медленно и нередко ошибались. Только с эволюцией нейронных сетей и таких систем, как адмирал х, мощных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали интегрировать собственные разработки.

Основные стадии действия системы распознавания

Процесс идентификации лица можно условно поделить на несколько ключевых этапов:

  1. Обнаружение лица — камера определяет присутствие людского образа в кадре.
  2. Извлечение характеристик — механизм изучает контуры физиономии: форму глаз, обонятельного органа, губ, положение надбровных дуг.
  3. Построение шаблона — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
  4. Сравнение с образцом — сформированный шаблон сверяется с записанной при внесении биометрической данными владельца.
  5. Принятие выбора — если совпадение достаточно высокое, смартфон открывается.

Каждый из указанных шагов запрашивает специальных методов и оптимизаций для скорой работы непосредственно на девайсе.

Технические составляющие: что прячется внутри них

Типичная передняя камера.

Самый простой метод распознавания облика применяет исключительно фронтальную камеру смартфона. Такой подход внедрён во многих недорогих версиях Android-девайсов.

Положительные стороны:

  • Не нуждается в требует дополнительных сенсоров.
  • Оперативно работает при хорошем освещении.

Отрицательные стороны:

  • Просто обмануть изображением или видео.
  • Плохо функционирует при слабом свете или непривычных точках зрения.

Инфракрасная фотокамера и пунктирный проекционный аппарат

Более совершенные системы, такие как адмирал х, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Как это функционирует:

  • Точечный проектор проецирует на облик пользователя невидимую решетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 точек).
  • ИК устройство фиксирует деформацию данной сетки по поверхности физиономии.
  • Формируется трехмерная глубинная карта глубины, которая почти неосуществима для фальсификации обычной фото или маскировкой.

Достоинства

  • Надёжная деятельность даже в полной неосвещённости.
  • Большая устойчивость к имитациям.
  • Точность распознавания свыше 99%.

Добавочные датчики

В определённых девайсах задействуются также экстра сенсоры: ToF (Time-of-Flight), которые фиксируют время распространения света до предмета и обратно; RGB-датчики дальности; специальные световые измерители расстояния для построения более детализированной 3D-модели физиономии.

Эти инновации используются в основном во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искусственный ум в работе

Нынешние системы распознавания лиц немыслимы без использования artificial intelligence и machine learning. Именно благодаря таким разработкам, как адмирал х, гаджет может распознавать владельца даже при метаморфозах внешнего вида: новая укладка, растительность на лице, очки или грим не становятся помехой для открытия.

Распознавание лица

На первом шаге система должна оперативно распознать лицо среди всего кадра с камеры. Для данной цели применяются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы находить человеческие лица среди множества других объектов.

Пример: процесс MTCNN может распознавать физиономию даже при частичном закрытии (например, платком или ладонью).

Определение основных точек

После распознавания лица механизм, такая как адмирал х, устанавливает расположение основных точек: кончики глаз, верхушка носа, границы губ и так далее. Как правило задействуется от 68 до 128 главных маркеров на лицевой поверхности.

Это действие необходимо для выравнивания визуала: если юзер удерживает смартфон под наклоном, или склонил голову, программа “выпрямляет” картинку до нормального состояния для последующего изучения.

Создание биометрического образца

Далее нейронная сеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Данный формат весьма сложно сфальсифицировать: он не хранит непосредственно картинку юзера, а лишь уникальные черты его внешности, что делает его совершенным для таких площадок, как admiral-x.

Сравнительный анализ и осуществление заключения

Когда юзер хочет разлочить телефон взором, программа повторяет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа admiral-x, разблокируется; если нет — доступ не предоставляется.

Приспособление к метаморфозам внешности

Занимательная характеристика современных системы — способность самостоятельного обучения. Если вы постоянно доступаете к телефон с новой прической или очками, алгоритм постепенно модернизирует эталонный образец вашего внешности для улучшения точности функционирования без снижения уровня безопасности.

Безопасность биометрии информации.

Множество клиенты беспокоятся сохранять свои биометрические данные на смартфоне из-за вероятности утечки информации или взлома гаджета. Иные компании, например admiral-x, предлагают методы для улучшения безопасности данных клиентов.

  • Локальное сохранение: Преимущественно аппаратов записывает биометричные шаблоны только внутри безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют гаджет и не доступны даже создателю.

  • Шифрование: Все сведения хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

  • Изоляция программ: Приложения сторонних девелоперов не имеют прямого возможности доступа к биометрическим данным; они могут лишь требовать факт подтверждения идентичности через системный API.

Необходимо упомянуть существенную подробность: в случае, если кто-то сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители внедряют систему защиты от “слепого” разблокирования — к примеру, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются категории определения лиц на изображениях?

На сегодняшний день можно выделить различить три ключевых подхода к реализации этой функции:

Софтверное плоское определение

Применяется только передняя видеокамера без экстра датчиков дистанции. Подобный способ встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота осуществления; низкая стоимость; оперативная работа при хорошем свете.
Минусы: просто одурачить снимком; неустойчивая функционирование ночью; низкая безопасность.

Оборудование для трёхмерное оцифровка

Применяет ИК камеру + проектор пикселей + датчики глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: значительная надежность; невозможно исказить фото/видео; постоянная деятельность при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с дополнением ИИ

Задействуют комбинацию программных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как адмирал х и Google Pixel Face Unlock последних поколений, комбинируют фронталку c ИК датчиком мобильности Soli Radar для защиты от подделок руками/масками/видеоэкранами чужих устройств.

Образцы использования разных способов

  • iPhone модели X/11/12/13/14 применяют только техническое трёхмерное сканирование в 3D
  • Xiaomi Mi8 Explorer Edition в первый раз предложил подобие Face ID в ряду Android.
  • Samsung Galaxy S10 версия/S20 имеют как софтверное двухмерное идентификацию по снимку фронтальной камерой, так и сенсор ириса глаза.
  • Huawei Mate20 Pro использует систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и ложные срабатывания

Несмотря на замечательный развитие технологий за недавние годы, безупречных систем пока не наблюдается:

  1. Шанс подвоха: Недорогие телефоны без труда “разблокируются” качественной снимком хозяина или роликом с экрана другого устройства.
  2. Идентичные двойняшки: Даже самые идеальные механизмы могут ошибиться между однояйцевыми близнецами либо родичами с очень схожей внешностью.
  3. Изменения внешнего вида: Внезапное похудение/увеличение массы тела, хирургические вмешательства или повреждения иногда необходимы для перерегистрации биометрии.
  4. Условия записи: Яркая подсветка солнцем либо интенсивная темнота могут снизить аккуратность идентификации признаков.

Вот несколько рекомендаций для защищённому использованию:

  • Для критически важных операций всегда используйте дополнительную аутентификацию;
  • Не активируйте возможность “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
  • Постоянно обновляйте прошивку программное обеспечение смартфона для предотвращения угроз от актуальных атак;
  • Включайте опцию “Требовать открытых глаз” везде, где она есть.

Где также используется технология помимо смартфонов?

Несмотря на то, что предмет нашей работы посвящена конкретно портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:

  • Мониторинг доступа в офисах и резиденциях;
  • Платёжные устройства банков (“Face Pay”);
  • Виртуальные идентификационные документы последнего типа;
  • Установки видеомониторинга муниципальных сервисов;
  • Механизация учёта явки образовательных учреждений/институтов;
  • Аутентификация участников персональных компьютеров/ноутбуков.

Например: В московском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Аналогичные программы развиваются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как изменяется техпроцесс в нынешнее время?

Любой годочек проявляются современные мысли для улучшения качества деятельности систем идентификации лиц:

  1. Увеличивается разрешение сенсоров — чем больше деталей фиксируется фотоаппаратом/глубинными сенсорами, тем меньше риск ошибки;
  2. Совершенствуются нейросети — современные конструкции модели MobileNetV3 позволяют оперативно осваивать новым особенностям внешности обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
  3. Улучшаются способы антиспуфинга — теперь мобильные устройства могут отличать настоящие живые лица от неподвижных снимков/масок по мельчайшим движениям кожи.
  4. Интеграция со смарт-гаджетами — интеллектуальные часы могут самостоятельно блокировать мобильный телефон, если обладатель удалился на значительное расстояние.
  5. Возникают комбинированные механизмы — в частности объединяющие голосовую опознание + облик + пальцевой отпечаток.

Вот, какие тренды очень актуальны сейчас:

1) Сокращение элементов

Изготовители стараются сократить величину отверстия (“чёлки”) под датчики на дисплее за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на девайсе

Для увеличения личной безопасности всё более обработки данных происходит локально без пересылки информации во дополнительный облачный услугу.

3) Упорядочивание норм

Google интенсивно пропагандирует эталон BiometricPrompt API, чтобы подобные платформы, как admiral x, и все Android-аппы были совместимы с любыми видами биометрии унифицированно.

Что подобрать на сегодня?

Если вам всем важна максимальная безопасность данных, подбирайте топовые модели с вмонтированным ИК-излучателем или же ToF-датчиком глубины.

  • iPhone всех существующих актуальных поколений
  • Huawei Mate/Series P ряда
  • Mix Expert
  • Vivo X линейки
  • Oppo Find Х серии.

Если бюджет ограничен – лучше выбирать классическим способам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в admiral x, применять только как дополнительную возможность удобства.

Как увеличить удобство работы возможности?

Есть пара советов для людей, кто уже применяет функцию распознавания лица:

  1. Периодически обновляйте свою изображение-шаблон, если значительно трансформируется облик.
  2. Не упускайте из виду чистить линзу фронтальной камеры – разводы могут уменьшить точность!
  3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает камеру если вы поднимаете его.
  4. Во время записи старайтесь сохранять лицевую часть прямо перед видеоустройства не допуская резкого наклона головы.
  5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отворачиваетесь от экрана.

Возможности эволюции техники

В скоро наступающие годы можно предвкушать развития полностью дистанционных способов идентификации человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + походка + манипуляции руками!

Также возможно возникновение новых методов охраны приватности – например, изменяющееся модификация цифрового образца после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – единственная из самых увлекательных техник нашего эпохи! Она делает взаимодействие со мобильным устройством проще чем когда-либо прежде, и такие программы, как admiral-x, могут значительно повысить ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как устроена эта технология изнутри, – сумеете осознаннее подбирать свой будущий девайс!

Leave a Comment

Your email address will not be published. Required fields are marked *

Scroll to Top