Каким образом действует идентификация лиц в смартфонах

Для чего мы предпочитаем разблокировку по лицу

В прошлые годы определение лиц стало одной из наиболее востребованных функций для открытия смартфонов. Лишь некоторые годов тому назад основная часть юзеров обходились пин-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением подобных технологий, как cabura, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь обуславливает эту функцию такой востребованной? Для начала, это комфортно: не нужно помнить трудные пароли или находить верный палец в темноте. Также, это быстро: современные алгоритмы идентифицируют лицо практически за мгновение. В-третью очередь, это чувство футуристичности — будто в кинофильмах про кабура казино разведчиков.

Впрочем за этой видимой простотой скрывается весь универсум сложных техник и инженерных решений. Попробуем исследовать, как точно действует фейсканирование в новейших смартфонах, какие существуют технологии, насколько они защищены и что нас ждёт впереди.

Короткая хроника прогресса технологии

Распознавание лиц как техника присутствует уже более 50 годов. Начальные попытки автоматизированного анализа лица были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда компьютеры способны были лишь обозначать очертания головы и вычислять промежутки между очами и ртом на монохромных снимках.

Изначальные коммерческие установки возникли в 90-х, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с прогрессом нейронных сетей и таких площадок, как кабура, сильных мобильных чипов идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать собственные решения.

Ключевые шаги работы механизма определения

Процесс определения лица можно ориентировочно поделить на несколько основных этапов:

Распознавание лиц — аппарат определяет наличие гуманного лица в кадре.
Извлечение особенностей — механизм исследует контуры физиономии: форму зрительных органов, обонятельного органа, губ, расположение надбровных дуг.
Построение шаблона — создаётся особенный электронный отпечаток (faceprint) на основе выделенных признаков.
Сравнение со стандартом — сформированный образец сопоставляется со зафиксированной при регистрации биометрической данными владельца.
Принятие выбора — если соответствие достаточно значительное, смартфон деблокируется.

Всякий из указанных шагов запрашивает специальных процедур и улучшений для оперативной работы прямо на устройстве.

Железные составляющие: что скрыто внутри них

Обычная передняя камера.

Самый легкий способ распознавания физиономии применяет исключительно лицевую камеру смартфона. Подобный метод осуществлён во различных бюджетных вариантах Android-девайсов.

Достоинства:

Не нуждается в дополнительные сенсоров.
Быстро действует при хорошем освещённости.

Недостатки:

Легко обмануть фотографией или роликом.
Неправильно функционирует при слабом освещении или нестандартных углах обзора.

ИК фотокамера и пунктирный проектор

Более совершенные системы, такие как кабура, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология является основой Face ID от Apple.

Как это действует:

Точечный проекционный прибор отображает на облик юзера невидимую сетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 точек).
Инфракрасная устройство регистрирует изменение формы этой сетки по плоскости физиономии.
Создаётся трёхмерная карта глубинности, что почти неподвластна для имитации обычной снимком или маскировкой.

Преимущества

Надёжная деятельность даже в полной неосвещённости.
Сильная устойчивость к подделкам.
Точность определения выше 99%.

Дополнительные датчики

В отдельных аппаратах задействуются также экстра сенсорные устройства: ToF (Time-of-Flight), которые измеряют период движения света до предмета и обратно; Трехцветные-датчики дальности; специальные лазерные лидары для построения более детализированной 3D-модели лица.

Эти технологии применяются чаще всего во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: синтетический интеллект на исполнении

Текущие механизмы идентификации лиц немыслимы при отсутствии применения artificial intelligence и машинного обучения. Именно вследствие таким разработкам, как кабура, аппарат может узнавать юзера даже при метаморфозах облика: новая стрижка, борода, линзы или косметика не становятся помехой для разблокировки.

Обнаружение лица

На стартовом стадии система должна мгновенно найти лицо внутри полного снимка камеры. Для этой задачи задействуются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен находить физиономию даже при частичном перекрытии (например, шарфом или ладонью).

Определение ключевых моментов

После идентификации лица устройство, такая как кабура, устанавливает местоположение главных точек: кончики глаз, кончик носа, контуры губ и так далее. Часто применяется от 68 до 128 главных маркеров на лицевой поверхности.

Это нужно для стабилизации картинки: если пользователь держит смартфон под углом, или наклонил голову, программа корректирует изображение до нормального состояния для дальнейшего анализа.

Формирование биометрии шаблона

Далее нейронная сеть строит уплотненное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Этот образец очень сложно сфальсифицировать: он не сохраняет само изображение юзера, а лишь особенные особенности его облика, что делает его оптимальным для таких площадок, как кабура казино.

Сравнение и вынесение заключения

Если человек намеревается разлочить телефон взором, система повторяет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа кабура казино, разблокируется; если нет — доступ блокируется.

Адаптация к трансформациям внешнего вида

Интересная характеристика нынешних систем — возможность самообучения. Если вы постоянно открываете смартфон с свежей укладкой или оптикой, система постепенно модернизирует основной образец вашего внешности для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрических данных.

Множество пользователи боятся держать свои биометрические данные на мобильном устройстве из-за риска утечки информации или взлома устройства. Некоторые фирмы, вроде кабура казино, предлагают варианты для повышения безопасности сведений юзеров.

Локальное хранение: Большинство устройств записывает био-идентификационные образцы лишь внутри безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не покидают аппарат и не доступны в том числе создателю.
Шифрование: Все данные хранятся только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция программ: Программы внешних разработчиков не обладают прямого возможности доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации личности через системный API.

Стоит упомянуть существенную подробность: в случае, если кто-либо получит физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство компании внедряют систему защиты от “слепого” разблокирования — в частности, требуют открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются категории идентификации лиц на изображениях?

На сегодняшний день можно выделить три главных способа к осуществлению этой задачи:

Программное двухмерное определение

Используется только фронтальная видеокамера без дополнительных детекторов глубины. Подобный способ используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота реализации; умеренная цена; оперативная функционирование при достаточном освещении.
Минусы: легко одурачить фотографией; ненадежная функционирование ночью; низкая охрана.

Оборудование для 3D сканирование

Использует инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: значительная достоверность; не получится обмануть изображение/видеозапись; постоянная функционирование при любом освещении.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с дополнением ИИ

Применяют комбинацию программных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как кабура и Google Pixel Face Unlock современных версий, объединяют фронтальную камеру c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Иллюстрации применения разных методов

iPhone модели X/11/12/13/14 используют только техническое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID в ряду Android.
Samsung Galaxy S10/S20 поддерживают как программное плоское идентификацию по изображению фронтальной камерой, так и сенсор ириса глаза.
Huawei Mate20 Pro применяет комплекс из ИК-освещения + Dot Projector + ToF-сенсор

Трудности защиты и ошибочные срабатывания

Несмотря на замечательный успехи технологий за последние годы, идеальных системы пока не имеется:

Вероятность подвоха: Доступные смартфоны просто “разблокируются” четкой изображением хозяина или роликом с дисплея иного гаджета.
Идентичные двойняшки: Даже самые совершенные механизмы могут ошибиться между однояйцевыми близнецами либо родичами с очень похожей внешностью.
Изменения внешнего вида: Резкое похудение/набор веса, пластические операции или травмы иногда требуют обновления данных биометрии.
Условия съёмки: Яркая освещённость солнечным светом или же интенсивная затенение могут уменьшить точность идентификации признаков.

Здесь несколько советов по безопасному эксплуатации:

Для важных операций всегда внедряйте дополнительную аутентификацию;
Не запускайте функцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
Постоянно обновляйте прошивку телефона для обеспечения безопасности от новых видов атак;
Включайте функцию “Требовать распахнутых глаз” в тех местах, где она доступна.

В каких областях дополнительно используется технологии помимо мобильных телефонов?

Пускай предмет нашей работы сосредоточена на именно мобильным устройствам, стоит упомянуть о альтернативных областях использования технологии:

Контроль прохода в офисах и жилых домах;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Виртуальные идентификационные документы последнего типа;
Комплексы видеоконтроля городских подразделений;
Автоматизация учёта присутствия школ/университетов;
Аутентификация участников персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без карты или телефона! Похожие программы реализуются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Как изменяется техпроцесс в наше время?

Любой год возникают современные мысли для повышения качества деятельности систем лицевого распознавания:

Увеличивается разрешение датчиков — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше шанс неточности;
Совершенствуются нейросети — современные конструкции типа MobileNetV3 позволяют оперативно адаптироваться к свежим характеристикам облика обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
Улучшаются методы антиспуфинга — теперь смартфоны могут распознавать реальные живые лица от фиксированных фото/маскировок по мельчайшим микродвижениям.
Синхронизация со интеллектуальными приборами — смарт-часы могут авто заблокировать смартфон, если обладатель отошёл далеко.
Появляются смешанные системы — например объединяющие голосовую идентификацию + облик + дактилоскопический след.

Вот, те тенденции особенно востребованы на сегодняшний день:

1) Миниатюризация элементов

Компании стараются сократить величину прорези (“чёлки”) под сенсоры на дисплее за счёт интеграции компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для повышения приватности всё больше расчётов происходит внутри устройства без пересылки данных во дополнительный облачный сервис.

3) Стандартизация регламентов

Гугл активно продвигает норму BiometricPrompt API, для того чтобы такие площадки, например как cabura, и любые Android-программы были совместимы с всеми формами биометрии единообразно.

Что подобрать сегодня?

Когда вам всем нужна предельная безопасность информации, выбирайте топовые аппараты с вмонтированным ИК-проектором или же ToF-сенсором глубины.

iPhone всех существующих актуальных поколений
Huawei Mate/P Series линейки
Mix Pro
Vivo X модели
Оппо Find X линейки.

Если финансы невелик – лучше выбирать обычным методам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в cabura, применять только как дополнительную возможность удобства.

Как повысить комфорт работы возможности?

Есть пара советов для тех, кто уже применяет разблокировку через лицо:

Часто меняйте свою фото-шаблон, если кардинально изменяется внешность.
Не упускайте из виду протирать линзу фронтальной камеры – загрязнения могут уменьшить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам активирует камеру если вы поднимаете его.
Во время регистрационного процесса пытайтесь держать лицевую часть неподвижно перед объектива без сильного наклона головы.
Используйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвели взгляд от экрана.

Перспективы эволюции техники

В предстоящие периоды можно ожидать возникновения полностью дистанционных способов распознавания человека сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + шаги + движения рук!

Также возможно появление новых методов обеспечения личной информации – скажем, динамическое корректировка электронного образца после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее захватывающих инноваций нашего периода! Она предоставляет взаимодействие со телефоном комфортнее чем до этого, и такие программы, как кабура казино, могут существенно повысить ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как устроена эта технология внутри, – будете в состоянии осознаннее определять свой следующий девайс!