Как действует определение лиц в телефонах

Почему мы останавливаемся на разблокировку по фейсу

В последние годы идентификация лиц является одной из самых популярных функций для деблокировки мобильных телефонов. Лишь некоторые лет назад основная часть юзеров обходились пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением подобных технологий, как Вулкан 24, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Что делает эту функцию такой востребованной? Прежде всего, это удобно: не нужно помнить сложные пароли или находить нужный палец в мраке. Во-вторых, это быстро: современные программы распознают лицо буквально за мгновения ока. В-третьих, это впечатление футуристичности — как будто в фильмах про вулкан казино агентов.

Тем не менее за такой видимой легкостью прячется весь вселенная трудных технологий и инженерных решений. Попробуем разобраться, как именно работает фейсканирование в новейших мобильных телефонах, какие существуют методы, насколько они надёжны и что нас предстоит.

Краткая история прогресса технологии

Распознавание лиц как методика существует уже более 50 лет. Начальные эксперименты автоматического анализа лиц были предприняты еще в 1960-х годы в лабораториях США. Тогда вычислительные машины могли лишь обозначать контуры головы и измерять дистанции между очами и губами на ахроматических фотографиях.

Первые бизнес системы появились в 90-х, но они были неидеальны: работали медленно и нередко ошибались. Только с эволюцией искусственных сетей и таких платформ, как Вулкан 24 Казино, высокопроизводительных мобильных процессоров распознавание лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные решения.

Основные этапы работы механизма распознавания

Процесс идентификации лица можно ориентировочно поделить на несколько основных этапов:

Идентификация лиц — камера распознает существование гуманного лица в кадре.
Извлечение характеристик — алгоритм изучает контуры лица: конфигурацию глаз, обонятельного органа, губ, позицию надбровных дуг.
Построение модели — создаётся уникальный электронный отпечаток (faceprint) на основе определённых признаков.
Сравнение со стандартом — созданный шаблон сравнивается с зафиксированной при учёте биометрической сведениями владельца.
Принятие выбора — если сходство достаточно значительное, смартфон разблокируется.

Всякий из этих шагов нуждается в специальных процедур и усовершенствований для быстрой работы прямо на устройстве.

Аппаратные элементы: что прячется внутри

Обычная фронтальная камера.

Наиболее простой метод определения физиономии применяет только фронтальную камеру смартфона. Подобный способ внедрён во различных доступных вариантах Android-девайсов.

Плюсы:

Не нуждается в внешних датчиков.
Быстро работает при хорошем освещённости.

Минусы:

Легко обмануть снимком или роликом.
Неудачно работает при слабом освещении или непривычных точках зрения.

ИК камера и пунктирный проектор

Более продвинутые системы, такие как Вулкан 24 Казино, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс составляет базу Face ID от Apple.

Каким образом это функционирует:

Точечный устройство проекции показывает на лицо юзера невидимую структуру из тысяч инфракрасных меток (например, Face ID задействует около 30 000 точек).
Инфракрасная камера регистрирует искривление этой сетки по поверхности лица.
Получается 3D карта глубины, что почти что невозможна для фальсификации обычной фотографией или маской.

Выигрыши

Надёжная функционирование даже в полной темноте.
Большая устойчивость к подделкам.
Точность идентификации более 99%.

Дополнительные сенсоры

В отдельных девайсах применяются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые измеряют период распространения света до объекта и обратно; Цветные-датчики дальности; специальные лазерные измерители расстояния для создания более точной 3D-модели физиономии.

Эти технологии встречаются в основном во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: искуственный ум на действии

Нынешние устройства распознавания лиц невозможны в отсутствие эксплуатации ИИ и machine learning. Именно благодаря таким технологиям, как Вулкан 24 Казино, устройство в состоянии распознавать владельца даже при трансформациях внешности: новая стрижка, борода, очки или косметика не становятся препятствием для разблокировки.

Распознавание лица

В первом стадии алгоритм обязана быстро обнаружить образ лица в пределах целого изображения с камеры. Для данной цели применяются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые « обучены » распознавать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN способен обнаруживать физиономию даже при частичном перекрытии (например, платком или ладонью).

Выделение важных моментов

После идентификации лица устройство, такая как Вулкан 24 Казино, устанавливает расположение главных точек: края глаз, конец носа, края губ и так далее. Часто используется от 68 до 128 ключевых меток на лицевой области.

Это действие нужно для стабилизации изображения: если юзер удерживает мобильник под углом, или наклонил головку, программа « выпрямляет » изображение до нормального состояния для дальнейшего анализа.

Формирование биометрического шаблона

Далее нейросеть строит уплотненное числовое представление (« эмбеддинг ») лица пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Данный формат очень трудно имитировать: он не хранит само фото юзера, а лишь уникальные характеристики его облика, что делает его совершенным для таких систем, как Vulkan24.

Сопоставление и принятие решения

В случае, когда пользователь хочет открыть смартфон взором, механизм осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный границу (обычно больше 99%), телефон, как и платформа Vulkan24, разблокируется; если нет — доступ не предоставляется.

Привыкание к изменениям внешнего вида

Интересная черта нынешних систем — возможность самообучения. Если вы постоянно открываете мобильное устройство с новой укладкой или очками, система постепенно освежает эталонный образец вашего облика для увеличения точности действия без снижения уровня безопасности.

Охрана биометрии информации.

Многие клиенты боятся держать свои биометрические данные на мобильном устройстве из-за вероятности утечки данных или взлома гаджета. Иные фирмы, например Vulkan24, предлагают варианты для увеличения безопасности данных пользователей.

Локальное хранение: Преимущественно устройств хранит биометрические образцы только внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют гаджет и не доступны включая создателю.
Шифрование: Все сведения хранятся только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Приложения внешних девелоперов не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения идентичности через системный API.

Следует подчеркнуть существенную особенность: если кто-то сможет получить доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие компании реализуют меры безопасности от автоматического разблокирования — например, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие бывают категории определения лиц на изображениях?

В настоящее время можно выделить различить три основных подхода к выполнению этой функции:

Программируемое 2D распознавание

Используется только фронтальная видеокамера без дополнительных детекторов глубины. Этот подход встречается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость осуществления; умеренная цена; скоростная деятельность при достаточном освещении.
Минусы: несложно ввести в заблуждение фотографией; ненадежная функционирование ночью; низкая безопасность.

Аппаратное трёхмерное сканирование

Задействует инфракрасную камеру + проекционный модуль точек + датчики глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: большая надежность; нельзя исказить изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (« чёлка »)

Комбинированные способы с интеграцией ИИ

Используют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (« anti-spoofing »). Например, подобные продукты, например Вулкан 24 Казино и Google Pixel Face Unlock современных поколений, комбинируют фронтальную камеру c ИК сенсором движения Soli Radar для защиты от подделок руками/масками/видеоэкранами посторонних устройств.

Образцы применения различных техник

iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition впервые внедрил эквивалент Face ID в числе Android.
Samsung Galaxy S10 версия/S20 обеспечивают как программное двухмерное распознавание по снимку фронталкой, так и сенсор радужки глаза.
Huawei Mate20 Pro использует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Проблемы охраны и ложные тревоги

Несмотря на поразительный развитие инноваций за последние лет, совершенных систем пока не существует:

Вероятность подвоха: Доступные мобильники просто открываются четкой изображением владельца или же видео с экрана другого устройства.
Идентичные близняшки: Даже самые совершенные устройства могут ошибиться между однояйцевыми близнецами либо родичами с очень схожей внешностью.
Трансформации облика: Внезапное снижение веса/увеличение массы тела, косметические процедуры либо травмы в некоторых случаях требуют перерегистрации биометрических данных.
Условия записи: Яркая освещённость солнечным светом или интенсивная затенение могут уменьшить точность идентификации признаков.

Ниже некоторые подсказок для защищённому применению:

Для важных операций всегда используйте дополнительную аутентификацию;
Не активируйте опцию « Разблокировка по лицу » на дешёвых моделях без ИК-сенсоров;
Постоянно апгрейдите прошивку мобильного устройства для предотвращения угроз от новых видов атак;
Включайте опцию « Требовать открытых глаз » там, где она имеется.

В каких местах дополнительно используется технология за исключением смартфонов?

Пускай основная мысль данной статьи посвящена конкретно мобильным устройствам, необходимо сказать о альтернативных областях использования технологии:

Управление прохода в деловых центрах и резиденциях;
Платёжные устройства банков (« Face Pay »);
Электронные идентификационные документы последнего поколения;
Комплексы видеоконтроля городских сервисов;
Автоматизация отслеживания явки школ/университетов;
Вход пользователей компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система платежа проезда по фейсу (« Face Pay ») — нужно лишь пройти через турникет без карты или телефона! Аналогичные программы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом изменяется техпроцесс в нынешнее время?

Любой год появляются свежие идеи для усовершенствования качества функционирования систем идентификации лиц:

Увеличивается детализация сенсоров — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс погрешности;
Совершенствуются нейросети — современные структуры типа MobileNetV3 обеспечивают возможность быстро адаптироваться к свежим характеристикам вида пользователя напрямую на гаджете без пересылки информации в облачное хранилище.
Совершенствуются технологии антиспуфинга — теперь телефоны способны распознавать настоящие анимированные лица от неподвижных фото/масок по мельчайшим движениям кожи.
Интеграция со интеллектуальными приборами — умные часы могут самостоятельно заблокировать телефон, если владелец ушёл далеко.
Появляются комбинированные механизмы — к примеру комбинирующие речевую аутентификацию + облик + отпечаток пальца.

Вот, которые направления особенно востребованы сейчас:

1) Миниатюризация элементов

Производители пытаются сократить величину прорези (« чёлки ») под сенсоры на дисплее за счёт встраивания миниатюрных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на устройстве

Для улучшения личной безопасности всё больше расчётов осуществляется локально без отправки информации во внешний облачный услугу.

3) Стандартизация стандартов

Гугл энергично продвигает эталон BiometricPrompt API, с целью чтобы такие площадки, как Вулкан 24, и все Android-приложения были совместимы с любыми видами биометрии унифицированно.

Какое подобрать сегодня?

Если вам всем необходима предельная сохранность информации, подбирайте передовые аппараты с интегрированным ИК-проектором или же ToF-сенсором глубины.

iPhone каждого последних версий
Huawei Partner/P Series линейки
Xiaomi Professional
Vivo X серии
Oppo Find Х серий.

Если финансы ограничен – лучше выбирать классическим средствам защиты (PIN-код/сканер отпечатка), а возможность « разблокировка по лицу », такую как в Вулкан 24, задействовать только как дополнительную опцию удобства.

Каким образом увеличить комфорт использования возможности?

Есть пара лайфхаков для тех, кто уже применяет функцию распознавания лица:

Периодически меняйте свою изображение-шаблон, если кардинально меняется облик.
Не забывайте очищать линзу передней камеры – пятна могут уменьшить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам включает фотоаппарат как только вы берёте его в руки.
Во время регистрации пытайтесь удерживать лицевую часть неподвижно перед видеоустройства не допуская значительного наклона головы.
Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвели взгляд от дисплея.

Будущее эволюции инноваций

В скоро наступающие годы можно ожидать появления полностью бесконтактных способов опознания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + звучание + манера ходьбы + движения рук!

Также вероятно возникновение современных способов защиты приватности – например, переменное корректировка диджитал паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее интересных технологий нашего времени! Она предоставляет общение со телефоном удобнее чем до этого, и такие программы, как Vulkan24, могут значительно повысить ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как функционирует эта методика внутри, – сумеете осознаннее выбирать свой следующий гаджет!