Как функционирует распознавание лиц в телефонах

Почему мы останавливаемся на разблокирование по лицевому распознаванию

В прошлые годы распознавание лиц превратилось в одной из самых распространённых возможностей для открытия умных телефонов. Лишь некоторые годов назад основная часть юзеров удовлетворялись пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, например cabura, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект обуславливает эту конкретную функцию настолько популярной? Для начала, это практично: не нужно помнить замысловатые пароли или искать верный палец в мраке. Также, это быстро: современные программы распознают лицо фактически за мгновения ока. В-третьем пункте, это впечатление футуристичности — словно в кинолентах про кабура шпионов.

Впрочем за такой видимой простотой прячется целый мир комплексных методов и инженерных разработок. Попробуем разобраться, как именно действует идентификация по лицу в актуальных мобильных телефонах, какие бывают способы, насколько они защищены и что нас ждёт впереди.

Сжатая повествование прогресса технологии

Идентификация лиц как техника присутствует уже более пятидесяти годов. Первые пробы автоматического изучения лиц были предприняты еще в 1960-х годах в лабораториях США. Тогда компьютеры способны были лишь обозначать силуэты лица и определять дистанции между зрачками и губами на черно-белых изображениях.

Начальные бизнес системы возникли в 90-х, но они были неидеальны: функционировали медленно и часто ошибались. Только с прогрессом искусственных сетей и таких площадок, как кабура, высокопроизводительных мобильных процессоров распознавание лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным идентификацией лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять личные разработки.

Главные стадии работы механизма распознавания

Процесс определения лица можно ориентировочно поделить на несколько основных этапов:

Обнаружение лица — аппарат определяет существование людского образа в кадре.
Определение признаков — алгоритм изучает черты лица: очертания глаз, обонятельного органа, уст, расположение бровей.
Построение модели — создаётся особенный виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение с образцом — сформированный шаблон сопоставляется с зафиксированной при внесении биометрической данными владельца.
Принятие определения — если сходство достаточно высокое, смартфон открывается.

Любой из данных шагов запрашивает индивидуальных процедур и усовершенствований для оперативной работы непосредственно на девайсе.

Аппаратные компоненты: что скрыто в их недрах

Стандартная селфи камера.

Наиболее легкий метод идентификации лица использует исключительно переднюю видеокамеру мобильного устройства. Подобный способ внедрён во многочисленных доступных версиях Android-девайсов.

Плюсы:

Не нуждается в требует дополнительных датчиков.
Быстро функционирует при достаточном освещённости.

Слабые стороны:

Просто обмануть изображением или видеозаписью.
Неправильно работает при слабом освещённости или непривычных ракурсах.

Инфракрасная фотокамера и точечный проекционный аппарат

Более усовершенствованные системы, такие как кабура, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс является основой Face ID от Apple.

Как это работает:

Точечный устройство проекции показывает на физиономию юзера невидимую решетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 меток).
Инфракрасная устройство регистрирует изменение формы этой сетки по плоскости физиономии.
Формируется трёхмерная глубинная карта глубины, которая практически невозможна для фальсификации типичной фото или маскировкой.

Плюсы

Надёжная деятельность даже в полной неосвещённости.
Большая сопротивляемость к подделкам.
Точность распознавания свыше 99%.

Дополнительные сенсоры

В некоторых девайсах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые определяют период прохождения света до цели и обратно; RGB-датчики дальности; специальные оптические лидары для создания более детализированной 3D-модели лица.

Эти инновации используются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: синтетический ум на исполнении

Текущие механизмы распознавания лиц немыслимы при отсутствии эксплуатации искусственного интеллекта и машинного обучения. Именно благодаря таким инновациям, как кабура, устройство может узнавать владельца даже при изменениях внешности: новая укладка, щетина, очки или косметика не становятся помехой для открытия.

Распознавание лица

При первом стадии система обязана мгновенно обнаружить ликовое изображение внутри целого кадра с камеры. Для данной цели задействуются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые « обучены » находить лиц человека среди множества других объектов.

Пример: метод MTCNN в состоянии распознавать облик даже с частичном перекрытии (например, платком или рукой).

Идентификация важных моментов

После обнаружения лица система, такая как кабура, определяет положение основных точек: кончики глаз, конец носа, границы губ и так далее. Часто применяется от 68 до 128 основных точек на лице.

Это действие необходимо для нормализации изображения: если юзер удерживает мобильник под наклоном, или склонил головку, программа корректирует изображение до стандартного положения для последующего изучения.

Формирование биометрического образца

Далее искусственная сеть строит компактное цифровое представление (« эмбеддинг ») лица пользователя — своеобразный цифровой образ лица длиной от 128 до 512 флоатов.

Данный образец весьма трудно сфальсифицировать: он не хранит непосредственно изображение пользователя, а лишь исключительные характеристики его вида, что делает его идеальным для таких систем, как кабура казино.

Сравнение и вынесение решения

В случае, когда юзер желает разблокировать смартфон глазами, механизм повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает заданный уровень (обычно выше 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ не предоставляется.

Привыкание к метаморфозам облика

Занимательная особенность актуальных систем — возможность самостоятельного обучения. Если вы регулярно открываете смартфон с обновленной прической или очками, система постепенно освежает основной модель вашего лица для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических информации.

Многие пользователи боятся держать свои био-идентификационные данные на телефоне из-за риска утечки данных или взлома устройства. Определенные компании, такие как кабура казино, предлагают методы для улучшения сохранности данных юзеров.

Локальное сохранение: Преимущественно устройств сохраняет биометричные модели лишь в пределах безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не оставляют аппарат и не доступны в том числе изготовителю.
Шифрование: Все сведения хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Программы третьих девелоперов не обладают прямого возможности доступа к биометрическим данным; они могут лишь требовать факт подтверждения личности через системный API.

Стоит упомянуть существенную подробность: в случае, если кто-либо сможет получить доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство компании реализуют защиту от неосознанного разблокирования — в частности, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют категории идентификации лиц?

В настоящее время можно выделить 3 основных метода к выполнению этой функции:

Программное двухмерное распознавание

Используется только передняя видеокамера без экстра датчиков глубины. Этот подход используется наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота воплощения; умеренная стоимость; скоростная работа при качественном свете.
Минусы: легко обмануть фотографией; нестабильная функционирование ночью; недостаточная безопасность.

Аппаратное трёхмерное оцифровка

Задействует ИК видеокамеру + проекционный модуль точек + сенсоры глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: большая достоверность; невозможно подделать фото/видео; постоянная работа при любом освещении.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (« чёлка »)

Смешанные методы с ИИ-дополнением

Используют комбинацию программируемых методов + техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (« anti-spoofing »). Например, подобные изделия, например кабура и Google Pixel Face Unlock новейших поколений, комбинируют фронталку c инфракрасным сенсором движения Soli Radar для предотвращения от подделок жестами/масками/видеоэкранами посторонних устройств.

Иллюстрации эксплуатации разнообразных методов

iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition в первый раз представил подобие Face ID среди Android.
Samsung Galaxy S10 модель/S20 имеют как программное 2D определение по изображению селфи-камерой, так и сенсор радужки глаза.
Huawei Mate20 Pro использует набор из ИК-инфракрасного света + Dot Projector + ToF-датчик

Вопросы охраны и ложные срабатывания

Несмотря на замечательный прогресс технологий за недавние лет, идеальных системы пока не наблюдается:

Возможность обмана: Доступные телефоны без труда « разблокируются » высококачественной фотографией пользователя либо видеозаписью с дисплея иного гаджета.
Идентичные двойняшки: Даже самые безупречные механизмы могут ошибиться между монозиготными близнецами либо родичами с очень аналогичной внешностью.
Трансформации внешнего вида: Внезапное похудение/увеличение массы тела, хирургические вмешательства или повреждения в некоторых случаях требуют повторной регистрации биометрии.
Условия записи: Сильная подсветка солнцем или плотная затенение могут уменьшить аккуратность распознавания признаков.

Ниже пара рекомендаций по надёжному использованию:

Для значимых операций всегда внедряйте двухэтапную аутентификацию;
Не включайте функцию « Разблокировка по лицу » на дешёвых устройствах без ИК-сенсоров;
Постоянно обновляйте прошивку смартфона для предотвращения угроз от современных угроз;
Включайте настройку « Требовать раскрытых глаз » везде, где она есть.

Где также используется технологии за исключением смартфонов?

Пускай основная мысль данной статьи сосредоточена на в частности портативным гаджетам, стоит упомянуть о прочих направлениях внедрения технологии:

Мониторинг доступа в рабочих помещениях и жилых домах;
Платёжные аппараты финансовых учреждений (« Face Pay »);
Виртуальные идентификационные документы современного образца;
Системы видеонаблюдения городских сервисов;
Механизация учёта явки образовательных учреждений/университетов;
Аутентификация юзеров компьютеров/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по фейсу (« Face Pay ») — нужно лишь пройти через барьер без пластика или мобильника! Аналогичные проекты реализуются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как меняется техпроцесс в наше время?

Каждый годик возникают свежие мысли для усовершенствования качества работы систем идентификации лиц:

Увеличивается разрешение сенсорных устройств — чем больше информации фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность погрешности;
Улучшаются нейросети — передовые структуры вида MobileNetV3 дают возможность скоростно обучаться дополнительным чертам облика пользователя непосредственно на девайсе без отправки данных в облако.
Развиваются технологии антиспуфинга — теперь смартфоны могут распознавать настоящие движущиеся лица от неподвижных фото/масок по незаметным микродвижениям.
Синхронизация со умными устройствами — умные часы могут автоматически заблокировать мобильный телефон, если обладатель отошёл далеко.
Проявляются гибридные устройства — в частности объединяющие аудио аутентификацию + лицо + дактилоскопический след.

Вот, какие направления в особенности востребованы на сегодняшний день:

1) Миниатюризация деталей

Производители намереваются уменьшить размер выреза (« чёлки ») под сенсоры на экране за счёт интеграции маленьких ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на устройстве

Для повышения приватности всё больше расчётов выполняется локально без пересылки данных во дополнительный облачный услугу.

3) Упорядочивание регламентов

Google энергично продвигает эталон BiometricPrompt API, чтобы такие площадки, как cabura, и все Android-аппы были совместимы с любыми видами биометрии унифицированно.

Какое выбрать на сегодня?

В случае если вам всем нужна предельная безопасность информации, подбирайте флагманские устройства со встроенным ИК-излучателем или же ToF-датчиком глубины.

iPhone каждого актуальных моделей
Huawei Partner/Series P линейки
Mix Pro
Vivo X линейки
Oppo Find Икс линейки.

Если средства ограничен – лучше отдавать предпочтение традиционным методам защиты (PIN-код/сканер отпечатка), а опцию « разблокировка по лицу », такую как в cabura, применять только как дополнительную возможность комфорта.

Каким образом повысить комфорт функционирования опции?

Есть пара лайфхаков для пользователей, кто уже пользуется функцию распознавания лица:

Периодически меняйте свою фото-шаблон, если кардинально изменяется внешний вид.
Не упускайте из виду протирать объектив передней камеры – разводы могут уменьшить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам включает фотоаппарат если вы берёте его в руки.
В процессе записи старайтесь держать голову прямо впереди видеоустройства не допуская резкого наклона головы.
Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отвернулись от экрана.

Перспективы развития инноваций

В предстоящие времена можно предвкушать развития полностью дистанционных способов опознания человека сразу по нескольким биометрическим параметрам одновременно: лицо + голос + манера ходьбы + манипуляции руками!

Также предполагается возникновение свежих подходов защиты приватности – скажем, переменное корректировка диджитал образца после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из самых захватывающих инноваций нашего эпохи! Она делает общение со мобильным устройством комфортнее чем до этого, и такие приложения, как кабура казино, могут значительно оптимизировать ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы понимаете, как функционирует эта технология изнутри, – сможете более осмысленно выбирать свой будущий девайс!