Каким образом действует распознавание лицевых образов в телефонах

Почему мы останавливаемся на разлочивание по лицевому распознаванию

В прошлые времена определение лиц превратилось в одной из самых распространённых возможностей для деблокировки смартфонов. Лишь пару годов ранее основная масса пользователей удовлетворялись пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, например Вулкан Платинум, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект делает эту конкретную возможность настолько популярной? Для начала, это комфортно: не нужно удерживать в памяти замысловатые пароли или находить нужный палец в темноте. Во-вторых, это быстро: современные системы идентифицируют лицо фактически за мгновения ока. В-третьих, это чувство футуристичности — как будто в фильмах про казино Вулкан разведчиков.

Тем не менее за данной на первый взгляд несложностью прячется полный мир трудных технологий и инженерных решений. Позвольте нам исследовать, как именно работает фейсканирование в новейших мобильных телефонах, какие существуют способы, насколько они надёжны и что нас предстоит.

Сжатая хроника развития технологии

Идентификация лиц как техника существует уже более пятидесяти лет. Первые эксперименты машинного исследования облика были осуществлены еще в 1960-х годы в лабораториях США. Тогда ЭВМ могли лишь обозначать силуэты черепа и определять дистанции между очами и ртом на черно-белых фотографиях.

Изначальные бизнес системы возникли в 1990-х годах, но они были неидеальны: работали медленно и часто ошибались. Только с развитием синтетических сетей и таких платформ, как Vulkan Platinum, сильных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным распознаванием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои решения.

Ключевые шаги работы устройства распознавания

Процесс распознавания лица можно условно разделить на несколько основных этапов:

1. Обнаружение лица — аппарат определяет присутствие людского образа в снимке.
2. Извлечение признаков — система изучает особенности облика: конфигурацию зрительных органов, носа, губ, расположение надбровных дуг.
3. Построение структуры — создаётся особенный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со стандартом — сформированный шаблон сопоставляется с зафиксированной при регистрации биометрической данными владельца.
5. Принятие определения — если сходство достаточно высокое, смартфон открывается.

Всякий из данных шагов требует особых методов и оптимизаций для быстрой работы непосредственно на девайсе.

Технические составляющие: что прячется внутри них

Стандартная фронтальная камера.

Простейший легкий метод определения лица использует лишь фронтальную видеокамеру мобильного устройства. Подобный способ реализован во многочисленных доступных моделях Android-девайсов.

Преимущества:

• Не нуждается в дополнительные датчиков.
• Быстро действует при достаточном освещении.

Слабые стороны:

• Легко ввести в заблуждение снимком или видеозаписью.
• Неудачно функционирует при слабом свете или необычных углах обзора.

Инфракрасная фотокамера и точечный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс составляет базу Face ID от Apple.

Каким способом это функционирует:

• Точечный устройство проекции отображает на физиономию пользователя невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
• ИК камера записывает изменение формы этой сетки по поверхности физиономии.
• Создаётся 3D карта глубины глубинности, что практически невозможна для имитации типичной фотографией или маской.

Преимущества

• Надёжная деятельность даже в полной темноте.
• Высокая устойчивость к подделкам.
• Точность распознавания выше 99%.

Дополнительные датчики

В некоторых устройствах задействуются также экстра датчики: ToF (Time-of-Flight), которые определяют период распространения луча до цели и обратно; Цветные-датчики дальности; специальные оптические дальномеры для формирования более детализированной 3D-модели лица.

Эти технологии применяются в основном во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искусственный интеллект в исполнении

Современные системы опознания лиц неосуществимы без эксплуатации искусственного интеллекта и machine learning. Именно благодаря таким разработкам, как Vulkan Platinum, аппарат способно распознавать пользователя даже при метаморфозах внешнего вида: новая стрижка, растительность на лице, очки или грим не становятся препятствием для открытия.

Распознавание лиц

В начальном шаге программа должна мгновенно найти ликовое изображение внутри целого снимка камеры. Для этой задачи задействуются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены находить лиц человека среди множества других объектов.

Пример: метод MTCNN может находить физиономию даже при частичном перекрытии (например, шарфом или ладонью).

Определение основных аспектов

После идентификации лица устройство, такая как Vulkan Platinum, вычисляет положение главных точек: кончики глаз, верхушка носа, контуры губ и так далее. Обычно используется от 68 до 128 ключевых меток на лицевой области.

Это требуется для стабилизации картинки: если юзер находится с мобильник под наклоненным, или наклонил головку, программа исправляет картинку до нормального состояния для дальнейшего анализа.

Создание биометрии модели

Далее нейросеть строит уплотненное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 флоатов.

Этот шаблон крайне затруднительно подделать: он не сохраняет непосредственно изображение пользователя, а лишь исключительные особенности его внешности, что делает его совершенным для таких площадок, как Вулкан Казино Платинум.

Сравнительный анализ и вынесение заключения

Если человек хочет разлочить телефон глазами, система воспроизводит все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный порог (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ запрещается.

Адаптация к изменениям облика

Занимательная черта актуальных систем — возможность самообучения. Если вы регулярно разблокируете мобильное устройство с обновленной прической или очками, система постепенно освежает основной образец вашего внешности для повышения точности работы без ухудшения безопасности.

Безопасность биометрических данных информации.

Большинство клиенты боятся держать свои био-идентификационные данные на смартфоне из-за вероятности потери данных или взлома устройства. Определенные фирмы, например Вулкан Казино Платинум, предоставляют методы для улучшения безопасности информации клиентов.

• Локальное сбережение: Большинство девайсов сохраняет био-идентификационные модели исключительно в пределах защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют гаджет и не доступны даже создателю.

• Шифрование: Все информация сберегаются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих девелоперов не обладают непосредственного доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Стоит отметить значимую подробность: если кто-либо получит доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители осуществляют систему защиты от автоматического разблокирования — в частности, просят открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют категории идентификации лиц на изображениях?

В настоящее время можно выделить выделить 3 ключевых способа к выполнению этой функции:

Программируемое двухмерное распознавание

Эксплуатируется только фронтальная видеокамера без дополнительных детекторов глубины. Такой метод наблюдается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность реализации; низкая затраты; оперативная функционирование при достаточном освещении.
Минусы: просто обмануть снимком; неустойчивая работа ночью; слабая охрана.

Техническое 3D оцифровка

Задействует инфракрасную видеокамеру + проектор точек + датчики дистанции (Face ID от Apple; подобные технологии у Huawei Mate).
Достоинства: высокая надежность; невозможно обмануть изображение/видеозапись; постоянная функционирование при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с ИИ-дополнением

Применяют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например Vulkan Platinum и Google Pixel Face Unlock современных версий, объединяют фронтальную камеру c инфракрасным сенсором движения Soli Radar для защиты от подделок руками/масками/видеоэкранами чужих устройств.

Иллюстрации применения разных способов

• iPhone линейки X/11/12/13/14 применяют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые предложил подобие Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 поддерживают как софтверное плоское определение по фото селфи-камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro задействует набор из ИК-освещения + Dot Projector + ToF-датчик

Трудности безопасности и ошибочные срабатывания

Несмотря на впечатляющий развитие инноваций за недавние годы, идеальных механизмов пока не имеется:

1. Шанс подвоха: Доступные мобильники легко доступны четкой снимком пользователя либо видео с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые совершенные устройства могут ошибиться между монозиготными близнецами либо семьями с очень похожей внешностью.
3. Метаморфозы облика: Резкое утрата веса/увеличение массы тела, хирургические вмешательства или травмы порой требуют повторной регистрации биометрии.
4. Условия съёмки: Яркая подсветка солнечным светом или же плотная темнота могут снизить верность определения признаков.

Здесь пара подсказок для надёжному эксплуатации:

• Для значимых операций всегда используйте дополнительную аутентификацию;
• Не активируйте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Систематически обновляйте прошивку прошивку смартфона для обеспечения безопасности от новых видов атак;
• Включайте опцию “Требовать открытых глаз” везде, где она имеется.

В каких местах ещё используется технологии за исключением смартфонов?

Пускай основная мысль этой публикации посвящена именно мобильным устройствам, необходимо сказать о альтернативных областях использования технологии:

• Контроль доступа в рабочих помещениях и резиденциях;
• Платёжные устройства банков (“Face Pay”);
• Цифровые паспорта нового типа;
• Установки видеомониторинга городских сервисов;
• Механизация учёта явки образовательных учреждений/институтов;
• Аутентификация участников ПК/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или телефона! Похожие инициативы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом трансформируется технология в нынешнее время?

Каждый годик возникают современные мысли для улучшения качества функционирования систем идентификации лиц:

1. Увеличивается чёткость датчиков — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше вероятность неточности;
2. Развиваются нейронные сети — передовые структуры типа MobileNetV3 обеспечивают возможность скоростно обучаться новым особенностям вида пользователя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь смартфоны умеют различать подлинные анимированные лица от фиксированных фото/маскировок по незаметным микродвижениям.
4. Взаимодействие со интеллектуальными приборами — интеллектуальные часы могут автоматически блокировать смартфон, если пользователь удалился на значительное расстояние.
5. Возникают смешанные системы — к примеру совмещающие голосовую аутентификацию + облик + пальцевой отпечаток.

Вот, те направления в особенности востребованы на сегодняшний день:

1) Сокращение компонентов

Производители стараются сократить размер отверстия (“чёлки”) для датчики на экране за счёт встраивания миниатюрных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения конфиденциальности всё больше расчётов осуществляется на месте без пересылки информации во внешний облачный сервис.

3) Стандартизация стандартов

Гугл интенсивно продвигает стандарт BiometricPrompt API, с целью чтобы такие платформы, вроде Вулкан Платинум, и каждые Android-аппы могли работать с любыми видами биометрии стандартизированно.

Какое подобрать сегодня?

Если вам важна предельная защита информации, подбирайте передовые устройства с интегрированным ИК-проектором или ToF-датчиком глубины.

• iPhone каждого новейших поколений
• Huawei Partner/Series P линейки
• Mi Expert
• Vivo X серии
• Oppo Find Икс линейки.

Если средства скромен – лучше выбирать обычным способам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как второстепенную возможность удобства.

Как улучшить практичность работы функции?

Есть некоторые советов для пользователей, кто уже применяет разблокировку через лицо:

1. Часто меняйте свою фото-шаблон, если значительно трансформируется облик.
2. Не упускайте из виду протирать линзу передней камеры – пятна могут снизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам активирует камеру когда вы берёте его в руки.
4. При записи постарайтесь сохранять лицевую часть неподвижно напротив объектива без резкого наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отворачиваетесь от экрана.

Будущее развития технологии

В скоро наступающие времена можно ожидать возникновения полностью безконтактных способов опознания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + манера ходьбы + движения рук!

Также возможно появление новых методов обеспечения конфиденциальности – скажем, изменяющееся модификация диджитал паттерна после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых увлекательных инноваций нашего эпохи! Она делает общение со смартфоном удобнее чем до этого, и такие программы, как Вулкан Казино Платинум, могут существенно оптимизировать ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как работает эта методика изнутри, – сможете осознаннее выбирать свой будущий гаджет!