Каким способом работает определение лиц в телефонах

Зачем мы предпочитаем разлочивание по лицевому распознаванию

В прошлые времена распознавание лиц является одной из наиболее востребованных опций для деблокировки умных телефонов. Еще некоторые годков тому назад основная масса использующих обходились PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением таких технологий, например Вулкан Платинум, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что превращает эту функцию настолько популярной? Во-первых, это удобно: не нужно удерживать в памяти замысловатые пароли или отыскивать правильный палец в тьме. Также, это оперативно: современные программы распознают лицо фактически за мгновение. В-третьих, это впечатление будущего — будто в кинофильмах про vulkan platinum разведчиков.

Впрочем за такой видимой легкостью таится весь вселенная трудных технологий и инженерных решений. Давайте исследовать, как конкретно работает фейсканирование в современных гаджетах, какие применяются методы, насколько они надёжны и что нас ожидает в будущем.

Краткая повествование эволюции техники

Идентификация лиц как методика присутствует уже более пятидесяти годов. Начальные попытки автоматического исследования облика были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда компьютеры могли лишь выделять очертания черепа и вычислять дистанции между глазами и устами на ахроматических изображениях.

Первые торговые платформы возникли в 1990-х годах, но они были несовершенны: работали медленно и часто ошибались. Только с развитием нейронных сетей и таких систем, как Vulkan Platinum, сильных мобильных чипов определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные решения.

Основные этапы действия системы определения

Процесс определения лица можно условно разделить на несколько ключевых этапов:

1. Обнаружение лица — устройство выявляет присутствие людского образа в снимке.
2. Выделение характеристик — система изучает черты облика: конфигурацию глаз, обонятельного органа, губ, позицию бровей.
3. Построение структуры — создаётся уникальный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со образцом — созданный шаблон сверяется со сохранённой при регистрации биометрической данными владельца.
5. Принятие выбора — если соответствие достаточно значительное, смартфон открывается.

Каждый из этих стадий запрашивает специальных методов и оптимизаций для быстрой работы прямо на устройстве.

Аппаратные компоненты: что скрыто внутри них

Типичная селфи камера.

Самый простой метод распознавания лица применяет лишь переднюю камеру смартфона. Данный способ внедрён во различных доступных вариантах Android-устройств.

Сильные стороны:

• Необходимо нуждается в дополнительных датчиков.
• Шустро действует при хорошем свете.

Отрицательные стороны:

• Легко одурачить изображением или видео.
• Плохо функционирует при низком свете или нестандартных ракурсах.

Инфракрасная фотокамера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология лежит в основе Face ID от Apple.

Каким образом это работает:

• Точечный проекционный прибор отображает на физиономию пользователя невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 пятен).
• ИК камера фиксирует изменение формы этой решетки по поверхности лица.
• Формируется 3D глубинная карта глубины, которая почти неосуществима для имитации стандартной снимком или маской.

Достоинства

• Надёжная работа даже в полной тьме.
• Сильная сопротивляемость к подделкам.
• Точность идентификации более 99%.

Дополнительные датчики

В некоторых аппаратах задействуются также экстра сенсорные устройства: ToF (Time-of-Flight), которые измеряют период распространения света до объекта и обратно; RGB-датчики глубины; специальные лазерные дальномеры для построения более детализированной 3D-модели лица.

Эти технологии встречаются чаще всего во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искуственный интеллект на исполнении

Текущие механизмы распознавания лиц неосуществимы в отсутствие эксплуатации artificial intelligence и машинного обучения. Именно вследствие таким разработкам, как Vulkan Platinum, гаджет в состоянии узнавать владельца даже при трансформациях внешнего вида: новая стрижка, борода, очки или макияж не становятся препятствием для открытия.

Детектирование физиономии

При стартовом этапе программа необходимо быстро найти ликовое изображение среди всего снимка камеры. Для этого применяются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы идентифицировать лица людей среди множества других объектов.

Пример: метод MTCNN способен обнаруживать облик даже в случае неполном перекрытии (например, платком или ладонью).

Выделение основных точек

После идентификации лица механизм, такая как Vulkan Platinum, определяет местоположение главных точек: кончики глаз, кончик носа, границы губ и так далее. Как правило применяется от 68 до 128 основных меток на лицевой поверхности.

Это действие нужно для выравнивания изображения: если юзер держит телефон под наклоном, или повернул голову, программа “выпрямляет” картинку до стандартного положения для дальнейшего анализа.

Построение биометрического модели

Далее нейросеть строит сжатое числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Этот образец крайне сложно имитировать: он не удерживает непосредственно изображение юзера, а лишь исключительные особенности его вида, что делает его совершенным для таких систем, как Вулкан Казино Платинум.

Сравнительный анализ и принятие выбора

В случае, когда человек намеревается открыть смартфон взглядом, система осуществляет все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный порог (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, открывается; если нет — доступ запрещается.

Адаптация к метаморфозам облика

Интересная особенность нынешних системы — возможность самообучения. Если вы часто разблокируете мобильное устройство с обновленной прической или оптикой, система постепенно обновляет эталонный образец вашего лица для увеличения точности действия без ухудшения безопасности.

Охрана биометрических информации.

Множество юзеры опасаются хранить свои биометрические данные на смартфоне из-за угрозы утечки информации или взлома устройства. Иные организации, такие как Вулкан Казино Платинум, предлагают варианты для увеличения безопасности данных юзеров.

• Локальное хранение: Большинство аппаратов сохраняет био-идентификационные модели исключительно внутрь защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из гаджет и недоступны в том числе изготовителю.

• Шифрование: Все данные хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних разработчиков не имеют непосредственного возможности доступа к биометрическим; они могут лишь требовать факт подтверждения личности через системный API.

Следует отметить значимую особенность: в случае, если кто-либо достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество компании осуществляют систему защиты от “слепого” разблокирования — в частности, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют типы распознавания лиц на изображениях?

В настоящее время можно определить различить 3 ключевых способа к осуществлению этой задачи:

Программное двухмерное распознавание

Эксплуатируется только лицевая камера без дополнительных сенсоров дистанции. Такой подход встречается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость воплощения; низкая стоимость; оперативная функционирование при качественном свете.
Минусы: легко обмануть фотографией; ненадежная работа ночью; низкая охрана.

Техническое 3D сканирование

Задействует ИК видеокамеру + проектор точек + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: значительная надежность; нельзя исказить изображение/видеозапись; стабильная деятельность при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с интеграцией ИИ

Используют комбинацию программных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например Vulkan Platinum и Google Pixel Face Unlock последних поколений, объединяют фронталку c инфракрасным датчиком движения Soli Radar для защиты от фальсификаций руками/масками/видеоэкранами чужих устройств.

Иллюстрации использования различных методов

• iPhone модели X/11/12/13/14 задействуют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition в первый раз предложил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как программное двухмерное распознавание по изображению фронтальной камерой, так и сенсор ириса глаза.
• Huawei Mate20 Pro задействует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и неверные сигналы

Несмотря на поразительный развитие инноваций за прошедшие лет, совершенных механизмов пока не существует:

1. Возможность подвоха: Бюджетные телефоны без труда “разблокируются” качественной снимком пользователя либо видео с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые идеальные механизмы могут перепутать между монозиготными близнецами либо родственниками с очень схожей внешностью.
3. Трансформации внешнего вида: Внезапное утрата веса/увеличение массы тела, хирургические вмешательства или повреждения иногда необходимы для перерегистрации биометрических данных.
4. Условия фотографирования: Яркая освещённость солнцем или интенсивная тень могут понизить аккуратность распознавания признаков.

Ниже некоторые советов по безопасному использованию:

• Для важных операций всегда внедряйте двухэтапную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
• Регулярно обновляйте прошивку программное обеспечение мобильного устройства для защиты от актуальных атак;
• Включайте настройку “Требовать раскрытых глаз” там, где она имеется.

Где также используется технология за исключением смартфонов?

Хотя основная мысль нашей работы посвящена конкретно мобильным устройствам, необходимо сказать о других сферах применения технологии:

• Управление входа в рабочих помещениях и резиденциях;
• Платёжные терминалы банков (“Face Pay”);
• Электронные идентификационные документы нового типа;
• Системы видеоконтроля городских служб;
• Автоматизирование учёта явки образовательных учреждений/институтов;
• Авторизация пользователей ПК/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — хватит пройти через турникет без карты или мобильника! Похожие инициативы развиваются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом меняется технический процесс сегодня?

Каждый годочек появляются свежие идеи для улучшения уровня деятельности систем лицевого распознавания:

1. Увеличивается разрешение датчиков — чем больше информации фиксируется камерой/глубинными сенсорами, тем меньше риск погрешности;
2. Совершенствуются искусственные интеллекты — новейшие конструкции типа MobileNetV3 позволяют оперативно адаптироваться к дополнительным характеристикам внешности пользователя напрямую на гаджете без отправки данных в облако.
3. Развиваются способы антиспуфинга — теперь телефоны способны отличать настоящие анимированные облики от фиксированных снимков/маскировок по мельчайшим движениям кожи.
4. Синхронизация со смарт-гаджетами — интеллектуальные часы могут авто блокировать телефон, если обладатель отошёл далеко.
5. Проявляются смешанные механизмы — в частности комбинирующие голосовую аутентификацию + облик + отпечаток пальца.

Итак, которые направления очень востребованы на сегодняшний день:

1) Сокращение деталей

Изготовители пытаются сократить размер прорези (“чёлки”) для сенсоры на экране за счёт внедрения компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на устройстве

Для улучшения конфиденциальности всё более расчётов происходит на месте без передачи данных во внешний облачный сервис.

3) Унификация регламентов

Google интенсивно продвигает эталон BiometricPrompt API, чтобы аналогичные системы, вроде Вулкан Платинум, и каждые Android-приложения могли взаимодействовать с любыми видами биометрии унифицированно.

Что подобрать сегодня?

Когда вам нужна предельная сохранность данных, остановите выбор на топовые аппараты с вмонтированным ИК-проектором либо ToF-сенсором глубины.

• iPhone всех актуальных версий
• Huawei Partner/P линейки
• Mi Pro
• Vivo X модели
• Oppo Обнаружить X серий.

Если финансы ограничен – лучше отдавать предпочтение классическим методам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, задействовать только как второстепенную опцию комфорта.

Каким способом повысить комфорт работы опции?

Есть некоторые советов для тех, кто уже применяет разблокировку по лицу:

1. Регулярно обновляйте свою фото-шаблон, если сильно меняется облик.
2. Не упускайте из виду протирать объектив фронтальной камеры – разводы могут понизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает камеру как только вы поднимаете его.
4. Во время регистрации постарайтесь держать голову ровно впереди камеры исключая сильного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от экрана.

Будущее развития технологии

В предстоящие периоды можно предвкушать развития полностью бесконтактных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + звучание + походка + манипуляции руками!

Также предполагается развитие свежих способов обеспечения конфиденциальности – например, изменяющееся модификация цифрового паттерна после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из очень увлекательных техник нашего эпохи! Она обеспечивает интеракцию со смартфоном комфортнее чем до этого, и такие аппы, как Вулкан Казино Платинум, могут в разы оптимизировать ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как работает эта методика изнутри, – сумеете вдумчиво определять свой следующий устройство!