Каким образом действует определение лиц в мобильных устройствах

Для чего мы предпочитаем разлочивание по лицевому распознаванию

В прошлые времена определение лиц превратилось в одной из самых популярных функций для деблокировки мобильных телефонов. Еще несколько годков тому назад основная часть юзеров довольствовались пин-кодами, паролями или сканерами отпечатков пальцев. Но при появлением подобных технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что превращает данную особенность настолько популярной? Для начала, это комфортно: не нужно удерживать в памяти сложные пароли или отыскивать правильный палец в темноте. Во-вторых, это оперативно: современные алгоритмы узнают лицо практически за мгновение. В-третьих, это ощущение футуризма — будто в фильмах про vulkan russia разведчиков.

Впрочем за такой кажущейся несложностью таится целый мир сложных методов и инженерных решений. Давайте понять, как именно действует фейсканирование в современных мобильных телефонах, какие бывают способы, насколько они защищены и что нас предстоит.

Сжатая хроника развития технологии

Распознавание лиц как методика имеется уже более 50 лет. Изначальные эксперименты автоматизированного анализа лица были сделаны еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины могли лишь определять контуры головы и определять промежутки между глазами и устами на ахроматических снимках.

Первые коммерческие установки стали доступны в 90-х, но они были неидеальны: работали медленно и часто ошибались. Только с прогрессом искусственных сетей и таких платформ, как вулкан россии, сильных мобильных микросхем идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять личные разработки.

Главные шаги функционирования механизма распознавания

Процесс определения лица можно условно разделить на несколько ключевых этапов:

1. Идентификация лиц — камера выявляет наличие гуманного лица в изображении.
2. Выделение особенностей — механизм изучает особенности лица: конфигурацию глаз, обонятельного органа, уст, положение бровей.
3. Построение структуры — создаётся особенный электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с образцом — сформированный модель сверяется с сохранённой при учёте биометрической информацией владельца.
5. Принятие решения — если совпадение достаточно высокое, смартфон деблокируется.

Всякий из этих этапов требует индивидуальных процедур и улучшений для скорой работы прямо на устройстве.

Технические компоненты: что находится внутри

Обычная фронтальная камера.

Простейший простой вариант распознавания лица применяет лишь фронтальную видеокамеру мобильного устройства. Подобный метод внедрён во различных доступных вариантах Android-устройств.

Достоинства:

• Не требует дополнительных сенсоров.
• Быстро действует при качественном свете.

Минусы:

• Легко ввести в заблуждение изображением или видео.
• Плохо функционирует при плохом освещении или необычных точках зрения.

ИК камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика является основой Face ID от Apple.

Как это действует:

• Точечный проектор проецирует на облик юзера невидимую структуру из тысяч инфракрасных пятен (например, Face ID использует около 30 000 пятен).
• ИК камера фиксирует искривление этой сетки по плоскости лица.
• Получается 3D карта глубины глубинности, которая почти неосуществима для имитации типичной фото или маской.

Достоинства

• Надёжная функционирование даже в полной темноте.
• Сильная защита к имитациям.
• Точность распознавания свыше 99%.

Дополнительные датчики

В отдельных девайсах применяются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые определяют период распространения света до предмета и обратно; Трехцветные-датчики дальности; специальные лазерные дальномеры для создания более детализированной 3D-модели физиономии.

Эти разработки применяются чаще всего во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: искусственный интеллект в работе

Текущие механизмы идентификации лиц неосуществимы в отсутствие эксплуатации ИИ и машинного обучения. Именно вследствие таким разработкам, как вулкан россии, гаджет способно распознавать владельца даже при трансформациях внешнего вида: новая укладка, щетина, очки или косметика не становятся препятствием для разблокировки.

Распознавание лица

На стартовом стадии программа обязана оперативно найти лицо среди целого изображения с камеры. Для этого применяются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” идентифицировать человеческие лица среди множества других объектов.

Пример: процесс MTCNN в состоянии распознавать физиономию даже с частичном закрытии (например, шарфом или ладонью).

Определение основных точек

После распознавания лица система, такая как вулкан россии, устанавливает местоположение ключевых точек: кончики глаз, кончик носа, контуры губ и так далее. Как правило задействуется от 68 до 128 основных маркеров на лицевой области.

Данное нужно для стабилизации изображения: если человек находится с мобильник под углом, или повернул головку, программа “выпрямляет” изображение до обычного угла для последующего изучения.

Построение биометрического идентификатора шаблона

Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след лица длиной от 128 до 512 вещественных чисел.

Этот шаблон крайне трудно имитировать: он не сохраняет само картинку пользователя, а лишь исключительные черты его внешности, что делает его оптимальным для таких площадок, как vulkan russia.

Сравнение и вынесение заключения

В случае, когда юзер хочет разлочить смартфон взглядом, система осуществляет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный уровень (обычно больше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ блокируется.

Привыкание к изменениям внешности

Занимательная особенность актуальных системы — возможность самостоятельного обучения. Если вы регулярно открываете смартфон с обновленной укладкой или оптикой, программа постепенно освежает эталонный шаблон вашего внешности для повышения точности работы без ухудшения безопасности.

Защита биометрии информации.

Большинство пользователи опасаются хранить свои биометрические идентификационные данные на телефоне из-за угрозы утечки данных или взлома гаджета. Иные фирмы, например vulkan russia, предлагают варианты для повышения безопасности сведений пользователей.

• Локальное сбережение: Основная часть устройств хранит биометрические модели исключительно внутрь защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют аппарат и закрыты даже производителю.

• Шифрование: Все сведения хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих разработчиков не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт подтверждения идентичности через системный API.

Стоит отметить значимую подробность: в случае, если кто-либо получит доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители осуществляют систему защиты от неосознанного разблокирования — например, заставляют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие имеются категории распознавания лиц?

На сегодняшний день можно выделить выделить 3 ключевых способа к реализации этой задачи:

Программируемое 2D распознавание

Используется только фронтальная камера без экстра сенсоров дистанции. Подобный способ встречается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность воплощения; минимальная цена; скоростная деятельность при хорошем свете.
Минусы: просто ввести в заблуждение фотографией; неустойчивая функционирование ночью; недостаточная безопасность.

Оборудование для трёхмерное оцифровка

Применяет ИК камеру + проекционный модуль точек + датчики дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: значительная надёжность; нельзя обмануть фото/видео; устойчивая работа в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Используют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock последних версий, сочетают фронталку c инфракрасным сенсором мобильности Soli Radar для защиты от подделок жестами/масками/видеоэкранами посторонних устройств.

Образцы использования различных способов

• iPhone модели X/11/12/13/14 используют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition впервые представил эквивалент Face ID среди Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как программное 2D распознавание по изображению фронталкой, так и сканер глазного ириса.
• Huawei Mate20 Pro применяет набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности охраны и ложные тревоги

Несмотря на впечатляющий успехи технологий за последние годы, совершенных механизмов пока не существует:

1. Возможность обмана: Бюджетные мобильники без труда открываются высококачественной фотографией пользователя или же видеозаписью с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые совершенные устройства могут спутать между монозиготными близнецами либо семьями с очень схожей внешностью.
3. Метаморфозы внешности: Внезапное похудение/набор веса, хирургические вмешательства либо травмы иногда требуют повторной регистрации биометрии.
4. Условия фотографирования: Интенсивная засветка солнечным светом или же интенсивная тень могут понизить точность идентификации признаков.

Здесь несколько подсказок по защищённому эксплуатации:

• Для важных операций всегда используйте двухфакторную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Регулярно обновляйте прошивку телефона для обеспечения безопасности от современных угроз;
• Включайте настройку “Требовать распахнутых глаз” везде, где она доступна.

В каких местах также находится применение технология кроме мобильных телефонов?

Хотя тема этой публикации касается конкретно мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:

• Управление доступа в офисах и жилых домах;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Виртуальные паспорта последнего типа;
• Системы видеомониторинга городских служб;
• Автоматизация учёта посещаемости образовательных учреждений/институтов;
• Аутентификация юзеров персональных компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через барьер без карты или мобильника! Аналогичные проекты осуществляются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как изменяется технология в нынешнее время?

Каждый годик появляются свежие концепции для повышения качества деятельности систем лицевого распознавания:

1. Увеличивается разрешение датчиков — чем больше элементов фиксируется фотоаппаратом/глубинными сенсорами, тем меньше вероятность ошибки;
2. Совершенствуются нейронные сети — передовые структуры модели MobileNetV3 дают возможность быстро обучаться свежим особенностям облика обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Развиваются технологии антиспуфинга — теперь смартфоны способны распознавать реальные живые лица от статичных снимков/маскировок по незаметным движениям кожи.
4. Взаимодействие со смарт-гаджетами — смарт-часы могут автоматически блокировать мобильный телефон, если пользователь отошёл далеко.
5. Возникают смешанные системы — к примеру комбинирующие речевую идентификацию + облик + отпечаток пальца.

Здесь, какие тренды очень популярны на сегодняшний день:

1) Уменьшение компонентов

Изготовители намереваются минимизировать величину прорези (“чёлки”) для сенсоры на дисплее за счёт интеграции компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на девайсе

Для улучшения приватности всё больше обработки данных выполняется локально без передачи данных во внешний облачный сервис.

3) Упорядочивание норм

Google интенсивно продвигает эталон BiometricPrompt API, чтобы такие площадки, например как вулкан россия, и все Android-приложения могли взаимодействовать с различными типами биометрии унифицированно.

Какое подобрать сегодня?

Если вам всем нужна предельная защита данных, подбирайте топовые модели с интегрированным ИК-излучателем или же ToF-сенсором глубины.

• iPhone каждого актуальных моделей
• Huawei Mate/Series P серии
• Mi Expert
• Vivo X линейки
• Oppo Find Икс серии.

Если финансы невелик – лучше выбирать классическим способам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как опциональную возможность комфорта.

Каким способом повысить комфорт использования опции?

Есть некоторые советов для пользователей, кто уже пользуется разблокировку через лицо:

1. Часто обновляйте свою фото-шаблон, если значительно меняется внешность.
2. Не забывайте очищать объектив фронтальной камеры – разводы могут снизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам активирует камеру если вы поднимаете его.
4. Во время записи пытайтесь сохранять голову прямо напротив видеоустройства исключая значительного наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отворачиваетесь от дисплея.

Возможности прогресса техники

В скоро наступающие времена можно ожидать возникновения полностью бесконтактных способов идентификации индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + голос + шаги + жесты рук!

Также вероятно развитие новых подходов охраны личной информации – к примеру, динамическое изменение цифрового шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из очень захватывающих технологий нашего периода! Она предоставляет общение со мобильным устройством комфортнее чем до этого, и такие приложения, как vulkan russia, могут значительно повысить ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как работает эта технология внутри, – будете в состоянии вдумчиво подбирать свой следующий девайс!