Каким образом действует распознавание лиц в смартфонах

Для чего мы предпочитаем разблокировку по лицу

В прошлые годы идентификация физиономий является одной из наиболее востребованных возможностей для деблокировки умных телефонов. Еще пару лет ранее основная масса юзеров обходились PIN-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, как Platinum Casino, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Что обуславливает данную особенность такой востребованной? Прежде всего, это комфортно: не нужно помнить сложные пароли или отыскивать верный палец в мраке. Во-вторых, это оперативно: современные системы идентифицируют лицо фактически за мгновения ока. В-третью очередь, это ощущение футуристичности — как будто в кинофильмах про казино платинум шпионов.

Однако за этой кажущейся простотой прячется весь вселенная комплексных методов и инженерных концепций. Давайте разобраться, как конкретно действует идентификация по лицу в актуальных смартфонах, какие существуют методы, насколько они безопасны и что нас ожидает в будущем.

Короткая история эволюции технологии

Распознавание лиц как методика присутствует уже более 50 годов. Начальные попытки автоматического исследования облика были сделаны еще в 1960-х годы в исследовательских центрах США. Тогда ЭВМ умели лишь выделять силуэты лица и вычислять промежутки между глазами и губами на монохромных изображениях.

Начальные коммерческие системы появились в 1990-х годах, но они были несовершенны: функционировали медленно и нередко ошибались. Только с эволюцией нейронных сетей и таких систем, как Платинум Казино, сильных мобильных чипов идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои решения.

Основные шаги действия устройства определения

Процесс распознавания лица можно ориентировочно поделить на несколько важных этапов:

1. Обнаружение лица — камера определяет присутствие людского образа в изображении.
2. Выделение характеристик — механизм анализирует черты лица: конфигурацию зрительных органов, обонятельного органа, губ, позицию бровей.
3. Построение модели — создаётся особенный электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с эталоном — сформированный модель сравнивается с зафиксированной при регистрации биометрической данными владельца.
5. Принятие определения — если сходство достаточно значительное, смартфон разблокируется.

Каждый из данных этапов требует индивидуальных методов и улучшений для скорой работы прямо на устройстве.

Аппаратные элементы: что прячется внутри

Обычная передняя камера.

Наиболее несложный метод распознавания лица применяет только лицевую видеокамеру смартфона. Подобный подход реализован во многих недорогих вариантах Android-девайсов.

Сильные стороны:

• Необходимо требует дополнительных датчиков.
• Оперативно функционирует при качественном освещённости.

Недостатки:

• Несложно обмануть фотографией или видео.
• Неправильно работает при плохом свете или непривычных углах обзора.

Инфракрасная фотокамера и точечный проектор

Более совершенные системы, такие как Платинум Казино, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология лежит в основе Face ID от Apple.

Каким способом это действует:

• Точечный проектор проецирует на лицо юзера невидимую решетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
• ИК камера фиксирует деформацию этой сетки по поверхности лица.
• Создаётся трехмерная карта глубины глубинности, которая почти что неосуществима для фальсификации обычной фотографией или маской.

Плюсы

• Надёжная работа даже в полной темноте.
• Высокая устойчивость к фальсификациям.
• Точность распознавания свыше 99%.

Дополнительные датчики

В некоторых аппаратах применяются также экстра сенсоры: ToF (Time-of-Flight), которые фиксируют время распространения света до цели и обратно; Трехцветные-датчики дальности; специальные оптические лидары для построения более детализированной 3D-модели лица.

Эти разработки применяются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искуственный интеллект на действии

Современные механизмы идентификации лиц невозможны при отсутствии использования artificial intelligence и машинного обучения. Именно вследствие таким технологиям, как Платинум Казино, устройство в состоянии распознавать юзера даже при метаморфозах облика: новая причёска, растительность на лице, линзы или косметика не становятся помехой для открытия.

Распознавание лиц

При начальном шаге система обязана мгновенно распознать лицо среди полного изображения камеры. Для данной цели задействуются многоуровневые классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены идентифицировать лиц человека среди множества других объектов.

Пример: процесс MTCNN способен распознавать лицо даже с неполном перекрытии (например, шалью или ладонью).

Идентификация важных аспектов

После распознавания лица система, такая как Платинум Казино, определяет расположение ключевых точек: кончики глаз, кончик носа, края губ и так далее. Часто применяется от 68 до 128 ключевых маркеров на лицевой поверхности.

Это требуется для нормализации картинки: если юзер держит мобильник под углом, или наклонил голову, программа исправляет картинку до нормального состояния для дальнейшего анализа.

Создание биометрического идентификатора шаблона

Далее нейронная сеть строит компактное числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Такой формат очень трудно подделать: он не сохраняет само фото юзера, а лишь особенные особенности его облика, что делает его оптимальным для таких площадок, как Казино Платинум.

Сопоставление и осуществление заключения

В случае, когда юзер намеревается разблокировать мобильник взглядом, программа осуществляет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно выше 99%), телефон, как и платформа Казино Платинум, разблокируется; если нет — доступ запрещается.

Приспособление к изменениям внешности

Интересная характеристика современных системы — способность самостоятельного обучения. Если вы часто открываете смартфон с свежей укладкой или оптикой, система постепенно модернизирует основной модель вашего внешности для увеличения точности действия без снижения уровня безопасности.

Охрана биометрических данных данных.

Большинство пользователи боятся хранить свои биометрические идентификационные данные на смартфоне из-за вероятности потери данных или взлома гаджета. Некоторые организации, например Казино Платинум, предлагают методы для повышения сохранности сведений юзеров.

• Локальное сбережение: Большинство аппаратов записывает биометричные модели исключительно внутри защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не покидают гаджет и не доступны включая производителю.

• Шифрование: Все сведения сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих девелоперов не обладают непосредственного доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации идентичности через системный API.

Стоит отметить значимую деталь: в случае, если кто-то сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство компании внедряют меры безопасности от автоматического разблокирования — например, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды идентификации лиц?

В настоящее время можно выделить 3 основных способа к реализации этой функции:

Программное плоское распознавание

Используется только лицевая видеокамера без дополнительных датчиков глубины. Такой способ встречается обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость реализации; низкая затраты; оперативная работа при хорошем свете.
Минусы: несложно ввести в заблуждение фотографией; ненадежная деятельность ночью; недостаточная защищенность.

Аппаратное 3D оцифровка

Задействует ИК видеокамеру + проекционный модуль пикселей + датчики дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Плюсы: значительная достоверность; невозможно подделать изображение/видеозапись; устойчивая деятельность при любом освещении.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с дополнением ИИ

Применяют комбинацию софтверных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как Платинум Казино и Google Pixel Face Unlock современных версий, комбинируют фронтальную камеру c инфракрасным датчиком движения Soli Radar для предотвращения от подделок руками/масками/видеоэкранами посторонних устройств.

Примеры эксплуатации разных методов

• iPhone серии X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как программное обеспечение плоское идентификацию по изображению фронтальной камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro использует набор из ИК-освещения + Dot Projector + ToF-сенсорный элемент

Трудности защиты и неверные тревоги

Несмотря на замечательный успехи техники за прошедшие годы, безупречных систем пока не наблюдается:

1. Вероятность мошенничества: Недорогие телефоны без труда “разблокируются” высококачественной снимком пользователя или роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные устройства могут спутать между монозиготными близнецами либо родичами с очень похожей внешностью.
3. Трансформации внешности: Внезапное снижение веса/увеличение массы тела, пластические операции либо травмы порой требуют обновления данных биометрии.
4. Условия фотографирования: Интенсивная подсветка солнцем или глубокая тень могут понизить аккуратность распознавания признаков.

Ниже несколько подсказок по защищённому применению:

• Для значимых операций всегда применяйте двухэтапную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Систематически обновляйте прошивку прошивку телефона для предотвращения угроз от новых видов атак;
• Включайте функцию “Требовать открытых глаз” в тех местах, где она доступна.

В каких местах ещё применяется технологии кроме мобильных телефонов?

Несмотря на то, что основная мысль данной работы посвящена именно мобильным устройствам, следует отметить альтернативных областях использования технологии:

• Управление входа в рабочих помещениях и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Электронные идентификационные документы нового образца;
• Установки видеонаблюдения городских подразделений;
• Механизация отслеживания посещаемости школ/университетов;
• Аутентификация пользователей персональных компьютеров/ноутбуков.

Например: В столичном метро уже испытывается система платежа проезда по лицу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Аналогичные инициативы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом меняется технический процесс сегодня?

Любой год возникают современные идеи для повышения уровня функционирования систем идентификации лиц:

1. Увеличивается чёткость сенсорных устройств — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше риск погрешности;
2. Совершенствуются нейронные сети — новейшие структуры вида MobileNetV3 дают возможность быстро осваивать свежим чертам внешности владельца напрямую на гаджете без пересылки информации в облачное хранилище.
3. Улучшаются технологии антиспуфинга — теперь телефоны способны отличать подлинные анимированные лица от фиксированных фотографий/маскировок по незаметным движениям кожи.
4. Взаимодействие со интеллектуальными приборами — интеллектуальные часы могут авто закрыть доступ к телефон, если пользователь ушёл далеко.
5. Появляются смешанные системы — к примеру объединяющие речевую идентификацию + облик + пальцевой отпечаток.

Здесь, которые тренды в особенности актуальны сейчас:

1) Сокращение элементов

Производители намереваются сократить величину отверстия (“чёлки”) под сенсоры на дисплее за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для увеличения приватности всё больше обработки данных выполняется на месте без передачи данных во внешний облачный услугу.

3) Стандартизация регламентов

Гугл энергично продвигает стандарт BiometricPrompt API, чтобы аналогичные системы, например как Platinum Casino, и все Android-программы могли взаимодействовать с различными типами биометрии стандартизированно.

Что решить на сегодня?

В случае если вам всем необходима максимальная защита информации, подбирайте флагманские модели со встроенным ИК-проектором либо ToF-датчиком глубины.

• iPhone каждого актуальных поколений
• Huawei Partner/P ряда
• Mi Professional
• Vivo X модели
• Оппо Обнаружить Икс серий.

Если финансы ограничен – лучше отдавать предпочтение классическим средствам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в Platinum Casino, применять только как опциональную возможность удобства.

Каким способом повысить комфорт функционирования опции?

Есть пара лайфхаков для пользователей, кто уже пользуется функцию распознавания лица:

1. Регулярно обновляйте свою фотографию-шаблон, если сильно трансформируется облик.
2. Не упускайте из виду чистить объектив передней камеры – загрязнения могут понизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам включает фотоаппарат если вы берёте его в руки.
4. Во время записи старайтесь держать голову ровно напротив камеры исключая резкого наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отворачиваетесь от дисплея.

Будущее эволюции техники

В скоро наступающие времена можно предвкушать возникновения полностью дистанционных способов распознавания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + речь + манера ходьбы + манипуляции руками!

Также возможно появление новых методов обеспечения приватности – скажем, изменяющееся корректировка диджитал паттерна после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее увлекательных инноваций нашего эпохи! Она делает взаимодействие со мобильным устройством проще чем когда-либо прежде, и такие приложения, как Казино Платинум, могут в разы повысить ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как работает эта технология внутри, – будете в состоянии более осмысленно подбирать свой очередной гаджет!