Каким образом функционирует распознавание лиц в смартфонах

Зачем мы останавливаемся на разблокирование по фейсу

В недавние времена распознавание физиономий превратилось в одной из самых распространённых опций для деблокировки умных телефонов. Лишь несколько годов тому назад основная часть использующих обходились PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что делает эту конкретную функцию очень нужной? Во-первых, это практично: не нужно удерживать в памяти сложные пароли или отыскивать правильный палец в тьме. Также, это быстро: современные алгоритмы узнают лицо фактически за мгновения ока. В-третьем пункте, это чувство футуристичности — как будто в кинолентах про vulkan casino разведчиков.

Однако за данной на первый взгляд несложностью прячется полный вселенная комплексных техник и инженерных разработок. Давайте понять, как точно работает распознавание лиц в актуальных мобильных телефонах, какие бывают способы, насколько они безопасны и что нас ждёт впереди.

Краткая история эволюции технологии

Идентификация лиц как техника существует уже более пятидесяти годов. Изначальные пробы машинного изучения лиц были предприняты еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры умели лишь обозначать очертания лица и вычислять расстояния между зрачками и устами на черно-белых снимках.

Начальные бизнес платформы стали доступны в 1990-х годах, но они были далеки от совершенства: работали медленно и нередко ошибались. Только с развитием нейронных сетей и таких систем, как вулкан россии, мощных мобильных процессоров распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять свои решения.

Основные этапы функционирования системы распознавания

Процесс идентификации лица можно ориентировочно сегментировать на несколько важных этапов:

Распознавание лиц — аппарат распознает наличие гуманного лица в кадре.
Определение особенностей — система анализирует контуры лица: очертания глаз, носа, губ, расположение бровей.
Построение модели — создаётся особенный электронный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со эталоном — полученный образец сверяется со зафиксированной при внесении биометрической данными владельца.
Принятие решения — если сходство достаточно значительное, смартфон деблокируется.

Всякий из этих шагов требует специальных методов и улучшений для оперативной работы непосредственно на девайсе.

Железные компоненты: что прячется внутри

Типичная фронтальная камера.

Наиболее несложный способ идентификации физиономии применяет только лицевую видеокамеру смартфона. Подобный способ реализован во многих недорогих вариантах Android-девайсов.

Преимущества:

Необходимо требует дополнительных датчиков.
Шустро работает при качественном свете.

Слабые стороны:

Просто обмануть фотографией или видеозаписью.
Неправильно действует при слабом свете или необычных углах обзора.

ИК камера и пунктирный проекционный аппарат

Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.

Каким образом это работает:

Точечный проекционный прибор отображает на лицо использующего невидимую решетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 меток).
ИК устройство фиксирует искривление данной сетки по плоскости физиономии.
Получается трёхмерная карта глубины глубины, которая практически неосуществима для подделки типичной фотографией или маской.

Достоинства

Надёжная деятельность даже в полной темноте.
Сильная сопротивляемость к фальсификациям.
Точность распознавания выше 99%.

Добавочные датчики

В отдельных устройствах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые измеряют период распространения луча до цели и обратно; Цветные-датчики дальности; специальные световые дальномеры для построения более аккуратной 3D-модели лица.

Эти технологии используются наиболее часто во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: синтетический ум в исполнении

Нынешние системы опознания лиц невозможны при отсутствии эксплуатации ИИ и machine learning. Именно из-за таким инновациям, как вулкан россии, устройство может идентифицировать юзера даже при трансформациях облика: новая укладка, борода, линзы или грим не становятся препятствием для открытия.

Обнаружение физиономии

В стартовом стадии программа обязана мгновенно обнаружить ликовое изображение внутри целого изображения камеры. Для данной цели применяются последовательные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые натренированы распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN может распознавать облик даже при частичном закрытии (например, шалью или ладонью).

Выделение ключевых аспектов

После идентификации лица механизм, такая как вулкан россии, устанавливает расположение ключевых точек: края глаз, кончик носа, границы губ и так далее. Обычно задействуется от 68 до 128 главных меток на лице.

Это действие необходимо для стабилизации изображения: если пользователь держит мобильник под углом, или склонил головку, программа “выпрямляет” картинку до нормального состояния для последующего изучения.

Формирование биометрического идентификатора шаблона

Далее нейронная сеть строит компактное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот образец весьма сложно сфальсифицировать: он не удерживает само фото юзера, а лишь уникальные характеристики его облика, что делает его совершенным для таких систем, как vulkan russia.

Сопоставление и осуществление решения

Когда пользователь хочет разлочить мобильник глазами, система повторяет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно превышает 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ запрещается.

Адаптация к изменениям внешности

Увлекательная особенность нынешних системы — способность самообучения. Если ты постоянно разблокируете телефон с обновленной прической или оптикой, алгоритм постепенно освежает основной шаблон вашего облика для улучшения точности функционирования без снижения уровня безопасности.

Защита биометрии данных.

Множество пользователи опасаются хранить свои биометрические идентификационные данные на телефоне из-за угрозы утечки информации или взлома устройства. Иные компании, вроде vulkan russia, предоставляют методы для улучшения сохранности информации юзеров.

Локальное сохранение: Основная часть девайсов сохраняет биометрические образцы только внутрь безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают гаджет и не доступны включая создателю.
Шифрование: Все информация сохраняются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Программы сторонних разработчиков не имеют непосредственного возможности доступа к биометрическим; они могут лишь требовать подтверждение верификации личности через системный API.

Стоит отметить важную деталь: в случае, если какой-то человек достанет физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство изготовители внедряют меры безопасности от автоматического разблокирования — в частности, просят открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют категории распознавания лиц?

Сегодня можно определить различить 3 основных способа к реализации этой функции:

Программируемое плоское определение

Применяется только фронтальная видеокамера без экстра сенсоров дистанции. Такой метод встречается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость реализации; минимальная стоимость; скоростная деятельность при достаточном освещении.
Минусы: несложно одурачить фотографией; неустойчивая функционирование ночью; низкая охрана.

Оборудование для трёхмерное оцифровка

Использует ИК видеокамеру + проектор пикселей + сенсоры дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Плюсы: значительная надежность; невозможно обмануть изображение/видеозапись; постоянная деятельность при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с интеграцией ИИ

Задействуют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, как вулкан россии и Google Pixel Face Unlock современных версий, комбинируют фронталку c ИК датчиком движения Soli Radar для предотвращения от фальсификаций руками/масками/видеодисплеями посторонних устройств.

Примеры применения различных методов

iPhone серии X/11/12/13/14 используют только техническое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID в числе Android.
Samsung Galaxy S10 версия/S20 поддерживают как программное двухмерное распознавание по снимку селфи-камерой, так и сенсор глазного ириса.
Huawei Mate20 Pro применяет систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Проблемы безопасности и ложные сигналы

Несмотря на поразительный развитие инноваций за последние лет, совершенных системы пока не существует:

Шанс подвоха: Бюджетные мобильники просто доступны высококачественной фотографией пользователя либо роликом с экрана другого устройства.
Идентичные близнецы: Даже самые совершенные устройства могут перепутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
Метаморфозы облика: Стремительное похудение/увеличение массы тела, косметические процедуры или повреждения в некоторых случаях требуют перерегистрации биометрии.
Условия фотографирования: Яркая засветка солнцем или интенсивная тень могут понизить верность распознавания признаков.

Вот некоторые рекомендаций по защищённому эксплуатации:

Для критически важных операций всегда внедряйте двухэтапную аутентификацию;
Не активируйте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
Систематически обновляйте прошивку программное обеспечение телефона для предотвращения угроз от современных угроз;
Включайте настройку “Требовать открытых глаз” везде, где она доступна.

В каких местах дополнительно находится применение технологии кроме смартфонов?

Хотя тема нашей публикации касается в частности портативным гаджетам, следует отметить других сферах применения технологии:

Управление доступа в офисах и многоквартирных зданиях;
Платёжные устройства банков (“Face Pay”);
Цифровые удостоверения личности нового типа;
Установки видеонаблюдения городских подразделений;
Автоматизирование отслеживания явки образовательных учреждений/университетов;
Вход юзеров персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без пластика или мобильника! Похожие программы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом трансформируется технология сегодня?

Каждый годочек проявляются современные концепции для повышения уровня деятельности систем распознавания лиц:

Увеличивается разрешение сенсоров — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше риск неточности;
Совершенствуются нейросети — новейшие конструкции модели MobileNetV3 обеспечивают возможность быстро осваивать новым характеристикам облика обладателя непосредственно на девайсе без отправки данных в облако.
Развиваются методы антиспуфинга — теперь смартфоны умеют различать настоящие живые лица от неподвижных фотографий/маскировок по микроскопическим микродвижениям.
Интеграция со умными устройствами — интеллектуальные часы могут авто закрыть доступ к телефон, если владелец удалился на значительное расстояние.
Появляются смешанные механизмы — в частности комбинирующие голосовую опознание + облик + отпечаток пальца.

Итак, какие направления особенно востребованы на сегодняшний день:

1) Миниатюризация деталей

Компании намереваются минимизировать размер отверстия (“чёлки”) под датчики на экране за счёт встраивания миниатюрных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения конфиденциальности всё больше вычислений осуществляется на месте без отправки данных во внешний облачный сервис.

3) Унификация регламентов

Google активно пропагандирует норму BiometricPrompt API, с целью чтобы аналогичные площадки, например как вулкан россия, и каждые Android-аппы могли взаимодействовать с любыми видами биометрии стандартизированно.

Что решить сегодня?

Если вам всем нужна наивысшая сохранность информации, остановите выбор на флагманские модели с вмонтированным ИК-излучателем либо ToF-сенсором глубины.

iPhone всех актуальных версий
Huawei Mate/P ряда
Mi Expert
Vivo X линейки
Oppo Найти Икс серий.

Если финансы скромен – лучше отдавать предпочтение обычным способам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную возможность удобства.

Каким способом увеличить комфорт использования функции?

Есть пара лайфхаков для людей, кто уже использует разблокировку по лицу:

Периодически обновляйте свою фотографию-шаблон, если значительно меняется внешность.
Не пренебрегайте чистить объектив передней камеры – загрязнения могут снизить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам запускает фотоаппарат как только вы поднимаете его.
Во время регистрационного процесса постарайтесь удерживать лицевую часть ровно перед объектива исключая значительного наклона головы.
Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвели взгляд от экрана.

Возможности развития технологии

В ближайшие годы можно предполагать появления полностью безконтактных способов распознавания индивидуума сразу по нескольким биометрическим параметрам одновременно: лицо + речь + шаги + жесты рук!

Также возможно появление новых подходов обеспечения конфиденциальности – скажем, переменное корректировка диджитал шаблона после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из очень увлекательных технологий нашего периода! Она делает общение со смартфоном проще чем до этого, и такие приложения, как vulkan russia, могут существенно оптимизировать ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, если вы понимаете, как функционирует эта система изнутри, – будете в состоянии более осмысленно выбирать свой будущий устройство!