Как функционирует определение лиц в телефонах

Почему мы выбираем разлочивание по лицу

В прошлые годы распознавание физиономий превратилось в одной из самых распространённых опций для разблокировки умных телефонов. Лишь пару годков тому назад основная часть юзеров удовлетворялись пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь делает данную возможность настолько популярной? Для начала, это практично: не нужно помнить замысловатые пароли или искать нужный палец в мраке. Также, это быстро: современные программы узнают лицо буквально за доли секунды. В-третьем пункте, это чувство будущего — как будто в кинолентах про казино вулкан шпионов.

Однако за этой видимой простотой скрывается целый вселенная трудных методов и инженерных разработок. Давайте разобраться, как конкретно действует идентификация по лицу в актуальных смартфонах, какие существуют технологии, насколько они надёжны и что нас предстоит.

Краткая повествование прогресса инноваций

Распознавание лиц как технология имеется уже более пятидесяти годов. Начальные эксперименты автоматизированного исследования облика были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда ЭВМ умели лишь определять очертания черепа и измерять дистанции между глазами и устами на черно-белых изображениях.

Начальные торговые платформы возникли в девяностых годах, но они были неидеальны: функционировали медленно и часто ошибались. Только с прогрессом искусственных сетей и таких систем, как вулкан россии, высокопроизводительных мобильных микросхем распознавание лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные разработки.

Главные шаги работы механизма распознавания

Процесс распознавания лица можно примерно разделить на несколько ключевых этапов:

1. Обнаружение лица — аппарат распознает присутствие гуманного образа в снимке.
2. Определение особенностей — алгоритм анализирует черты физиономии: конфигурацию зрительных органов, обонятельного органа, уст, расположение надбровных дуг.
3. Построение шаблона — создаётся уникальный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с образцом — полученный модель сопоставляется с сохранённой при регистрации биометрической информацией владельца.
5. Принятие выбора — если совпадение достаточно значительное, смартфон деблокируется.

Каждый из указанных этапов требует индивидуальных методов и оптимизаций для оперативной работы непосредственно на девайсе.

Аппаратные компоненты: что скрыто внутри них

Типичная селфи камера.

Наиболее простой способ распознавания лица использует лишь лицевую камеру смартфона мобильного устройства. Подобный способ внедрён во многочисленных недорогих версиях Android-девайсов.

Плюсы:

• Не потребляет дополнительные датчиков.
• Оперативно действует при достаточном свете.

Минусы:

• Просто ввести в заблуждение изображением или роликом.
• Неправильно работает при плохом свете или непривычных точках зрения.

Инфракрасная фотокамера и точечный проекционный аппарат

Более совершенные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология является основой Face ID от Apple.

Как это работает:

• Точечный проектор показывает на физиономию использующего невидимую решетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 пятен).
• Инфракрасная камера записывает изменение формы данной сетки по поверхности физиономии.
• Получается трёхмерная глубинная карта глубины, что практически неподвластна для фальсификации обычной снимком или маскировкой.

Плюсы

• Надёжная функционирование даже в полной тьме.
• Высокая сопротивляемость к подделкам.
• Точность идентификации более 99%.

Дополнительные сенсорные устройства

В отдельных аппаратах задействуются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют время распространения луча до цели и обратно; RGB-датчики дальности; специальные лазерные дальномеры для создания более детализированной 3D-модели лица.

Эти технологии используются в основном во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: синтетический интеллект в действии

Текущие устройства распознавания лиц неосуществимы в отсутствие использования искусственного интеллекта и машинного обучения. Именно вследствие таким технологиям, как вулкан россии, гаджет в состоянии распознавать пользователя даже при метаморфозах облика: новая стрижка, щетина, оптика или макияж не становятся барьером для разблокировки.

Детектирование лиц

В первом шаге программа обязана мгновенно найти лицо внутри полного снимка с камеры. Для данной цели задействуются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены распознавать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN в состоянии распознавать лицо даже в случае неполном перекрытии (например, платком или ладонью).

Идентификация основных точек

После идентификации лица устройство, такая как вулкан россии, вычисляет положение ключевых точек: кончики глаз, конец носа, границы губ и так далее. Часто используется от 68 до 128 главных точек на лице.

Это необходимо для нормализации изображения: если человек находится с телефон под углом, или наклонил головку, программа корректирует картинку до стандартного положения для последующего изучения.

Создание биометрии шаблона

Далее нейросеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Данный образец крайне трудно имитировать: он не удерживает само изображение пользователя, а лишь исключительные черты его вида, что делает его идеальным для таких площадок, как vulkan russia.

Сравнение и вынесение выбора

Когда юзер желает разблокировать смартфон взором, система повторяет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ блокируется.

Адаптация к трансформациям внешнего вида

Интересная черта нынешних системы — возможность самообучения. Если вы регулярно открываете смартфон с обновленной укладкой или оптикой, программа постепенно модернизирует основной модель вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрии информации.

Многие клиенты боятся сохранять свои биометрические идентификационные данные на мобильном устройстве из-за риска утечки данных или взлома устройства. Иные организации, например vulkan russia, предлагают решения для повышения сохранности сведений клиентов.

• Локальное сбережение: Основная часть девайсов сохраняет биометрические шаблоны только внутрь безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из гаджет и закрыты даже создателю.

• Шифрование: Все данные сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних девелоперов не имеют прямого доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения личности через системный API.

Следует отметить существенную подробность: в случае, если какой-то человек достанет физический доступ к вашему телефону (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители реализуют меры безопасности от автоматического разблокирования — например, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды идентификации лиц на изображениях?

В настоящее время можно определить выделить 3 ключевых способа к реализации этой операции:

Программное двухмерное определение

Используется только лицевая видеокамера без вспомогательных датчиков глубины. Подобный способ используется наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность воплощения; умеренная цена; быстрая функционирование при достаточном свете.
Минусы: легко обмануть снимком; неустойчивая функционирование ночью; слабая охрана.

Аппаратное 3D сканирование

Применяет ИК камеру + проекционный модуль точек + сенсоры глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Преимущества: значительная достоверность; невозможно подделать изображение/видеозапись; постоянная работа в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с дополнением ИИ

Используют комбинацию программных методов + аппаратную обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как вулкан россии и Google Pixel Face Unlock современных версий, объединяют фронтальную камеру c ИК датчиком движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Примеры применения различных методов

• iPhone модели X/11/12/13/14 применяют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз внедрил аналог Face ID в числе Android.
• Samsung Galaxy S10/S20 имеют как программное двухмерное распознавание по снимку фронтальной камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro использует набор из ИК-подсветки + Dot Projector + ToF-сенсор

Трудности охраны и ложные сигналы

Несмотря на впечатляющий развитие технологий за последние годы, совершенных механизмов пока не наблюдается:

1. Шанс мошенничества: Бюджетные смартфоны без труда открываются качественной снимком хозяина или видео с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные устройства могут перепутать между однояйцевыми близнецами либо родственниками с очень похожей внешностью.
3. Изменения внешности: Внезапное утрата веса/увеличение массы тела, пластические операции либо повреждения иногда требуют повторной регистрации биометрии.
4. Условия записи: Интенсивная подсветка солнцем или глубокая темнота могут уменьшить аккуратность определения признаков.

Здесь пара советов для защищённому эксплуатации:

• Для критически важных операций всегда применяйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Систематически апгрейдите ПО смартфона для защиты от актуальных атак;
• Включайте опцию “Требовать открытых глаз” везде, где она доступна.

В каких областях также используется технологии за исключением мобильных телефонов?

Пускай тема данной работы посвящена в частности смартфонам и планшетам, стоит упомянуть о других сферах применения технологии:

• Управление входа в рабочих помещениях и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Виртуальные удостоверения личности современного поколения;
• Установки видеоконтроля муниципальных служб;
• Автоматизирование учёта присутствия учебных заведений/университетов;
• Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по лицу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Похожие проекты развиваются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом изменяется технический процесс сегодня?

Любой годочек возникают свежие мысли для усовершенствования уровня деятельности систем распознавания лиц:

1. Увеличивается чёткость сенсорных устройств — чем больше элементов фиксируется фотоаппаратом/глубинными сенсорами, тем меньше шанс погрешности;
2. Улучшаются нейронные сети — современные структуры модели MobileNetV3 дают возможность быстро обучаться свежим особенностям внешности пользователя прямо на устройстве без отправки данных в облако.
3. Развиваются технологии антиспуфинга — теперь смартфоны способны отличать настоящие живые облики от неподвижных снимков/маскировок по мельчайшим микродвижениям.
4. Взаимодействие со умными устройствами — интеллектуальные часы могут автоматически блокировать телефон, если владелец отошёл далеко.
5. Проявляются смешанные механизмы — в частности объединяющие аудио идентификацию + облик + отпечаток пальца.

Итак, какие тенденции особенно востребованы в данный момент:

1) Миниатюризация компонентов

Производители пытаются сократить величину отверстия (“чёлки”) для сенсоры на экране за счёт внедрения компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения приватности всё больше вычислений происходит внутри устройства без передачи данных во внешний облачный услугу.

3) Стандартизация регламентов

Гугл энергично продвигает стандарт BiometricPrompt API, для того чтобы подобные системы, вроде вулкан россия, и любые Android-аппы могли работать с различными типами биометрии единообразно.

Какое выбрать на сегодня?

В случае если вам всем важна максимальная сохранность данных, подбирайте передовые устройства с вмонтированным ИК-излучателем или же ToF-сенсором глубины.

• iPhone каждого новейших моделей
• Huawei Companion/Series P серии
• Mi Pro
• Vivo X модели
• Oppo Найти X серии.

Если бюджет ограничен – лучше выбирать классическим средствам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, использовать только как дополнительную возможность комфорта.

Как повысить удобство использования опции?

Есть несколько лайфхаков для тех, кто уже пользуется разблокировку по лицу:

1. Регулярно обновляйте свою фото-шаблон, если кардинально меняется внешний вид.
2. Не пренебрегайте очищать линзу передней камеры – пятна могут понизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам включает камеру если вы поднимаете его.
4. При регистрационного процесса старайтесь держать лицевую часть прямо перед видеоустройства не допуская значительного наклона головы.
5. Используйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отворачиваетесь от экрана.

Будущее эволюции технологии

В предстоящие периоды можно предполагать появления полностью бесконтактных способов распознавания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + шаги + жесты рук!

Также вероятно появление современных методов обеспечения приватности – например, динамическое корректировка цифрового паттерна после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из очень захватывающих технологий нашего эпохи! Она предоставляет интеракцию со телефоном проще чем раньше, и такие приложения, как vulkan russia, могут в разы оптимизировать ваш опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как устроена эта система внутри, – сможете более осмысленно выбирать свой очередной девайс!