Каким образом действует определение лиц в смартфонах

Для чего мы предпочитаем разблокирование по лицу

В недавние годы определение лиц является одной из наиболее востребованных возможностей для деблокировки смартфонов. Лишь пару лет тому назад основная масса юзеров обходились пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Что делает данную возможность такой востребованной? Во-первых, это удобно: не нужно запоминать замысловатые пароли или искать нужный палец в темноте. Кроме того, это оперативно: современные алгоритмы идентифицируют лицо практически за доли секунды. В-третьем пункте, это впечатление будущего — будто в кинофильмах про вулкан автомат шпионов.

Впрочем за этой видимой легкостью скрывается весь вселенная трудных методов и инженерных концепций. Попробуем понять, как точно работает фейсканирование в актуальных мобильных телефонах, какие существуют методы, насколько они безопасны и что нас ожидает в будущем.

Сжатая повествование развития инноваций

Распознавание лиц как техника существует уже более пятидесяти годов. Начальные эксперименты машинного изучения лиц были сделаны еще в 1960-х годы в научных учреждениях США. Тогда ЭВМ могли лишь определять силуэты лица и определять промежутки между очами и устами на монохромных изображениях.

Первые бизнес платформы стали доступны в 90-х, но они были несовершенны: функционировали медленно и часто ошибались. Только с прогрессом синтетических сетей и таких площадок, как вулкан россии, высокопроизводительных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные решения.

Основные этапы работы системы определения

Процесс распознавания лица можно ориентировочно разделить на несколько ключевых этапов:

1. Идентификация лица — аппарат распознает существование гуманного образа в изображении.
2. Извлечение особенностей — механизм исследует контуры физиономии: форму зрительных органов, носа, губ, расположение надбровных дуг.
3. Построение структуры — создаётся уникальный виртуальный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со образцом — сформированный шаблон сопоставляется с сохранённой при внесении биометрической сведениями владельца.
5. Принятие определения — если соответствие достаточно высокое, смартфон разблокируется.

Любой из этих стадий запрашивает особых процедур и оптимизаций для быстрой работы прямо на устройстве.

Аппаратные элементы: что скрыто в их недрах

Стандартная селфи камера.

Простейший несложный способ определения лица применяет исключительно фронтальную видеокамеру смартфона. Такой способ осуществлён во различных доступных моделях Android-устройств.

Преимущества:

• Необходимо нуждается в дополнительных датчиков.
• Оперативно работает при качественном свете.

Недостатки:

• Просто ввести в заблуждение фотографией или роликом.
• Плохо действует при плохом освещённости или непривычных точках зрения.

ИК камера и точечный проекционный аппарат

Более продвинутые системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс является основой Face ID от Apple.

Каким способом это работает:

• Точечный проектор отображает на лицо использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 пятен).
• Инфракрасная камера записывает искривление этой решетки по поверхности лица.
• Формируется трёхмерная глубинная карта глубинности, что почти невозможна для фальсификации стандартной фотографией или маскировкой.

Выигрыши

• Надёжная деятельность даже в полной неосвещённости.
• Большая сопротивляемость к подделкам.
• Точность идентификации выше 99%.

Дополнительные датчики

В отдельных устройствах задействуются также вспомогательные датчики: ToF (Time-of-Flight), которые фиксируют период движения луча до цели и обратно; Цветные-датчики дальности; специальные лазерные дальномеры для построения более точной 3D-модели лица.

Эти технологии используются наиболее часто во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искусственный разум в работе

Нынешние устройства опознания физиономий немыслимы при отсутствии применения artificial intelligence и machine learning. Именно благодаря таким разработкам, как вулкан россии, устройство способно распознавать владельца даже при трансформациях облика: новая укладка, борода, очки или косметика не становятся препятствием для разблокировки.

Обнаружение лиц

При начальном шаге программа необходимо оперативно распознать образ лица среди полного кадра с камеры. Для данной цели используются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые натренированы распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN в состоянии находить физиономию даже с неполном перекрытии (например, шарфом или рукой).

Выделение основных моментов

После идентификации лица механизм, такая как вулкан россии, устанавливает расположение главных точек: края глаз, конец носа, края губ и так далее. Часто используется от 68 до 128 главных точек на лицевой поверхности.

Данное нужно для нормализации изображения: если пользователь находится с мобильник под наклоненным, или наклонил головку, программа „выпрямляет” картинку до обычного угла для последующего изучения.

Построение биометрического шаблона

Далее искусственная сеть строит компактное математическое представление („эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Данный образец весьма сложно сфальсифицировать: он не хранит само картинку юзера, а лишь исключительные черты его облика, что делает его оптимальным для таких платформ, как vulkan russia.

Сопоставление и принятие решения

Если пользователь хочет открыть смартфон взглядом, программа повторяет все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный границу (обычно выше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ блокируется.

Приспособление к изменениям внешнего вида

Занимательная черта современных систем — возможность самообучения. Если вы регулярно доступаете к мобильное устройство с новой стрижкой или очками, система постепенно обновляет эталонный модель вашего внешности для повышения точности работы без снижения уровня безопасности.

Защита биометрии данных.

Множество пользователи беспокоятся держать свои биометрические данные на телефоне из-за вероятности утечки данных или взлома устройства. Некоторые фирмы, вроде vulkan russia, предоставляют варианты для увеличения сохранности данных пользователей.

• Локальное сохранение: Преимущественно аппаратов сохраняет биометрические модели лишь внутрь защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют аппарат и не доступны включая создателю.

• Шифрование: Все сведения сберегаются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних разработчиков не обладают прямого доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Необходимо подчеркнуть существенную особенность: если кто-либо получит физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют меры безопасности от „слепого” разблокирования — в частности, заставляют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды определения лиц на изображениях?

Сегодня можно различить 3 главных способа к осуществлению этой задачи:

Софтверное 2D распознавание

Эксплуатируется только лицевая видеокамера без дополнительных сенсоров глубины. Подобный подход используется обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота реализации; минимальная цена; оперативная работа при достаточном свете.
Минусы: просто ввести в заблуждение снимком; неустойчивая функционирование ночью; слабая защищенность.

Аппаратное 3D оцифровка

Применяет инфракрасную камеру + проектор пикселей + сенсоры глубины (Face ID от Apple; подобные решения у Huawei Mate).
Плюсы: большая надежность; нельзя подделать изображение/видеозапись; устойчивая функционирование в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана („чёлка”)

Гибридные подходы с дополнением ИИ

Используют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам („anti-spoofing”). Например, подобные продукты, как вулкан россии и Google Pixel Face Unlock последних поколений, комбинируют фронтальную камеру c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Иллюстрации использования разнообразных техник

• iPhone линейки X/11/12/13/14 задействуют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 поддерживают как софтверное 2D идентификацию по изображению фронтальной камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro применяет комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Проблемы безопасности и неверные тревоги

Несмотря на замечательный прогресс инноваций за прошедшие лет, безупречных систем пока не наблюдается:

1. Шанс подвоха: Доступные телефоны легко „разблокируются” качественной снимком хозяина или роликом с экрана другого устройства.
2. Идентичные близнецы: Даже самые идеальные механизмы могут перепутать между монозиготными близнецами либо родичами с очень аналогичной внешностью.
3. Метаморфозы внешнего вида: Внезапное утрата веса/увеличение массы тела, пластические операции либо травмы в некоторых случаях необходимы для перерегистрации биометрических данных.
4. Условия записи: Интенсивная подсветка солнцем либо глубокая затенение могут снизить верность определения признаков.

Здесь пара рекомендаций по надёжному использованию:

• Для значимых операций всегда применяйте двухфакторную аутентификацию;
• Не запускайте функцию „Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Регулярно обновляйте прошивку телефона для предотвращения угроз от актуальных атак;
• Включайте настройку „Требовать открытых глаз” в тех местах, где она доступна.

Где также используется технология кроме смартфонов?

Пускай основная мысль этой работы сосредоточена на в частности мобильным устройствам, стоит упомянуть о других сферах применения технологии:

• Управление прохода в рабочих помещениях и жилых домах;
• Платёжные терминалы банков („Face Pay”);
• Электронные идентификационные документы последнего типа;
• Установки видеоконтроля городских подразделений;
• Автоматизирование отслеживания явки школ/вузов;
• Авторизация юзеров персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по лицу („Face Pay”) — достаточно пройти через турникет без карты или телефона! Схожие проекты развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Как меняется технический процесс в наше время?

Каждый годочек возникают свежие концепции для улучшения качества деятельности систем идентификации лиц:

1. Увеличивается разрешение датчиков — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше риск ошибки;
2. Совершенствуются нейронные сети — передовые конструкции модели MobileNetV3 дают возможность скоростно обучаться дополнительным особенностям вида владельца непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Улучшаются технологии антиспуфинга — теперь мобильные устройства могут различать реальные движущиеся лица от неподвижных снимков/масок по мельчайшим движениям кожи.
4. Взаимодействие со интеллектуальными приборами — смарт-часы могут автоматически блокировать смартфон, если владелец отошёл далеко.
5. Появляются гибридные устройства — например объединяющие речевую опознание + лицо + пальцевой отпечаток.

Итак, какие тенденции в особенности востребованы в данный момент:

1) Миниатюризация деталей

Производители стараются уменьшить размер выреза („чёлки”) под датчики на экране за счёт внедрения компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для улучшения личной безопасности всё более вычислений происходит на месте без передачи данных во дополнительный облачный услугу.

3) Стандартизация стандартов

Google активно пропагандирует норму BiometricPrompt API, для того чтобы такие платформы, как вулкан россия, и все Android-аппы были совместимы с любыми видами биометрии стандартизированно.

Какое выбрать сегодня?

Если тебе нужна максимальная сохранность информации, подбирайте топовые устройства с вмонтированным ИК-проектором или же ToF-сенсором глубины.

• iPhone каждого последних версий
• Huawei Partner/P серии
• Mix Expert
• Vivo X серии
• Oppo Обнаружить Х серии.

Если бюджет ограничен – лучше предпочесть традиционным методам защиты (PIN-код/сканер отпечатка), а функцию „разблокировка по лицу”, такую как в вулкан россия, задействовать только как опциональную опцию удобства.

Каким способом улучшить практичность функционирования возможности?

Есть пара советов для людей, кто уже применяет функцию распознавания лица:

1. Периодически обновляйте свою фотографию-шаблон, если сильно изменяется внешний вид.
2. Не упускайте из виду протирать линзу передней камеры – загрязнения могут понизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам включает фотоаппарат если вы берёте его в руки.
4. Во время регистрации постарайтесь держать голову неподвижно перед видеоустройства исключая значительного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от экрана.

Возможности развития инноваций

В ближайшие годы можно предполагать развития полностью бесконтактных способов идентификации человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + манера ходьбы + движения рук!

Также предполагается появление свежих методов защиты конфиденциальности – например, изменяющееся корректировка цифрового шаблона после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из самых захватывающих технологий нашего периода! Она обеспечивает интеракцию со мобильным устройством комфортнее чем до этого, и такие приложения, как vulkan russia, могут в разы улучшить ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы осведомлены, как функционирует эта методика изнутри, – сумеете осознаннее подбирать свой будущий девайс!