Каким образом действует распознавание лиц в телефонах

Для чего мы предпочитаем разблокировку по фейсу

В прошлые времена идентификация лиц является одной из наиболее востребованных опций для деблокировки умных телефонов. Еще некоторые лет назад большинство использующих удовлетворялись PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, например Вулкан Платинум, нам достаточно просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Что обуславливает эту особенность настолько популярной? Для начала, это практично: не нужно помнить сложные пароли или отыскивать нужный палец в темноте. Также, это оперативно: современные программы узнают лицо фактически за мгновения ока. В-третью очередь, это впечатление будущего — как будто в кинофильмах про вулкан платинум разведчиков.

Тем не менее за такой на первый взгляд простотой прячется целый вселенная комплексных технологий и инженерных решений. Позвольте нам понять, как конкретно функционирует фейсканирование в новейших гаджетах, какие бывают методы, насколько они надёжны и что нас ждёт впереди.

Сжатая хроника развития инноваций

Распознавание лиц как методика существует уже более 50 лет. Изначальные эксперименты автоматического изучения лиц были предприняты еще в 1960-х годы в научных учреждениях США. Тогда ЭВМ могли лишь определять силуэты головы и определять расстояния между очами и устами на ахроматических снимках.

Первые коммерческие платформы появились в девяностых годах, но они были несовершенны: функционировали медленно и часто давали сбои. Только с прогрессом нейронных сетей и таких платформ, как Vulkan Platinum, мощных мобильных процессоров распознавание лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать свои разработки.

Главные этапы действия механизма определения

Процесс распознавания лица можно ориентировочно сегментировать на несколько основных этапов:

1. Обнаружение лица — устройство выявляет существование людского образа в кадре.
2. Определение особенностей — алгоритм исследует особенности облика: форму зрительных органов, обонятельного органа, губ, позицию надбровных дуг.
3. Построение модели — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со эталоном — сформированный модель сверяется со записанной при учёте биометрической данными владельца.
5. Принятие определения — если соответствие достаточно высокое, смартфон открывается.

Всякий из этих этапов запрашивает индивидуальных методов и усовершенствований для скорой работы непосредственно на девайсе.

Железные составляющие: что прячется в их недрах

Типичная селфи камера.

Наиболее простой способ распознавания облика использует лишь фронтальную камеру смартфона. Такой подход осуществлён во многих доступных вариантах Android-девайсов.

Сильные стороны:

• Не нуждается в нуждается в дополнительные сенсоров.
• Быстро действует при достаточном освещённости.

Отрицательные стороны:

• Просто обмануть изображением или роликом.
• Неудачно функционирует при слабом освещении или необычных ракурсах.

ИК фотокамера и пунктирный проекционный аппарат

Более совершенные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика составляет базу Face ID от Apple.

Каким образом это работает:

• Точечный проектор показывает на лицо пользователя невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 пятен).
• Инфракрасная камера записывает деформацию данной сетки по поверхности лица.
• Получается 3D глубинная карта глубинности, которая почти неосуществима для имитации типичной фото или маскировкой.

Преимущества

• Надёжная функционирование даже в полной неосвещённости.
• Большая сопротивляемость к имитациям.
• Точность распознавания более 99%.

Дополнительные сенсорные устройства

В отдельных девайсах применяются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время движения луча до цели и обратно; Цветные-датчики дальности; специальные световые измерители расстояния для построения более детализированной 3D-модели физиономии.

Эти технологии применяются чаще всего во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный разум на работе

Нынешние механизмы опознания лиц немыслимы при отсутствии использования ИИ и машинного обучения. Именно благодаря таким технологиям, как Vulkan Platinum, устройство в состоянии идентифицировать пользователя даже при метаморфозах внешнего вида: новая причёска, растительность на лице, очки или грим не становятся помехой для деблокировки.

Детектирование лиц

При начальном этапе система необходимо оперативно найти ликовое изображение среди полного кадра камеры. Для этого применяются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые подготовлены идентифицировать лица людей среди множества других объектов.

Пример: метод MTCNN способен находить физиономию даже с частичном закрытии (например, шарфом или рукой).

Выделение ключевых точек

После распознавания лица механизм, такая как Vulkan Platinum, вычисляет положение основных точек: кончики глаз, верхушка носа, контуры губ и так далее. Как правило применяется от 68 до 128 главных меток на лицевой поверхности.

Это нужно для выравнивания изображения: если пользователь находится с телефон под углом, или повернул голову, программа исправляет картинку до обычного угла для дальнейшего анализа.

Формирование биометрического шаблона

Далее искусственная сеть строит уплотненное цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Данный образец очень трудно сфальсифицировать: он не хранит само фото юзера, а лишь особенные характеристики его внешности, что делает его оптимальным для таких платформ, как Вулкан Казино Платинум.

Сравнение и принятие заключения

Если юзер желает разлочить смартфон глазами, система осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ запрещается.

Привыкание к метаморфозам внешнего вида

Интересная характеристика современных систем — способность самостоятельного обучения. Если вы регулярно доступаете к мобильное устройство с новой укладкой или очками, программа постепенно модернизирует эталонный образец вашего лица для увеличения точности действия без снижения уровня безопасности.

Защита биометрии информации.

Множество клиенты опасаются держать свои биометрические данные на мобильном устройстве из-за риска утечки данных или хакерской атаки. Некоторые организации, вроде Вулкан Казино Платинум, предлагают методы для повышения безопасности данных пользователей.

• Локальное хранение: Преимущественно девайсов сохраняет био-идентификационные образцы лишь в пределах безопасного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют аппарат и закрыты в том числе создателю.

• Шифрование: Все данные сберегаются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих девелоперов не имеют прямого возможности доступа к биометрическим; они могут лишь требовать подтверждение верификации идентичности через системный API.

Стоит упомянуть существенную подробность: если кто-то получит доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют систему защиты от неосознанного разблокирования — к примеру, требуют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории идентификации лиц?

В настоящее время можно различить три основных подхода к осуществлению этой функции:

Софтверное двухмерное идентификация

Эксплуатируется только лицевая видеокамера без экстра датчиков дистанции. Такой подход используется наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность реализации; минимальная затраты; скоростная работа при качественном свете.
Минусы: легко одурачить снимком; ненадежная работа ночью; слабая защищенность.

Аппаратное трёхмерное сканирование

Применяет ИК видеокамеру + проектор точек + датчики глубины (Face ID от Apple; подобные решения у Huawei Mate).
Плюсы: большая надежность; нельзя обмануть фото/видео; стабильная деятельность в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с ИИ-дополнением

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как Vulkan Platinum и Google Pixel Face Unlock современных версий, комбинируют фронталку c ИК датчиком движения Soli Radar для предотвращения от подделок руками/масками/видеоэкранами чужих устройств.

Иллюстрации использования разнообразных методов

• iPhone серии X/11/12/13/14 применяют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition впервые представил подобие Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 поддерживают как софтверное плоское идентификацию по снимку фронтальной камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro применяет систему из ИК-освещения + Dot Projector + ToF-датчик

Трудности безопасности и ложные сигналы

Несмотря на впечатляющий успехи инноваций за последние годы, безупречных механизмов пока не имеется:

1. Вероятность мошенничества: Недорогие телефоны без труда открываются качественной фотографией владельца или же видеозаписью с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые безупречные механизмы могут перепутать между монозиготными близнецами либо родичами с очень аналогичной внешностью.
3. Метаморфозы облика: Резкое снижение веса/увеличение массы тела, косметические процедуры либо травмы порой требуют обновления данных биометрии.
4. Условия съёмки: Яркая подсветка солнцем либо глубокая тень могут уменьшить верность распознавания признаков.

Здесь некоторые советов для надёжному эксплуатации:

• Для критически важных операций всегда применяйте дополнительную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
• Систематически апгрейдите прошивку смартфона для защиты от новых видов атак;
• Включайте настройку “Требовать раскрытых глаз” в тех местах, где она есть.

В каких местах также применяется технологии за исключением мобильных телефонов?

Несмотря на то, что предмет этой работы касается в частности смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

• Мониторинг входа в деловых центрах и многоквартирных зданиях;
• Платёжные терминалы банков (“Face Pay”);
• Виртуальные удостоверения личности последнего поколения;
• Установки видеомониторинга городских служб;
• Автоматизирование регистрации явки школ/университетов;
• Аутентификация участников компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Схожие инициативы осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом трансформируется технология сегодня?

Любой год проявляются новые мысли для усовершенствования качества функционирования систем распознавания лиц:

1. Увеличивается детализация сенсорных устройств — чем больше элементов фиксируется камерой/датчиками глубины, тем меньше риск погрешности;
2. Улучшаются нейронные сети — современные структуры модели MobileNetV3 позволяют скоростно осваивать свежим характеристикам вида владельца напрямую на гаджете без отправки данных в облако.
3. Совершенствуются способы антиспуфинга — теперь мобильные устройства способны распознавать подлинные движущиеся лица от фиксированных фото/масок по мельчайшим микродвижениям.
4. Интеграция со умными устройствами — интеллектуальные часы могут автоматически закрыть доступ к смартфон, если владелец ушёл далеко.
5. Появляются гибридные устройства — например комбинирующие голосовую аутентификацию + лицо + пальцевой отпечаток.

Итак, какие тенденции в особенности актуальны на сегодняшний день:

1) Уменьшение деталей

Изготовители стараются минимизировать величину отверстия (“чёлки”) под сенсоры на дисплее за счёт интеграции миниатюрных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения конфиденциальности всё более расчётов выполняется внутри устройства без передачи данных во дополнительный облачный услугу.

3) Унификация норм

Google энергично пропагандирует стандарт BiometricPrompt API, для того чтобы аналогичные площадки, как Вулкан Платинум, и все Android-приложения могли работать с любыми видами биометрии единообразно.

Какое решить на сегодня?

В случае если тебе важна предельная безопасность информации, подбирайте передовые аппараты с вмонтированным ИК-проектором или ToF-датчиком глубины.

• iPhone всех существующих последних моделей
• Huawei Partner/Series P серии
• Mi Professional
• Vivo X модели
• Oppo Find X линейки.

Если бюджет невелик – лучше выбирать обычным способам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как дополнительную опцию комфорта.

Как улучшить комфорт работы опции?

Есть несколько хитростей для людей, кто уже использует функцию распознавания лица:

1. Периодически меняйте свою фото-шаблон, если значительно изменяется облик.
2. Не пренебрегайте чистить линзу передней камеры – разводы могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает камеру когда вы берёте его в руки.
4. Во время регистрационного процесса старайтесь держать лицо прямо напротив камеры исключая резкого наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отвели взгляд от дисплея.

Перспективы развития техники

В скоро наступающие времена можно предвкушать возникновения полностью бесконтактных способов опознания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + речь + манера ходьбы + жесты рук!

Также вероятно возникновение современных подходов защиты приватности – к примеру, переменное изменение электронного образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень захватывающих техник нашего времени! Она обеспечивает интеракцию со мобильным устройством комфортнее чем раньше, и такие аппы, как Вулкан Казино Платинум, могут значительно улучшить ваш пользовательский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как устроена эта методика внутри, – сумеете более осмысленно определять свой очередной девайс!