Как работает распознавание лиц в телефонах

Для чего мы выбираем разблокирование по лицу

В недавние годы распознавание лиц превратилось в одной из самых распространённых опций для открытия мобильных телефонов. Еще пару годков ранее основная часть юзеров довольствовались пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением таких технологий, например Вулкан 24, нам достаточно просто взглянуть на экран — и устройство тут же опознает своего владельца.

Что делает эту конкретную особенность настолько популярной? Прежде всего, это удобно: не нужно запоминать трудные пароли или искать верный палец в тьме. Во-вторых, это оперативно: современные алгоритмы распознают лицо практически за доли секунды. В-третьем пункте, это ощущение футуризма — словно в кинолентах про вулкан 24 разведчиков.

Однако за такой кажущейся легкостью скрывается целый универсум комплексных методов и инженерных концепций. Попробуем исследовать, как именно действует идентификация по лицу в актуальных гаджетах, какие применяются технологии, насколько они безопасны и что нас ждёт впереди.

Сжатая повествование развития инноваций

Распознавание лиц как техника существует уже более 50 годов. Первые эксперименты автоматизированного изучения лица были осуществлены еще в 1960-х годы в исследовательских центрах США. Тогда ЭВМ способны были лишь выделять контуры головы и измерять дистанции между зрачками и ртом на монохромных снимках.

Первые коммерческие установки стали доступны в девяностых годах, но они были неидеальны: действовали неспешно и часто ошибались. Только с эволюцией искусственных сетей и таких платформ, как Вулкан 24 Казино, высокопроизводительных мобильных чипов распознавание лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным сканированием лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали интегрировать свои решения.

Ключевые этапы функционирования устройства идентификации

Процесс идентификации лица можно ориентировочно разделить на несколько важных этапов:

1. Идентификация лиц — камера распознает существование человеческого лица в изображении.
2. Определение особенностей — система анализирует особенности физиономии: конфигурацию зрительных органов, обонятельного органа, губ, положение бровей.
3. Построение шаблона — создаётся уникальный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с стандартом — сформированный модель сверяется с записанной при внесении биометрической данными владельца.
5. Принятие выбора — если сходство достаточно значительное, смартфон деблокируется.

Любой из указанных этапов требует специальных процедур и усовершенствований для оперативной работы непосредственно на девайсе.

Аппаратные компоненты: что находится внутри них

Типичная передняя камера.

Простейший несложный способ определения лица задействует только лицевую камеру смартфона. Данный подход реализован во многочисленных недорогих вариантах Android-устройств.

Достоинства:

• Не требует внешних сенсоров.
• Быстро функционирует при хорошем освещении.

Слабые стороны:

• Просто ввести в заблуждение снимком или роликом.
• Плохо функционирует при слабом освещении или нестандартных точках зрения.

Инфракрасная фотокамера и пунктирный проекционный аппарат

Более совершенные системы, такие как Вулкан 24 Казино, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология составляет базу Face ID от Apple.

Каким способом это функционирует:

• Точечный проектор показывает на лицо использующего невидимую структуру из тысяч инфракрасных точек (например, Face ID задействует около 30 000 меток).
• Инфракрасная камера регистрирует изменение формы этой сетки по плоскости лица.
• Формируется 3D карта глубины глубинности, которая практически неосуществима для подделки типичной фотографией или маскировкой.

Плюсы

• Надёжная работа даже в полной темноте.
• Большая сопротивляемость к имитациям.
• Точность идентификации выше 99%.

Дополнительные сенсоры

В некоторых устройствах задействуются также экстра сенсорные устройства: ToF (Time-of-Flight), которые измеряют период прохождения света до цели и обратно; Цветные-датчики глубины; специальные световые лидары для создания более аккуратной 3D-модели физиономии.

Эти инновации встречаются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: синтетический интеллект в работе

Нынешние системы опознания лиц немыслимы в отсутствие применения искусственного интеллекта и machine learning. Именно благодаря таким технологиям, как Вулкан 24 Казино, устройство может распознавать владельца даже при трансформациях облика: новая причёска, борода, оптика или макияж не становятся барьером для разблокировки.

Детектирование лиц

При первом этапе алгоритм обязана мгновенно распознать ликовое изображение внутри всего изображения с камеры. Для данной цели используются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: метод MTCNN может обнаруживать облик даже при неполном перекрытии (например, платком или рукой).

Идентификация важных аспектов

После обнаружения лица механизм, такая как Вулкан 24 Казино, устанавливает местоположение основных точек: уголки глаз, верхушка носа, контуры губ и так далее. Часто применяется от 68 до 128 главных маркеров на лице.

Это необходимо для нормализации картинки: если человек находится с телефон под углом, или склонил голову, программа “выпрямляет” картинку до обычного угла для последующего изучения.

Построение биометрии модели

Далее нейросеть строит сжатое цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 чисел с плавающей запятой.

Данный формат очень затруднительно имитировать: он не сохраняет непосредственно картинку юзера, а лишь уникальные характеристики его внешности, что делает его оптимальным для таких площадок, как Vulkan24.

Сопоставление и осуществление заключения

Когда юзер намеревается разлочить смартфон взором, система осуществляет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный границу (обычно выше 99%), телефон, как и платформа Vulkan24, открывается; если нет — доступ блокируется.

Приспособление к метаморфозам внешности

Занимательная характеристика нынешних систем — способность самообучения. Если ты постоянно доступаете к смартфон с свежей прической или оптикой, система постепенно обновляет основной шаблон вашего лица для увеличения точности действия без ухудшения безопасности.

Безопасность биометрических данных данных.

Множество клиенты боятся держать свои биометрические данные на телефоне из-за угрозы утечки данных или взлома устройства. Определенные организации, вроде Vulkan24, предоставляют методы для увеличения безопасности данных клиентов.

• Локальное сбережение: Большинство аппаратов сохраняет биометрические модели лишь внутри защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают устройство и недоступны в том числе изготовителю.

• Шифрование: Все сведения сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Приложения внешних девелоперов не имеют непосредственного возможности доступа к биометрическим; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Необходимо упомянуть важную деталь: в случае, если кто-то достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители осуществляют меры безопасности от автоматического разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают виды идентификации лиц на изображениях?

Сегодня можно выделить различить 3 главных способа к реализации этой операции:

Программируемое 2D определение

Применяется только фронтальная камера без экстра детекторов дистанции. Подобный метод используется обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость осуществления; минимальная цена; быстрая функционирование при хорошем свете.
Минусы: просто одурачить фотографией; неустойчивая деятельность ночью; низкая охрана.

Аппаратное 3D оцифровка

Применяет инфракрасную камеру + проекционный модуль пикселей + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Плюсы: высокая достоверность; невозможно исказить фото/видео; постоянная работа в любых условиях освещения.
Минусы: удорожание устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные способы с ИИ-дополнением

Используют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например Вулкан 24 Казино и Google Pixel Face Unlock новейших поколений, объединяют фронтальную камеру c ИК датчиком мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации использования разных методов

• iPhone серии X/11/12/13/14 применяют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз внедрил подобие Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как программное обеспечение 2D идентификацию по изображению селфи-камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности охраны и ошибочные тревоги

Несмотря на впечатляющий прогресс инноваций за недавние лет, совершенных системы пока не имеется:

1. Вероятность обмана: Бюджетные телефоны просто “разблокируются” высококачественной снимком владельца либо видеозаписью с экрана другого устройства.
2. Идентичные близняшки: Даже самые идеальные системы могут перепутать между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Метаморфозы внешности: Внезапное снижение веса/увеличение массы тела, хирургические вмешательства либо травмы в некоторых случаях необходимы для перерегистрации биометрических данных.
4. Условия съёмки: Сильная подсветка солнцем либо глубокая затенение могут снизить точность идентификации признаков.

Вот некоторые рекомендаций для защищённому эксплуатации:

• Для важных операций всегда используйте двухфакторную аутентификацию;
• Не запускайте возможность “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
• Систематически обновляйте прошивку прошивку телефона для предотвращения угроз от актуальных атак;
• Включайте настройку “Требовать распахнутых глаз” везде, где она есть.

Где также используется технология кроме мобильных телефонов?

Хотя основная мысль нашей публикации сосредоточена на именно мобильным устройствам, следует отметить альтернативных областях использования технологии:

• Мониторинг доступа в деловых центрах и резиденциях;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Электронные паспорта последнего типа;
• Комплексы видеоконтроля городских сервисов;
• Автоматизация отслеживания посещаемости учебных заведений/институтов;
• Аутентификация пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже проверяется система оплаты проезда по лицу (“Face Pay”) — достаточно пройти через турникет без пластика или мобильника! Похожие программы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом трансформируется технология сегодня?

Каждый годочек проявляются новые концепции для усовершенствования уровня работы систем идентификации лиц:

1. Увеличивается разрешение сенсоров — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность неточности;
2. Совершенствуются искусственные интеллекты — передовые конструкции типа MobileNetV3 позволяют оперативно обучаться дополнительным характеристикам облика владельца напрямую на гаджете без пересылки информации в облачное хранилище.
3. Совершенствуются способы антиспуфинга — теперь смартфоны способны отличать подлинные анимированные лица от статичных снимков/маскировок по микроскопическим микродвижениям.
4. Взаимодействие со интеллектуальными приборами — умные часы могут авто заблокировать мобильный телефон, если обладатель отошёл далеко.
5. Появляются смешанные устройства — в частности совмещающие голосовую идентификацию + физиономию + дактилоскопический след.

Здесь, те тренды в особенности популярны сейчас:

1) Миниатюризация элементов

Изготовители пытаются уменьшить размер выреза (“чёлки”) под сенсоры на экране за счёт интеграции миниатюрных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для улучшения личной безопасности всё больше обработки данных происходит на месте без отправки информации во внешний облачный услугу.

3) Стандартизация стандартов

Гугл интенсивно продвигает стандарт BiometricPrompt API, для того чтобы аналогичные платформы, как Вулкан 24, и каждые Android-приложения могли работать с всеми формами биометрии единообразно.

Что подобрать сегодня?

Если вам всем необходима наивысшая защита данных, остановите выбор на передовые устройства со встроенным ИК-проектором либо ToF-сенсором глубины.

• iPhone всех актуальных версий
• Huawei Companion/Series P ряда
• Xiaomi Professional
• Vivo X модели
• Oppo Найти X линейки.

Если средства невелик – лучше выбирать обычным методам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан 24, применять только как дополнительную опцию удобства.

Как увеличить практичность работы опции?

Есть некоторые лайфхаков для пользователей, кто уже применяет разблокировку по лицу:

1. Регулярно меняйте свою фото-шаблон, если значительно изменяется облик.
2. Не забывайте очищать линзу фронтальной камеры – разводы могут снизить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам активирует фотоаппарат как только вы поднимаете его.
4. При регистрационного процесса пытайтесь удерживать голову ровно впереди объектива не допуская значительного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от дисплея.

Перспективы прогресса техники

В скоро наступающие периоды можно предполагать развития полностью безконтактных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + манера ходьбы + движения рук!

Также возможно развитие новых методов защиты конфиденциальности – скажем, динамическое корректировка цифрового шаблона после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – единственная из самых увлекательных технологий нашего эпохи! Она предоставляет взаимодействие со телефоном проще чем когда-либо прежде, и такие приложения, как Vulkan24, могут значительно улучшить ваш опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как устроена эта методика изнутри, – сможете вдумчиво определять свой будущий устройство!