Каким образом работает распознавание лиц в смартфонах

Зачем мы выбираем разлочивание по фейсу

В прошлые годы определение физиономий является одной из самых распространённых возможностей для деблокировки умных телефонов. Всего некоторые годов назад основная часть юзеров довольствовались PIN-кодами, паролями или сканерами отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект превращает данную возможность настолько популярной? Прежде всего, это удобно: не нужно помнить трудные пароли или отыскивать верный палец в мраке. Во-вторых, это мгновенно: современные системы идентифицируют лицо практически за мгновения ока. В-третьих, это чувство будущего — будто в кинолентах про вулкан россия разведчиков.

Тем не менее за такой на первый взгляд простотой прячется целый универсум трудных технологий и инженерных решений. Давайте разобраться, как именно действует фейсканирование в актуальных гаджетах, какие бывают методы, насколько они надёжны и что нас ожидает в будущем.

Краткая история прогресса техники

Распознавание лиц как техника имеется уже более пятидесяти лет. Изначальные пробы автоматического исследования лица были предприняты еще в 1960-х годах в исследовательских центрах США. Тогда вычислительные машины способны были лишь определять силуэты лица и определять дистанции между очами и губами на ахроматических изображениях.

Изначальные коммерческие платформы стали доступны в девяностых годах, но они были далеки от совершенства: работали медленно и нередко ошибались. Только с эволюцией нейронных сетей и таких площадок, как вулкан россии, сильных мобильных микросхем определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным сканированием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять свои разработки.

Основные стадии функционирования системы определения

Процесс распознавания лица можно примерно поделить на несколько ключевых этапов:

Распознавание лица — аппарат распознает наличие гуманного образа в снимке.
Извлечение характеристик — система анализирует черты физиономии: форму зрительных органов, обонятельного органа, губ, расположение бровей.
Построение структуры — создаётся неповторимый электронный отпечаток (faceprint) на основе выделенных признаков.
Сравнение со эталоном — полученный модель сравнивается со сохранённой при регистрации биометрической данными владельца.
Принятие решения — если совпадение достаточно значительное, смартфон деблокируется.

Каждый из указанных стадий нуждается в особых процедур и оптимизаций для быстрой работы прямо на устройстве.

Железные компоненты: что скрыто в их недрах

Стандартная фронтальная камера.

Самый простой вариант распознавания физиономии задействует лишь фронтальную камеру смартфона мобильного устройства. Данный способ реализован во многочисленных доступных версиях Android-устройств.

Сильные стороны:

Не нуждается в потребляет дополнительные датчиков.
Шустро действует при хорошем свете.

Недостатки:

Несложно ввести в заблуждение снимком или роликом.
Неправильно действует при слабом свете или непривычных точках зрения.

Инфракрасная камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика лежит в основе Face ID от Apple.

Как это действует:

Точечный проекционный прибор показывает на облик пользователя невидимую сетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 точек).
ИК устройство регистрирует искривление этой сетки по поверхности лица.
Создаётся 3D карта глубинности, которая почти неподвластна для подделки стандартной фото или маской.

Выигрыши

Надёжная функционирование даже в полной неосвещённости.
Большая сопротивляемость к подделкам.
Точность идентификации свыше 99%.

Дополнительные датчики

В некоторых девайсах применяются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют время прохождения света до объекта и обратно; Трехцветные-датчики дальности; специальные оптические измерители расстояния для формирования более аккуратной 3D-модели лица.

Эти технологии встречаются наиболее часто во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искуственный ум в исполнении

Текущие устройства опознания лиц невозможны в отсутствие эксплуатации ИИ и машинного обучения. Именно из-за таким технологиям, как вулкан россии, устройство способно узнавать владельца даже при трансформациях облика: новая причёска, щетина, очки или грим не становятся препятствием для открытия.

Распознавание физиономии

При первом шаге система обязана быстро распознать образ лица среди всего снимка камеры. Для этой задачи задействуются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены идентифицировать лиц человека среди множества других объектов.

Пример: метод MTCNN может обнаруживать облик даже в случае неполном перекрытии (например, шарфом или ладонью).

Определение важных аспектов

После обнаружения лица система, такая как вулкан россии, определяет расположение ключевых точек: края глаз, кончик носа, границы губ и так далее. Как правило применяется от 68 до 128 ключевых точек на лицевой области.

Это требуется для выравнивания визуала: если юзер удерживает мобильник под наклоненным, или наклонил голову, программа исправляет изображение до стандартного положения для дальнейшего анализа.

Построение биометрического идентификатора образца

Далее нейросеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Такой шаблон крайне сложно имитировать: он не сохраняет само фото пользователя, а лишь уникальные черты его облика, что делает его идеальным для таких площадок, как vulkan russia.

Сравнение и осуществление выбора

В случае, когда юзер хочет разлочить смартфон взором, система воспроизводит все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Приспособление к метаморфозам внешнего вида

Интересная особенность нынешних системы — способность самостоятельного обучения. Если вы постоянно разблокируете мобильное устройство с свежей прической или оптикой, алгоритм постепенно модернизирует базовый шаблон вашего лица для улучшения точности функционирования без снижения уровня безопасности.

Охрана биометрических данных данных.

Многие юзеры опасаются сохранять свои биометрические идентификационные данные на мобильном устройстве из-за угрозы потери данных или взлома гаджета. Определенные компании, вроде vulkan russia, предлагают методы для увеличения защиты данных юзеров.

Локальное хранение: Большинство устройств записывает биометрические образцы лишь в пределах защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не покидают аппарат и не доступны включая создателю.
Шифрование: Все данные сберегаются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция приложений: Программы сторонних девелоперов не обладают прямого доступа к биометрическим; они могут лишь требовать подтверждение верификации идентичности через системный API.

Необходимо упомянуть значимую подробность: если кто-либо достанет физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители внедряют систему защиты от автоматического разблокирования — к примеру, просят открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются типы идентификации лиц?

В настоящее время можно различить 3 основных способа к выполнению этой операции:

Программируемое двухмерное определение

Применяется только передняя видеокамера без экстра детекторов дистанции. Подобный подход встречается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота реализации; умеренная стоимость; оперативная деятельность при хорошем освещении.
Минусы: просто одурачить снимком; неустойчивая деятельность ночью; низкая защищенность.

Техническое 3D сканирование

Применяет ИК видеокамеру + проектор точек + сенсоры дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: большая надёжность; нельзя подделать изображение/видеозапись; постоянная работа при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с интеграцией ИИ

Используют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например вулкан россии и Google Pixel Face Unlock новейших версий, объединяют фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Примеры применения разнообразных техник

iPhone линейки X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition в первый раз предложил эквивалент Face ID в числе Android.
Samsung Galaxy S10/S20 обеспечивают как программное 2D идентификацию по фото фронталкой, так и сенсор глазного ириса.
Huawei Mate20 Pro использует комплекс из ИК-инфракрасного света + Dot Projector + ToF-датчик

Трудности защиты и ложные срабатывания

Несмотря на впечатляющий развитие техники за недавние лет, идеальных систем пока не наблюдается:

Шанс обмана: Недорогие мобильники без труда “разблокируются” качественной фотографией хозяина или видео с дисплея иного гаджета.
Идентичные близняшки: Даже самые совершенные системы могут перепутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
Изменения облика: Резкое похудение/набор веса, косметические процедуры либо повреждения в некоторых случаях необходимы для повторной регистрации биометрических данных.
Условия съёмки: Яркая освещённость солнцем или же глубокая затенение могут понизить аккуратность определения признаков.

Вот несколько подсказок по защищённому использованию:

Для важных операций всегда используйте дополнительную аутентификацию;
Не включайте опцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
Регулярно обновляйте программное обеспечение смартфона для предотвращения угроз от актуальных атак;
Включайте функцию “Требовать открытых глаз” в тех местах, где она имеется.

В каких местах дополнительно используется технологии кроме мобильных телефонов?

Хотя тема нашей статьи касается именно портативным гаджетам, следует отметить прочих направлениях внедрения технологии:

Управление доступа в деловых центрах и жилых домах;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Электронные паспорта последнего типа;
Установки видеомониторинга городских подразделений;
Автоматизирование отслеживания посещаемости школ/вузов;
Вход пользователей персональных компьютеров/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — хватит пройти через барьер без пластика или телефона! Похожие программы развиваются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как меняется технический процесс в нынешнее время?

Всякий годик проявляются новые концепции для улучшения стандарта работы систем лицевого распознавания:

Увеличивается детализация датчиков — чем больше информации фиксируется камерой/глубинными сенсорами, тем меньше шанс неточности;
Улучшаются нейронные сети — современные архитектуры модели MobileNetV3 позволяют быстро адаптироваться к свежим характеристикам внешности пользователя напрямую на гаджете без пересылки информации в облачное хранилище.
Совершенствуются способы антиспуфинга — теперь смартфоны могут распознавать реальные анимированные лица от неподвижных фотографий/маскировок по мельчайшим движениям кожи.
Интеграция со интеллектуальными приборами — интеллектуальные часы могут автоматически блокировать смартфон, если пользователь отошёл далеко.
Проявляются смешанные системы — к примеру объединяющие речевую опознание + физиономию + пальцевой отпечаток.

Здесь, которые направления очень актуальны на сегодняшний день:

1) Сокращение компонентов

Производители намереваются сократить габариты выреза (“чёлки”) под сенсоры на экране за счёт встраивания компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на аппарате

Для увеличения приватности всё более расчётов происходит внутри устройства без передачи данных во дополнительный облачный услугу.

3) Унификация стандартов

Гугл активно продвигает стандарт BiometricPrompt API, с целью чтобы подобные платформы, например как вулкан россия, и каждые Android-приложения могли взаимодействовать с различными типами биометрии единообразно.

Что решить на сегодня?

Когда вам всем необходима максимальная безопасность данных, выбирайте передовые аппараты со встроенным ИК-излучателем либо ToF-сенсором глубины.

iPhone каждого актуальных версий
Huawei Mate/Series P ряда
Xiaomi Pro
Vivo X линейки
Оппо Найти Икс серии.

Если средства скромен – лучше выбирать классическим методам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, применять только как второстепенную опцию комфорта.

Как увеличить практичность работы опции?

Есть несколько лайфхаков для людей, кто уже применяет функцию распознавания лица:

Регулярно обновляйте свою фотографию-шаблон, если значительно трансформируется внешний вид.
Не пренебрегайте чистить объектив передней камеры – загрязнения могут уменьшить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате телефон сам включает камеру как только вы поднимаете его.
При регистрации пытайтесь удерживать лицевую часть прямо перед объектива не допуская резкого наклона головы.
Используйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвернулись от дисплея.

Перспективы развития технологии

В ближайшие времена можно ожидать возникновения полностью безконтактных способов идентификации персоны сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + манера ходьбы + движения рук!

Также вероятно развитие современных способов защиты конфиденциальности – например, переменное корректировка электронного образца после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее интересных техник нашего эпохи! Она делает интеракцию со телефоном удобнее чем когда-либо прежде, и такие приложения, как vulkan russia, могут существенно оптимизировать ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как функционирует эта методика изнутри, – сможете осознаннее подбирать свой будущий гаджет!