Каким образом работает идентификация лиц в телефонах

Зачем мы выбираем разблокировку по лицевому распознаванию

В последние годы распознавание лиц превратилось в одной из самых популярных опций для разблокировки умных телефонов. Всего некоторые годков тому назад большинство пользователей удовлетворялись пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь превращает данную особенность настолько популярной? Для начала, это комфортно: не нужно удерживать в памяти сложные пароли или отыскивать верный палец в тьме. Также, это быстро: современные алгоритмы идентифицируют лицо практически за мгновения ока. В-третьем пункте, это чувство будущего — как будто в кинолентах про vulkan russia разведчиков.

Тем не менее за данной на первый взгляд простотой скрывается полный универсум трудных техник и инженерных решений. Давайте исследовать, как именно работает распознавание лиц в новейших мобильных телефонах, какие существуют технологии, насколько они защищены и что нас ждёт впереди.

Краткая хроника развития инноваций

Распознавание лиц как технология имеется уже более 50 лет. Начальные попытки автоматического изучения лица были осуществлены еще в 1960-х годы в лабораториях США. Тогда ЭВМ могли лишь выделять силуэты головы и определять дистанции между глазами и ртом на ахроматических фотографиях.

Первые коммерческие установки возникли в 90-х, но они были неидеальны: действовали неспешно и часто давали сбои. Только с развитием синтетических сетей и таких систем, как вулкан россии, высокопроизводительных мобильных процессоров определение лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали внедрять свои разработки.

Ключевые этапы действия системы распознавания

Процесс распознавания лица можно ориентировочно поделить на несколько ключевых этапов:

Идентификация лица — устройство выявляет существование людского лица в изображении.
Извлечение характеристик — алгоритм анализирует особенности физиономии: форму зрительных органов, носа, губ, расположение бровей.
Построение модели — создаётся уникальный виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение с образцом — созданный шаблон сверяется со сохранённой при внесении биометрической данными владельца.
Принятие решения — если совпадение достаточно высокое, смартфон разблокируется.

Всякий из данных шагов нуждается в специальных методов и усовершенствований для оперативной работы прямо на устройстве.

Технические компоненты: что прячется внутри

Стандартная фронтальная камера.

Простейший простой метод распознавания физиономии задействует исключительно переднюю видеокамеру мобильного устройства. Данный способ внедрён во различных бюджетных моделях Android-девайсов.

Достоинства:

Не требует дополнительные датчиков.
Оперативно действует при хорошем освещении.

Слабые стороны:

Просто ввести в заблуждение снимком или роликом.
Неправильно работает при слабом освещённости или необычных углах обзора.

ИК фотокамера и пунктирный проектор

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика лежит в основе Face ID от Apple.

Как это действует:

Точечный проектор проецирует на облик использующего невидимую структуру из тысяч инфракрасных пятен (например, Face ID использует около 30 000 меток).
Инфракрасная камера записывает изменение формы данной решетки по плоскости физиономии.
Получается 3D карта глубины, что почти неподвластна для имитации типичной фотографией или маскировкой.

Преимущества

Надёжная работа даже в полной тьме.
Большая защита к имитациям.
Точность идентификации более 99%.

Добавочные сенсоры

В определённых устройствах используются также дополнительные датчики: ToF (Time-of-Flight), которые определяют время распространения луча до объекта и обратно; Цветные-датчики дальности; специальные оптические измерители расстояния для формирования более аккуратной 3D-модели лица.

Эти инновации используются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический разум в действии

Нынешние устройства идентификации физиономий неосуществимы в отсутствие эксплуатации ИИ и machine learning. Именно из-за таким инновациям, как вулкан россии, аппарат может узнавать юзера даже при трансформациях облика: новая стрижка, борода, линзы или макияж не становятся помехой для деблокировки.

Распознавание физиономии

На начальном шаге программа обязана оперативно обнаружить ликовое изображение среди полного кадра камеры. Для этого используются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены распознавать лиц человека среди множества других объектов.

Пример: метод MTCNN может находить физиономию даже при частичном закрытии (например, шалью или ладонью).

Идентификация основных аспектов

После распознавания лица устройство, такая как вулкан россии, определяет положение ключевых точек: уголки глаз, конец носа, края губ и так далее. Обычно применяется от 68 до 128 главных точек на лицевой области.

Это требуется для нормализации картинки: если пользователь находится с смартфон под наклоненным, или склонил головку, программа исправляет изображение до стандартного положения для последующего изучения.

Формирование биометрии шаблона

Далее нейронная сеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный образец крайне затруднительно подделать: он не хранит непосредственно картинку юзера, а лишь особенные характеристики его внешности, что делает его совершенным для таких площадок, как vulkan russia.

Сопоставление и вынесение заключения

Когда пользователь хочет открыть мобильник глазами, система воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый границу (обычно выше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Привыкание к трансформациям внешнего вида

Интересная черта актуальных систем — возможность самообучения. Если ты часто открываете смартфон с свежей прической или очками, программа постепенно освежает эталонный образец вашего внешности для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрии данных.

Множество пользователи боятся держать свои биометрические идентификационные данные на смартфоне из-за риска утечки информации или взлома гаджета. Определенные организации, такие как vulkan russia, предлагают варианты для увеличения защиты данных пользователей.

Локальное хранение: Большинство устройств записывает биометричные шаблоны исключительно в пределах безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют устройство и не доступны в том числе создателю.
Шифрование: Все информация сберегаются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Приложения внешних девелоперов не имеют прямого доступа к биометрическим; они могут лишь запрашивать факт верификации идентичности через системный API.

Необходимо отметить важную деталь: если кто-то сможет получить доступ к вашему телефону физически (например, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители реализуют систему защиты от “слепого” разблокирования — например, просят открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы определения лиц на изображениях?

На сегодняшний день можно различить три основных способа к осуществлению этой задачи:

Софтверное 2D распознавание

Эксплуатируется только передняя видеокамера без вспомогательных сенсоров дистанции. Этот способ используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота реализации; низкая затраты; оперативная деятельность при достаточном освещении.
Минусы: просто обмануть снимком; ненадежная работа ночью; низкая охрана.

Техническое трёхмерное сканирование

Применяет ИК видеокамеру + проекционный модуль точек + сенсоры дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: значительная достоверность; не получится подделать изображение/видеозапись; постоянная функционирование при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с дополнением ИИ

Задействуют комбинацию программируемых методов + техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например вулкан россии и Google Pixel Face Unlock последних версий, комбинируют фронталку c инфракрасным сенсором мобильности Soli Radar для предотвращения от подделок руками/масками/видеодисплеями посторонних устройств.

Примеры применения различных техник

iPhone серии X/11/12/13/14 используют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition в первый раз внедрил эквивалент Face ID в числе Android.
Samsung Galaxy S10 модель/S20 поддерживают как программное обеспечение 2D определение по снимку фронталкой, так и датчик глазного ириса.
Huawei Mate20 Pro применяет комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Трудности безопасности и ошибочные срабатывания

Несмотря на замечательный успехи техники за недавние лет, совершенных систем пока не существует:

Вероятность мошенничества: Бюджетные смартфоны без труда открываются высококачественной изображением владельца или видео с экрана другого устройства.
Идентичные двойняшки: Даже самые идеальные механизмы могут спутать между монозиготными близнецами либо семьями с очень аналогичной внешностью.
Изменения внешности: Внезапное похудение/набор веса, хирургические вмешательства либо травмы иногда необходимы для перерегистрации биометрических данных.
Условия записи: Яркая засветка солнечным светом либо плотная тень могут понизить верность распознавания признаков.

Здесь некоторые советов для надёжному применению:

Для важных операций всегда применяйте двухэтапную аутентификацию;
Не активируйте возможность “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
Постоянно обновляйте ПО мобильного устройства для предотвращения угроз от новых видов атак;
Включайте настройку “Требовать раскрытых глаз” в тех местах, где она имеется.

В каких областях также используется технологии помимо мобильных телефонов?

Пускай основная мысль нашей работы касается конкретно портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:

Контроль доступа в офисах и жилых домах;
Платёжные терминалы финансовых учреждений (“Face Pay”);
Электронные идентификационные документы последнего поколения;
Системы видеоконтроля муниципальных подразделений;
Автоматизация регистрации посещаемости учебных заведений/университетов;
Аутентификация юзеров ПК/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через барьер без карты или телефона! Аналогичные проекты реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким способом изменяется технический процесс в нынешнее время?

Любой годик возникают свежие концепции для усовершенствования уровня функционирования систем идентификации лиц:

Увеличивается разрешение сенсоров — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс неточности;
Улучшаются искусственные интеллекты — новейшие структуры типа MobileNetV3 дают возможность быстро адаптироваться к свежим особенностям внешности владельца напрямую на гаджете без пересылки информации в облачное хранилище.
Развиваются методы антиспуфинга — теперь телефоны могут отличать реальные движущиеся облики от фиксированных снимков/масок по незаметным микродвижениям.
Интеграция со умными устройствами — смарт-часы могут автоматически блокировать мобильный телефон, если обладатель ушёл далеко.
Появляются смешанные механизмы — например объединяющие речевую идентификацию + облик + дактилоскопический след.

Вот, какие направления особенно популярны на сегодняшний день:

1) Уменьшение деталей

Изготовители пытаются уменьшить габариты прорези (“чёлки”) для сенсоры на экране за счёт встраивания компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для повышения конфиденциальности всё больше расчётов происходит на месте без отправки данных во внешний облачный услугу.

3) Упорядочивание регламентов

Google интенсивно продвигает норму BiometricPrompt API, с целью чтобы такие площадки, вроде вулкан россия, и каждые Android-приложения были совместимы с любыми видами биометрии единообразно.

Что решить сегодня?

Когда тебе необходима максимальная безопасность данных, подбирайте передовые модели с интегрированным ИК-проектором либо ToF-датчиком глубины.

iPhone каждого актуальных моделей
Huawei Companion/P Series серии
Xiaomi Pro
Vivo X модели
Оппо Обнаружить Икс линейки.

Если финансы ограничен – лучше отдавать предпочтение обычным методам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как опциональную опцию удобства.

Как увеличить удобство использования опции?

Есть несколько хитростей для людей, кто уже применяет разблокировку по лицу:

Регулярно обновляйте свою изображение-шаблон, если сильно изменяется внешность.
Не упускайте из виду очищать линзу фронтальной камеры – пятна могут уменьшить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего мобильник сам активирует камеру как только вы берёте его в руки.
В процессе регистрации старайтесь удерживать лицевую часть прямо впереди объектива не допуская значительного наклона головы.
Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвели взгляд от экрана.

Перспективы развития технологии

В скоро наступающие периоды можно предполагать появления полностью дистанционных способов распознавания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + речь + шаги + манипуляции руками!

Также вероятно развитие свежих способов охраны конфиденциальности – например, переменное изменение цифрового образца после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из очень захватывающих техник нашего периода! Она предоставляет взаимодействие со смартфоном комфортнее чем до этого, и такие программы, как vulkan russia, могут в разы улучшить ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как функционирует эта методика внутри, – сможете осознаннее выбирать свой очередной гаджет!