Как функционирует определение лицевых образов в телефонах

Зачем мы предпочитаем разблокирование по лицевому распознаванию

В прошлые времена идентификация физиономий является одной из самых популярных возможностей для открытия смартфонов. Еще несколько лет тому назад основная масса юзеров обходились пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но с появлением таких технологий, например admiral x, нам вполне лишь взглянуть на экран — и устройство тут же опознает своего владельца.

Что делает эту возможность очень нужной? Для начала, это комфортно: не нужно удерживать в памяти замысловатые пароли или отыскивать верный палец в темноте. Кроме того, это оперативно: современные системы узнают лицо фактически за мгновение. В-третью очередь, это чувство футуристичности — будто в кинофильмах про адмирал х казино агентов.

Однако за такой видимой легкостью таится целый вселенная сложных техник и инженерных разработок. Попробуем исследовать, как именно работает распознавание лиц в современных смартфонах, какие существуют технологии, насколько они защищены и что нас ожидает в будущем.

Сжатая повествование развития техники

Распознавание лиц как технология присутствует уже более 50 лет. Начальные эксперименты машинного исследования лиц были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры способны были лишь обозначать силуэты головы и определять расстояния между очами и губами на ахроматических фотографиях.

Первые торговые установки возникли в 90-х, но они были несовершенны: функционировали медленно и нередко ошибались. Только с развитием нейронных сетей и таких платформ, как адмирал х, мощных мобильных чипов идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные решения.

Основные стадии действия механизма определения

Процесс идентификации лица можно ориентировочно разделить на несколько ключевых этапов:

1. Идентификация лиц — устройство выявляет существование гуманного лица в изображении.
2. Извлечение признаков — механизм исследует контуры лица: форму зрительных органов, обонятельного органа, уст, положение бровей.
3. Построение шаблона — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с образцом — созданный образец сопоставляется со записанной при внесении биометрической данными владельца.
5. Принятие определения — если соответствие достаточно значительное, смартфон открывается.

Каждый из указанных стадий нуждается в особых методов и усовершенствований для быстрой работы прямо на устройстве.

Технические составляющие: что скрыто внутри

Стандартная передняя камера.

Простейший легкий вариант определения лица применяет исключительно фронтальную камеру смартфона мобильного устройства. Такой метод осуществлён во многочисленных бюджетных моделях Android-девайсов.

Достоинства:

• Не нуждается в требует дополнительные датчиков.
• Шустро действует при хорошем освещённости.

Отрицательные стороны:

• Легко ввести в заблуждение изображением или видеозаписью.
• Неправильно функционирует при низком освещённости или непривычных углах обзора.

Инфракрасная фотокамера и точечный проектор

Более продвинутые системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология является основой Face ID от Apple.

Как это работает:

• Точечный проектор проецирует на облик пользователя невидимую решетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 меток).
• Инфракрасная устройство регистрирует деформацию этой решетки по плоскости лица.
• Формируется трёхмерная глубинная карта глубины, которая практически невозможна для имитации обычной фото или маской.

Преимущества

• Надёжная работа даже в полной тьме.
• Сильная защита к фальсификациям.
• Точность определения свыше 99%.

Дополнительные сенсорные устройства

В отдельных девайсах задействуются также экстра сенсоры: ToF (Time-of-Flight), которые определяют время распространения света до цели и обратно; Трехцветные-датчики дальности; специальные оптические лидары для построения более детализированной 3D-модели лица.

Эти инновации встречаются наиболее часто во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный ум в действии

Нынешние устройства опознания лиц неосуществимы при отсутствии использования искусственного интеллекта и машинного обучения. Именно благодаря таким инновациям, как адмирал х, гаджет в состоянии узнавать пользователя даже при метаморфозах облика: новая стрижка, борода, очки или макияж не становятся препятствием для разблокировки.

Распознавание лиц

На начальном шаге программа обязана оперативно обнаружить образ лица в пределах целого кадра с камеры. Для данной цели задействуются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы идентифицировать лица людей среди множества других объектов.

Пример: алгоритм MTCNN может распознавать облик даже в случае частичном перекрытии (например, шарфом или ладонью).

Определение ключевых аспектов

После обнаружения лица система, такая как адмирал х, определяет местоположение ключевых точек: уголки глаз, конец носа, края губ и так далее. Обычно применяется от 68 до 128 главных точек на лицевой области.

Данное требуется для выравнивания изображения: если человек находится с телефон под углом, или повернул голову, программа исправляет изображение до обычного угла для дальнейшего анализа.

Создание биометрического образца

Далее нейросеть строит компактное цифровое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.

Такой шаблон крайне затруднительно подделать: он не хранит непосредственно изображение пользователя, а лишь уникальные черты его облика, что делает его идеальным для таких систем, как admiral-x.

Сравнительный анализ и принятие выбора

В случае, когда юзер желает разлочить телефон глазами, система повторяет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый границу (обычно превышает 99%), телефон, как и платформа admiral-x, доступен; если нет — доступ блокируется.

Адаптация к изменениям внешнего вида

Интересная черта актуальных системы — возможность самообучения. Если ты часто разблокируете смартфон с новой прической или очками, алгоритм постепенно освежает базовый шаблон вашего лица для увеличения точности действия без ухудшения безопасности.

Защита биометрических данных информации.

Большинство пользователи боятся сохранять свои биометрические данные на смартфоне из-за угрозы утечки данных или взлома устройства. Некоторые фирмы, вроде admiral-x, предлагают варианты для улучшения безопасности данных пользователей.

• Локальное хранение: Большинство аппаратов хранит биометричные модели лишь внутрь защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют устройство и недоступны включая создателю.

• Шифрование: Все сведения сберегаются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы внешних девелоперов не имеют непосредственного доступа к биометрическим; они могут лишь требовать факт верификации идентичности через системный API.

Необходимо упомянуть значимую деталь: если кто-то достанет физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители реализуют защиту от “слепого” разблокирования — к примеру, заставляют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются виды идентификации лиц на изображениях?

Сегодня можно выделить три основных способа к выполнению этой задачи:

Софтверное плоское определение

Эксплуатируется только фронтальная камера без вспомогательных датчиков глубины. Подобный метод используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота осуществления; низкая цена; скоростная работа при достаточном освещении.
Минусы: несложно ввести в заблуждение снимком; нестабильная деятельность ночью; недостаточная охрана.

Техническое 3D сканирование

Использует инфракрасную видеокамеру + проектор пикселей + сенсоры дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Преимущества: большая надежность; нельзя подделать изображение/видеозапись; стабильная деятельность при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные методы с дополнением ИИ

Задействуют комбинацию софтверных методов + аппаратную обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как адмирал х и Google Pixel Face Unlock современных поколений, сочетают фронталку c инфракрасным сенсором движения Soli Radar для защиты от подделок руками/масками/видеодисплеями чужих устройств.

Образцы использования различных техник

• iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз внедрил подобие Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как программное 2D идентификацию по фото фронтальной камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro использует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Трудности безопасности и ложные сигналы

Несмотря на впечатляющий прогресс инноваций за последние лет, идеальных систем пока не существует:

1. Шанс подвоха: Доступные смартфоны просто “разблокируются” качественной изображением владельца либо роликом с экрана другого устройства.
2. Идентичные двойняшки: Даже самые безупречные системы могут перепутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
3. Трансформации внешнего вида: Внезапное снижение веса/набор веса, пластические операции либо повреждения в некоторых случаях необходимы для повторной регистрации биометрии.
4. Условия съёмки: Яркая освещённость солнцем или интенсивная тень могут уменьшить аккуратность идентификации признаков.

Ниже несколько рекомендаций по защищённому эксплуатации:

• Для критически важных операций всегда используйте двухфакторную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Систематически обновляйте прошивку ПО смартфона для защиты от новых видов атак;
• Включайте настройку “Требовать раскрытых глаз” там, где она есть.

В каких местах ещё находится применение технология помимо мобильных телефонов?

Пускай предмет этой статьи посвящена конкретно мобильным устройствам, стоит упомянуть о других сферах применения технологии:

• Управление прохода в офисах и резиденциях;
• Платёжные устройства банков (“Face Pay”);
• Цифровые удостоверения личности нового поколения;
• Установки видеомониторинга муниципальных подразделений;
• Автоматизация учёта посещаемости образовательных учреждений/вузов;
• Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В московском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без пластика или мобильника! Похожие программы осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом меняется технический процесс сегодня?

Каждый годочек проявляются новые идеи для улучшения уровня работы систем идентификации лиц:

1. Увеличивается детализация датчиков — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше шанс погрешности;
2. Улучшаются искусственные интеллекты — современные структуры вида MobileNetV3 дают возможность скоростно обучаться дополнительным характеристикам вида владельца непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Развиваются технологии антиспуфинга — теперь мобильные устройства умеют различать настоящие движущиеся лица от неподвижных фотографий/маскировок по мельчайшим микродвижениям.
4. Взаимодействие со интеллектуальными приборами — интеллектуальные часы могут авто закрыть доступ к телефон, если пользователь ушёл далеко.
5. Возникают комбинированные системы — например объединяющие аудио идентификацию + лицо + дактилоскопический след.

Здесь, те направления в особенности востребованы в данный момент:

1) Сокращение деталей

Компании пытаются уменьшить размер отверстия (“чёлки”) под датчики на дисплее за счёт внедрения компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на аппарате

Для повышения личной безопасности всё больше расчётов выполняется локально без пересылки информации во внешний облачный сервис.

3) Унификация норм

Гугл интенсивно продвигает эталон BiometricPrompt API, для того чтобы аналогичные системы, как admiral x, и любые Android-аппы могли взаимодействовать с любыми видами биометрии унифицированно.

Какое выбрать сегодня?

Если вам всем необходима предельная сохранность данных, выбирайте топовые устройства со встроенным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех существующих последних моделей
• Huawei Companion/P ряда
• Mix Pro
• Vivo X серии
• Оппо Найти Икс серий.

Если финансы ограничен – лучше отдавать предпочтение классическим способам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в admiral x, задействовать только как дополнительную возможность удобства.

Как повысить комфорт функционирования опции?

Есть пара хитростей для людей, кто уже применяет разблокировку через лицо:

1. Часто обновляйте свою фотографию-шаблон, если сильно трансформируется внешность.
2. Не забывайте чистить объектив фронтальной камеры – загрязнения могут снизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам активирует фотоаппарат как только вы берёте его в руки.
4. В процессе регистрации пытайтесь держать голову ровно напротив объектива без резкого наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвернулись от экрана.

Будущее прогресса инноваций

В скоро наступающие периоды можно ожидать развития полностью дистанционных способов распознавания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + шаги + манипуляции руками!

Также вероятно появление современных способов защиты приватности – скажем, динамическое корректировка цифрового образца после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из очень интересных инноваций нашего периода! Она обеспечивает общение со телефоном проще чем когда-либо прежде, и такие аппы, как admiral-x, могут в разы улучшить ваш опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как устроена эта система внутри, – сможете осознаннее подбирать свой будущий девайс!