Каким способом действует распознавание лиц в смартфонах

Для чего мы выбираем разблокировку по лицевому распознаванию

В недавние годы распознавание лиц является одной из наиболее востребованных опций для разблокировки мобильных телефонов. Лишь несколько годов ранее основная часть пользователей обходились пин-кодами, паролями или датчиками отпечатков пальцев. Но при появлением подобных технологий, как Вулкан Платинум, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект превращает эту конкретную особенность такой востребованной? Для начала, это удобно: не нужно помнить трудные пароли или отыскивать верный палец в темноте. Во-вторых, это оперативно: современные системы распознают лицо фактически за мгновения ока. В-третьих, это чувство будущего — словно в кинофильмах про вулкан платинум зеркало агентов.

Впрочем за этой на первый взгляд несложностью таится целый вселенная комплексных технологий и инженерных разработок. Позвольте нам понять, как точно функционирует идентификация по лицу в актуальных мобильных телефонах, какие применяются способы, насколько они надёжны и что нас ожидает в будущем.

Короткая хроника развития техники

Идентификация лиц как методика присутствует уже более 50 лет. Начальные попытки автоматизированного изучения лица были предприняты еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры способны были лишь выделять силуэты лица и вычислять дистанции между зрачками и губами на черно-белых изображениях.

Начальные торговые установки стали доступны в 1990-х годах, но они были несовершенны: действовали неспешно и часто ошибались. Только с эволюцией синтетических сетей и таких платформ, как Vulkan Platinum, сильных мобильных чипов распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным распознаванием лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали внедрять личные разработки.

Главные этапы действия системы определения

Процесс идентификации лица можно примерно поделить на несколько ключевых этапов:

1. Обнаружение лиц — камера распознает наличие гуманного образа в снимке.
2. Определение особенностей — механизм исследует черты облика: очертания зрительных органов, носа, губ, расположение бровей.
3. Построение шаблона — создаётся уникальный виртуальный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение с стандартом — созданный образец сопоставляется со зафиксированной при учёте биометрической информацией владельца.
5. Принятие определения — если соответствие достаточно высокое, смартфон деблокируется.

Любой из этих стадий нуждается в индивидуальных методов и усовершенствований для скорой работы непосредственно на девайсе.

Железные элементы: что скрыто в их недрах

Стандартная фронтальная камера.

Простейший простой способ определения физиономии задействует только переднюю камеру смартфона мобильного устройства. Подобный подход внедрён во многих доступных версиях Android-устройств.

Достоинства:

• Не нуждается в потребляет внешних сенсоров.
• Шустро действует при хорошем свете.

Отрицательные стороны:

• Просто одурачить снимком или видеозаписью.
• Неудачно функционирует при слабом освещении или непривычных углах обзора.

Инфракрасная фотокамера и пунктирный проектор

Более совершенные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология составляет базу Face ID от Apple.

Каким образом это работает:

• Точечный устройство проекции показывает на облик юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
• ИК камера записывает изменение формы данной решетки по плоскости лица.
• Создаётся 3D глубинная карта глубины, что почти что неподвластна для подделки обычной снимком или маскировкой.

Преимущества

• Надёжная функционирование даже в полной темноте.
• Высокая защита к фальсификациям.
• Точность распознавания свыше 99%.

Дополнительные сенсоры

В отдельных устройствах применяются также вспомогательные датчики: ToF (Time-of-Flight), которые измеряют период распространения луча до предмета и обратно; RGB-датчики глубины; специальные лазерные дальномеры для формирования более аккуратной 3D-модели лица.

Эти технологии применяются наиболее часто во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: искусственный разум в исполнении

Нынешние устройства распознавания лиц невозможны при отсутствии применения искусственного интеллекта и машинного обучения. Именно благодаря таким инновациям, как Vulkan Platinum, аппарат может распознавать пользователя даже при трансформациях облика: новая укладка, растительность на лице, оптика или макияж не становятся помехой для разблокировки.

Обнаружение физиономии

На стартовом этапе система обязана мгновенно распознать ликовое изображение в пределах полного изображения камеры. Для этой задачи применяются последовательные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые подготовлены распознавать человеческие лица среди множества других объектов.

Пример: метод MTCNN в состоянии распознавать физиономию даже с частичном перекрытии (например, шарфом или ладонью).

Определение ключевых точек

После распознавания лица механизм, такая как Vulkan Platinum, устанавливает расположение главных точек: кончики глаз, верхушка носа, края губ и так далее. Как правило используется от 68 до 128 главных меток на лицевой поверхности.

Это действие требуется для стабилизации изображения: если юзер удерживает телефон под углом, или склонил голову, программа исправляет картинку до стандартного положения для дальнейшего анализа.

Создание биометрического идентификатора модели

Далее искусственная сеть строит сжатое цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный шаблон очень сложно имитировать: он не удерживает само фото юзера, а лишь уникальные особенности его вида, что делает его оптимальным для таких площадок, как Вулкан Казино Платинум.

Сопоставление и принятие заключения

Когда юзер намеревается разблокировать смартфон взором, механизм осуществляет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый уровень (обычно превышает 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ не предоставляется.

Приспособление к метаморфозам внешности

Увлекательная черта актуальных систем — способность самообучения. Если ты часто разблокируете смартфон с свежей стрижкой или очками, программа постепенно модернизирует основной модель вашего лица для повышения точности работы без снижения уровня безопасности.

Охрана биометрических данных данных.

Многие пользователи беспокоятся держать свои биометрические идентификационные данные на телефоне из-за риска утечки данных или взлома гаджета. Иные компании, например Вулкан Казино Платинум, предлагают варианты для увеличения защиты данных клиентов.

• Локальное хранение: Преимущественно аппаратов записывает биометричные образцы лишь внутри защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не выходят из устройство и недоступны в том числе изготовителю.

• Шифрование: Все данные сохраняются только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних девелоперов не имеют прямого доступа к биометрическим; они могут лишь требовать подтверждение верификации личности через системный API.

Стоит упомянуть значимую особенность: в случае, если кто-то сможет получить доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство производители реализуют защиту от неосознанного разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют категории определения лиц на изображениях?

Сегодня можно различить 3 основных способа к осуществлению этой операции:

Программируемое 2D определение

Используется только передняя видеокамера без вспомогательных датчиков глубины. Подобный метод используется чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость осуществления; умеренная стоимость; быстрая деятельность при хорошем освещении.
Минусы: просто обмануть снимком; нестабильная деятельность ночью; недостаточная защищенность.

Аппаратное 3D сканирование

Применяет инфракрасную видеокамеру + проектор точек + сенсоры дистанции (Face ID у Apple; аналогичные решения у Huawei Mate).
Плюсы: большая достоверность; нельзя исказить фото/видео; устойчивая работа при любом освещении.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с интеграцией ИИ

Задействуют комбинацию программных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например Vulkan Platinum и Google Pixel Face Unlock последних версий, комбинируют фронтальную камеру c ИК датчиком движения Soli Radar для защиты от подделок жестами/масками/видеоэкранами чужих устройств.

Примеры применения разных техник

• iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил эквивалент Face ID среди Android.
• Samsung Galaxy S10 версия/S20 имеют как программное плоское распознавание по фото селфи-камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro задействует комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Трудности защиты и ошибочные срабатывания

Несмотря на замечательный развитие технологий за недавние лет, совершенных механизмов пока не наблюдается:

1. Шанс подвоха: Доступные телефоны просто доступны высококачественной изображением владельца либо видео с экрана другого устройства.
2. Идентичные близнецы: Даже самые безупречные механизмы могут ошибиться между однояйцевыми близнецами либо семьями с очень похожей внешностью.
3. Метаморфозы внешнего вида: Внезапное снижение веса/набор веса, хирургические вмешательства либо травмы в некоторых случаях требуют повторной регистрации биометрических данных.
4. Условия фотографирования: Сильная освещённость солнцем либо интенсивная темнота могут снизить точность идентификации признаков.

Здесь несколько рекомендаций по защищённому использованию:

• Для значимых операций всегда внедряйте двухэтапную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Систематически апгрейдите прошивку мобильного устройства для обеспечения безопасности от современных угроз;
• Включайте функцию “Требовать раскрытых глаз” везде, где она имеется.

Где дополнительно находится применение технология помимо смартфонов?

Несмотря на то, что тема данной статьи посвящена конкретно смартфонам и планшетам, необходимо сказать о прочих направлениях внедрения технологии:

• Мониторинг прохода в деловых центрах и резиденциях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Электронные удостоверения личности нового типа;
• Установки видеоконтроля городских служб;
• Механизация учёта явки школ/вузов;
• Аутентификация юзеров ПК/ноутбуков.

Например: В столичном метро уже испытывается система платежа проезда по лицу (“Face Pay”) — нужно лишь пройти через турникет без карты или мобильника! Аналогичные проекты осуществляются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется технология в нынешнее время?

Каждый годочек возникают современные идеи для повышения качества функционирования систем распознавания лиц:

1. Увеличивается детализация датчиков — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше шанс погрешности;
2. Улучшаются нейросети — передовые структуры вида MobileNetV3 позволяют быстро адаптироваться к свежим особенностям облика обладателя непосредственно на девайсе без отправки данных в облако.
3. Совершенствуются способы антиспуфинга — теперь смартфоны способны отличать настоящие движущиеся лица от фиксированных снимков/масок по микроскопическим микродвижениям.
4. Взаимодействие со умными устройствами — интеллектуальные часы могут самостоятельно заблокировать мобильный телефон, если пользователь отошёл далеко.
5. Проявляются комбинированные системы — например объединяющие речевую опознание + физиономию + отпечаток пальца.

Итак, какие направления очень актуальны сейчас:

1) Сокращение деталей

Компании намереваются сократить величину отверстия (“чёлки”) под датчики на дисплее за счёт внедрения маленьких ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения приватности всё больше расчётов осуществляется внутри устройства без передачи информации во внешний облачный сервис.

3) Стандартизация стандартов

Гугл энергично продвигает стандарт BiometricPrompt API, чтобы аналогичные системы, как Вулкан Платинум, и любые Android-аппы были совместимы с всеми формами биометрии единообразно.

Что выбрать сегодня?

В случае если вам всем важна предельная сохранность информации, подбирайте флагманские устройства с интегрированным ИК-проектором или ToF-сенсором глубины.

• iPhone всех актуальных поколений
• Huawei Companion/P Series ряда
• Mix Professional
• Vivo X модели
• Оппо Обнаружить X линейки.

Если финансы скромен – лучше выбирать традиционным средствам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как дополнительную возможность комфорта.

Каким образом улучшить удобство функционирования функции?

Есть пара советов для тех, кто уже применяет разблокировку через лицо:

1. Периодически меняйте свою фотографию-шаблон, если сильно трансформируется облик.
2. Не упускайте из виду чистить объектив передней камеры – загрязнения могут понизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам запускает камеру как только вы поднимаете его.
4. При регистрации старайтесь сохранять лицо неподвижно впереди видеоустройства без сильного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от экрана.

Будущее развития техники

В предстоящие годы можно предвкушать появления полностью безконтактных способов опознания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: облик + речь + манера ходьбы + движения рук!

Также предполагается появление свежих подходов защиты приватности – скажем, изменяющееся изменение диджитал шаблона после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из очень увлекательных техник нашего времени! Она обеспечивает интеракцию со телефоном удобнее чем до этого, и такие приложения, как Вулкан Казино Платинум, могут в разы повысить ваш юзерский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как функционирует эта методика в деталях, – будете в состоянии вдумчиво определять свой следующий устройство!