Каким способом функционирует определение лиц в смартфонах

Почему мы останавливаемся на разблокировку по лицевому распознаванию

В последние годы идентификация физиономий превратилось в одной из самых распространённых опций для открытия умных телефонов. Всего несколько лет назад большинство юзеров обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает эту функцию такой востребованной? Во-первых, это удобно: не нужно помнить трудные пароли или искать правильный палец в мраке. Кроме того, это мгновенно: современные программы распознают лицо буквально за мгновения ока. В-третьих, это чувство футуризма — словно в кинолентах про вулкан казино разведчиков.

Тем не менее за такой на первый взгляд простотой прячется целый мир сложных технологий и инженерных разработок. Давайте понять, как точно действует фейсканирование в актуальных гаджетах, какие применяются технологии, насколько они надёжны и что нас ожидает в будущем.

Краткая повествование прогресса инноваций

Идентификация лиц как методика существует уже более пятидесяти годов. Изначальные пробы автоматического анализа лица были сделаны еще в 1960-х годы в научных учреждениях США. Тогда вычислительные машины могли лишь выделять очертания черепа и определять дистанции между зрачками и губами на черно-белых изображениях.

Первые торговые установки стали доступны в девяностых годах, но они были далеки от совершенства: работали медленно и нередко ошибались. Только с прогрессом искусственных сетей и таких платформ, как вулкан россии, мощных мобильных микросхем идентификация лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали внедрять свои разработки.

Ключевые этапы функционирования механизма определения

Процесс распознавания лица можно ориентировочно разделить на несколько основных этапов:

Распознавание лиц — устройство распознает присутствие гуманного образа в снимке.
Определение характеристик — алгоритм изучает контуры физиономии: форму зрительных органов, носа, уст, позицию надбровных дуг.
Построение модели — создаётся особенный виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение с образцом — сформированный модель сравнивается с зафиксированной при учёте биометрической данными владельца.
Принятие решения — если соответствие достаточно значительное, смартфон деблокируется.

Каждый из данных этапов требует специальных процедур и улучшений для скорой работы прямо на устройстве.

Технические компоненты: что прячется в их недрах

Стандартная передняя камера.

Наиболее легкий вариант идентификации облика использует лишь переднюю камеру смартфона смартфона. Такой метод реализован во различных бюджетных моделях Android-девайсов.

Сильные стороны:

Не требует внешних датчиков.
Оперативно действует при достаточном свете.

Недостатки:

Просто обмануть фотографией или роликом.
Неудачно функционирует при слабом освещённости или необычных углах обзора.

Инфракрасная камера и точечный проектор

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика лежит в основе Face ID от Apple.

Каким способом это функционирует:

Точечный устройство проекции отображает на облик использующего невидимую решетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 пятен).
Инфракрасная устройство записывает искривление этой сетки по поверхности лица.
Получается 3D глубинная карта глубинности, которая почти неосуществима для подделки обычной фотографией или маскировкой.

Достоинства

Надёжная работа даже в полной неосвещённости.
Большая сопротивляемость к имитациям.
Точность определения выше 99%.

Добавочные сенсоры

В отдельных девайсах используются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют период прохождения луча до объекта и обратно; Трехцветные-датчики дальности; специальные лазерные лидары для построения более точной 3D-модели физиономии.

Эти инновации встречаются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: синтетический интеллект в действии

Текущие системы опознания физиономий невозможны при отсутствии использования artificial intelligence и machine learning. Именно вследствие таким разработкам, как вулкан россии, гаджет может узнавать владельца даже при трансформациях облика: новая укладка, борода, линзы или макияж не становятся барьером для деблокировки.

Детектирование физиономии

На стартовом стадии система обязана мгновенно найти образ лица в пределах полного кадра с камеры. Для этой задачи используются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены идентифицировать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN в состоянии обнаруживать физиономию даже в случае частичном закрытии (например, шалью или ладонью).

Идентификация важных моментов

После идентификации лица механизм, такая как вулкан россии, устанавливает расположение главных точек: края глаз, кончик носа, контуры губ и так далее. Как правило применяется от 68 до 128 основных меток на лицевой области.

Это действие требуется для стабилизации визуала: если пользователь находится с смартфон под наклоненным, или наклонил голову, программа исправляет картинку до стандартного положения для дальнейшего анализа.

Построение биометрического идентификатора образца

Далее нейросеть строит сжатое математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 флоатов.

Такой формат весьма затруднительно имитировать: он не сохраняет само картинку юзера, а лишь особенные особенности его внешности, что делает его оптимальным для таких площадок, как vulkan russia.

Сопоставление и принятие решения

Если юзер желает разблокировать телефон глазами, механизм осуществляет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно превышает 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ не предоставляется.

Привыкание к трансформациям облика

Увлекательная особенность актуальных системы — способность самообучения. Если ты часто открываете мобильное устройство с новой стрижкой или очками, система постепенно обновляет базовый шаблон вашего облика для повышения точности работы без снижения уровня безопасности.

Безопасность биометрии информации.

Многие пользователи беспокоятся сохранять свои биометрические идентификационные данные на мобильном устройстве из-за угрозы утечки данных или взлома гаджета. Некоторые организации, вроде vulkan russia, предлагают методы для увеличения сохранности информации клиентов.

Локальное хранение: Большинство устройств записывает биометрические образцы лишь внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают гаджет и закрыты даже изготовителю.
Шифрование: Все данные хранятся только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Программы сторонних девелоперов не обладают прямого возможности доступа к биометрическим данным; они могут лишь требовать факт верификации личности через системный API.

Необходимо упомянуть значимую подробность: если кто-то достанет доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство изготовители осуществляют защиту от автоматического разблокирования — например, просят раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают типы идентификации лиц на изображениях?

На сегодняшний день можно определить выделить три основных подхода к выполнению этой операции:

Софтверное плоское определение

Используется только передняя видеокамера без вспомогательных детекторов дистанции. Такой подход используется наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость осуществления; минимальная цена; скоростная функционирование при качественном свете.
Минусы: несложно обмануть фотографией; ненадежная деятельность ночью; слабая защищенность.

Оборудование для 3D сканирование

Использует инфракрасную видеокамеру + проекционный модуль точек + датчики глубины (Face ID от Apple; подобные решения у Huawei Mate).
Достоинства: значительная достоверность; нельзя исказить изображение/видеозапись; постоянная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с дополнением ИИ

Задействуют комбинацию программных методов + аппаратную обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, например вулкан россии и Google Pixel Face Unlock последних поколений, объединяют фронталку c ИК сенсором движения Soli Radar для предотвращения от подделок жестами/масками/видеоэкранами чужих устройств.

Образцы эксплуатации разных способов

iPhone линейки X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition первый раз предложил подобие Face ID среди Android.
Samsung Galaxy S10 модель/S20 поддерживают как программное обеспечение двухмерное определение по фото фронтальной камерой, так и сканер глазного ириса.
Huawei Mate20 Pro использует комплекс из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Проблемы безопасности и ошибочные сигналы

Несмотря на замечательный успехи техники за недавние годы, совершенных систем пока не наблюдается:

Шанс подвоха: Доступные телефоны просто доступны четкой изображением владельца или же роликом с дисплея иного гаджета.
Идентичные близняшки: Даже самые идеальные системы могут спутать между однояйцевыми близнецами либо семьями с очень похожей внешностью.
Изменения внешности: Внезапное утрата веса/увеличение массы тела, косметические процедуры или травмы порой требуют повторной регистрации биометрических данных.
Условия съёмки: Интенсивная освещённость солнечным светом либо плотная темнота могут понизить точность идентификации признаков.

Здесь несколько рекомендаций для надёжному эксплуатации:

Для важных операций всегда применяйте дополнительную аутентификацию;
Не запускайте функцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
Постоянно обновляйте прошивку прошивку смартфона для предотвращения угроз от современных угроз;
Включайте настройку “Требовать раскрытых глаз” там, где она есть.

В каких областях дополнительно находится применение технология кроме мобильных телефонов?

Пускай тема данной статьи сосредоточена на именно мобильным устройствам, необходимо сказать о других сферах применения технологии:

Мониторинг доступа в рабочих помещениях и резиденциях;
Платёжные аппараты банков (“Face Pay”);
Виртуальные идентификационные документы последнего поколения;
Системы видеомониторинга городских подразделений;
Автоматизирование учёта явки учебных заведений/университетов;
Авторизация пользователей ПК/ноутбуков.

Например: В столичном метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или мобильника! Аналогичные программы осуществляются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом меняется технический процесс сегодня?

Любой годик проявляются новые мысли для усовершенствования стандарта работы систем распознавания лиц:

Увеличивается чёткость сенсоров — чем больше деталей фиксируется камерой/глубинными сенсорами, тем меньше риск неточности;
Улучшаются нейронные сети — современные структуры модели MobileNetV3 дают возможность быстро обучаться новым чертам внешности владельца непосредственно на девайсе без отправки данных в облако.
Совершенствуются технологии антиспуфинга — теперь мобильные устройства умеют различать настоящие движущиеся лица от неподвижных снимков/маскировок по мельчайшим движениям кожи.
Интеграция со интеллектуальными приборами — смарт-часы могут самостоятельно закрыть доступ к телефон, если обладатель отошёл далеко.
Проявляются смешанные механизмы — например объединяющие голосовую идентификацию + облик + дактилоскопический след.

Вот, какие тренды очень актуальны в данный момент:

1) Уменьшение компонентов

Производители стараются уменьшить размер отверстия (“чёлки”) для датчики на экране за счёт внедрения компактных ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для улучшения конфиденциальности всё больше обработки данных выполняется локально без отправки данных во внешний облачный сервис.

3) Упорядочивание регламентов

Google энергично пропагандирует эталон BiometricPrompt API, с целью чтобы аналогичные системы, например как вулкан россия, и все Android-приложения могли работать с различными типами биометрии унифицированно.

Что выбрать на сегодня?

В случае если вам всем необходима предельная защита данных, остановите выбор на флагманские устройства с интегрированным ИК-проектором либо ToF-сенсором глубины.

iPhone всех последних поколений
Huawei Partner/P Series серии
Mi Professional
Vivo X линейки
Oppo Обнаружить X серий.

Если средства ограничен – лучше выбирать классическим способам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, использовать только как второстепенную возможность комфорта.

Каким способом улучшить комфорт работы опции?

Есть несколько хитростей для людей, кто уже использует разблокировку через лицо:

Периодически меняйте свою фотографию-шаблон, если сильно изменяется внешность.
Не упускайте из виду протирать объектив передней камеры – разводы могут понизить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам запускает камеру как только вы берёте его в руки.
При записи пытайтесь держать голову прямо напротив объектива без сильного наклона головы.
Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отворачиваетесь от экрана.

Будущее прогресса технологии

В предстоящие годы можно ожидать развития полностью бесконтактных способов опознания человека сразу по нескольким биометрическим параметрам одновременно: лицо + звучание + походка + жесты рук!

Также предполагается развитие современных методов защиты конфиденциальности – скажем, переменное изменение электронного шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее захватывающих техник нашего эпохи! Она предоставляет взаимодействие со смартфоном проще чем когда-либо прежде, и такие программы, как vulkan russia, могут существенно улучшить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как работает эта методика изнутри, – будете в состоянии более осмысленно выбирать свой очередной девайс!