Каким способом действует определение лиц в телефонах

Для чего мы выбираем разблокировку по лицу

В прошлые годы распознавание лиц является одной из наиболее востребованных функций для деблокировки умных телефонов. Лишь несколько годов ранее большинство юзеров обходились PIN-кодами, паролями или датчиками отпечатков пальцев. Но с появлением подобных технологий, например вулкан россия, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект обуславливает эту конкретную возможность очень нужной? Для начала, это комфортно: не нужно запоминать трудные пароли или находить нужный палец в тьме. Кроме того, это быстро: современные системы идентифицируют лицо фактически за мгновения ока. В-третью очередь, это чувство футуристичности — будто в кинофильмах про вулкан автомат агентов.

Тем не менее за этой кажущейся несложностью таится целый мир комплексных технологий и инженерных решений. Давайте понять, как именно действует распознавание лиц в новейших мобильных телефонах, какие бывают методы, насколько они защищены и что нас ожидает в будущем.

Короткая хроника прогресса технологии

Идентификация лиц как методика имеется уже более 50 годов. Начальные попытки автоматического анализа лица были сделаны еще в 1960-х годы в научных учреждениях США. Тогда компьютеры умели лишь выделять силуэты лица и измерять расстояния между глазами и устами на ахроматических снимках.

Начальные бизнес платформы появились в 1990-х годах, но они были несовершенны: работали медленно и часто давали сбои. Только с развитием искусственных сетей и таких платформ, как вулкан россии, мощных мобильных процессоров распознавание лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные решения.

Главные этапы действия механизма идентификации

Процесс идентификации лица можно ориентировочно сегментировать на несколько основных этапов:

Идентификация лица — аппарат определяет присутствие гуманного образа в снимке.
Извлечение характеристик — алгоритм исследует особенности лица: конфигурацию зрительных органов, обонятельного органа, уст, положение надбровных дуг.
Построение модели — создаётся особенный электронный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со стандартом — созданный образец сверяется с сохранённой при учёте биометрической данными владельца.
Принятие определения — если совпадение достаточно существенное, смартфон открывается.

Любой из этих этапов нуждается в индивидуальных алгоритмов и оптимизаций для скорой работы непосредственно на девайсе.

Технические составляющие: что находится внутри

Обычная передняя камера.

Самый простой несложный вариант идентификации лица задействует лишь лицевую камеру смартфона смартфона. Подобный способ реализован во многочисленных бюджетных версиях Android-устройств.

Плюсы:

Не нуждается в требует внешних датчиков.
Шустро действует при достаточном свете.

Отрицательные стороны:

Легко ввести в заблуждение фотографией или видеозаписью.
Неудачно действует при слабом освещённости или непривычных углах обзора.

ИК фотокамера и точечный проектор

Более совершенные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Каким образом это действует:

Точечный проектор отображает на лицо использующего невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 точек).
ИК камера записывает деформацию данной решетки по плоскости физиономии.
Создаётся трехмерная глубинная карта глубины, что почти что неосуществима для имитации стандартной фотографией или маской.

Преимущества

Надёжная деятельность даже в полной тьме.
Большая защита к подделкам.
Точность распознавания выше 99%.

Дополнительные сенсорные устройства

В определённых девайсах используются также экстра сенсорные устройства: ToF (Time-of-Flight), которые измеряют период распространения света до объекта и обратно; Цветные-датчики дальности; специальные оптические лидары для построения более аккуратной 3D-модели лица.

Эти инновации применяются чаще всего во топовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: искусственный разум на исполнении

Текущие механизмы опознания лиц немыслимы в отсутствие использования artificial intelligence и machine learning. Именно вследствие таким разработкам, как вулкан россии, аппарат способно распознавать владельца даже при трансформациях внешности: новая стрижка, щетина, оптика или грим не становятся помехой для разблокировки.

Детектирование лица

При первом этапе система обязана быстро распознать образ лица в пределах целого изображения камеры. Для данной цели применяются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые подготовлены идентифицировать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN в состоянии распознавать облик даже с частичном перекрытии (например, шалью или ладонью).

Идентификация ключевых аспектов

После идентификации лица система, такая как вулкан россии, вычисляет расположение основных точек: уголки глаз, кончик носа, контуры губ и так далее. Как правило применяется от 68 до 128 основных меток на лице.

Это действие нужно для нормализации изображения: если юзер удерживает мобильник под наклоном, или наклонил голову, программа корректирует изображение до стандартного положения для дальнейшего анализа.

Создание биометрии модели

Далее нейронная сеть строит уплотненное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Данный образец очень затруднительно имитировать: он не хранит непосредственно картинку пользователя, а лишь уникальные черты его облика, что делает его оптимальным для таких площадок, как vulkan russia.

Сравнение и осуществление выбора

Когда пользователь желает разблокировать мобильник глазами, система воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный границу (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Приспособление к метаморфозам облика

Интересная черта современных систем — возможность самообучения. Если ты часто разблокируете смартфон с новой укладкой или очками, алгоритм постепенно обновляет основной образец вашего облика для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических данных.

Большинство пользователи боятся сохранять свои био-идентификационные данные на телефоне из-за угрозы утечки данных или взлома устройства. Иные компании, например vulkan russia, предлагают варианты для повышения сохранности данных клиентов.

Локальное хранение: Преимущественно устройств записывает био-идентификационные шаблоны лишь внутри защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не выходят из аппарат и не доступны в том числе производителю.
Шифрование: Все информация сохраняются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Программы третьих разработчиков не обладают прямого доступа к биометрическим; они могут лишь запрашивать факт верификации идентичности через системный API.

Стоит подчеркнуть существенную особенность: если кто-либо получит физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство производители реализуют систему защиты от автоматического разблокирования — например, требуют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают типы определения лиц на изображениях?

Сегодня можно выделить различить 3 ключевых метода к реализации этой функции:

Программируемое плоское идентификация

Эксплуатируется только передняя камера без дополнительных детекторов глубины. Этот подход используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость реализации; минимальная затраты; скоростная работа при хорошем свете.
Минусы: легко одурачить снимком; ненадежная функционирование ночью; низкая охрана.

Аппаратное объёмное сканирование

Применяет ИК видеокамеру + проекционный модуль точек + датчики дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: большая надёжность; не получится обмануть изображение/видеозапись; устойчивая работа при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные способы с интеграцией ИИ

Применяют комбинацию софтверных методов + аппаратную обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, как вулкан россии и Google Pixel Face Unlock современных поколений, сочетают фронтальную камеру c ИК датчиком мобильности Soli Radar для предотвращения от подделок жестами/масками/видеоэкранами посторонних устройств.

Образцы эксплуатации разнообразных методов

iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition впервые внедрил подобие Face ID среди Android.
Samsung Galaxy S10 версия/S20 поддерживают как программное 2D распознавание по изображению селфи-камерой, так и датчик ириса глаза.
Huawei Mate20 Pro применяет комплекс из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Вопросы безопасности и ложные сигналы

Несмотря на замечательный успехи техники за прошедшие лет, идеальных систем пока не существует:

Шанс обмана: Доступные смартфоны просто доступны качественной снимком хозяина либо видеозаписью с экрана другого устройства.
Идентичные близнецы: Даже самые идеальные устройства могут перепутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
Трансформации облика: Внезапное утрата веса/набор веса, хирургические вмешательства или травмы иногда необходимы для перерегистрации биометрических данных.
Условия фотографирования: Интенсивная освещённость солнечным светом либо интенсивная тень могут понизить точность идентификации признаков.

Ниже некоторые подсказок по защищённому эксплуатации:

Для критически важных операций всегда внедряйте дополнительную аутентификацию;
Не включайте опцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
Постоянно обновляйте прошивку программное обеспечение мобильного устройства для предотвращения угроз от актуальных атак;
Включайте функцию “Требовать распахнутых глаз” везде, где она имеется.

В каких областях также находится применение технология помимо мобильных телефонов?

Несмотря на то, что основная мысль данной публикации сосредоточена на в частности портативным гаджетам, необходимо сказать о других сферах применения технологии:

Мониторинг доступа в деловых центрах и многоквартирных зданиях;
Платёжные аппараты финансовых учреждений (“Face Pay”);
Виртуальные удостоверения личности нового поколения;
Комплексы видеомониторинга муниципальных служб;
Автоматизирование отслеживания явки школ/вузов;
Аутентификация юзеров персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без карты или телефона! Похожие проекты реализуются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как меняется технический процесс в наше время?

Каждый годочек проявляются свежие мысли для усовершенствования стандарта деятельности систем распознавания лиц:

Увеличивается детализация датчиков — чем больше деталей фиксируется видеокамерой/датчиками глубины, тем меньше вероятность погрешности;
Улучшаются нейросети — передовые структуры модели MobileNetV3 дают возможность быстро обучаться новым особенностям вида обладателя напрямую на гаджете без отправки данных в облако.
Совершенствуются способы антиспуфинга — теперь мобильные устройства могут различать подлинные анимированные лица от фиксированных фотографий/масок по микроскопическим микродвижениям.
Синхронизация со умными устройствами — смарт-часы могут авто закрыть доступ к мобильный телефон, если пользователь отошёл далеко.
Появляются гибридные механизмы — в частности объединяющие голосовую опознание + лицо + дактилоскопический след.

Вот, которые направления в особенности востребованы на сегодняшний день:

1) Уменьшение элементов

Изготовители пытаются сократить размер выреза (“чёлки”) для датчики на дисплее за счёт встраивания компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на девайсе

Для повышения конфиденциальности всё более обработки данных происходит на месте без пересылки информации во дополнительный облачный услугу.

3) Унификация регламентов

Google энергично продвигает эталон BiometricPrompt API, чтобы такие платформы, например как вулкан россия, и каждые Android-программы могли взаимодействовать с любыми видами биометрии унифицированно.

Какое выбрать на сегодня?

Когда тебе важна предельная защита информации, подбирайте топовые модели со встроенным ИК-излучателем либо ToF-датчиком глубины.

iPhone каждого актуальных моделей
Huawei Mate/Series P линейки
Mix Pro
Vivo X серии
Oppo Найти X линейки.

Если средства ограничен – лучше выбирать обычным способам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную возможность удобства.

Каким образом увеличить комфорт функционирования опции?

Есть некоторые лайфхаков для пользователей, кто уже использует функцию распознавания лица:

Часто меняйте свою фото-шаблон, если сильно изменяется внешний вид.
Не забывайте протирать линзу передней камеры – пятна могут понизить четкость!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам активирует фотоаппарат если вы берёте его в руки.
Во время регистрационного процесса старайтесь сохранять лицо прямо перед объектива исключая сильного наклона головы.
Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвели взгляд от дисплея.

Будущее эволюции техники

В скоро наступающие периоды можно предполагать развития полностью бесконтактных способов опознания персоны сразу по нескольким биометрическим параметрам одновременно: лицо + речь + манера ходьбы + жесты рук!

Также предполагается развитие свежих способов обеспечения приватности – например, динамическое изменение цифрового шаблона после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – единственная из очень увлекательных техник нашего времени! Она делает интеракцию со телефоном удобнее чем до этого, и такие аппы, как vulkan russia, могут в разы улучшить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы знаете, как работает эта технология в деталях, – сумеете осознаннее определять свой следующий устройство!