22 Sep Каким образом работает определение лицевых образов в телефонах

Каким образом работает определение лицевых образов в телефонах

Зачем мы останавливаемся на разблокирование по лицевому распознаванию

В прошлые годы идентификация физиономий стало одной из самых популярных функций для разблокировки мобильных телефонов. Всего пару лет ранее основная часть использующих довольствовались пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, как вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что делает эту конкретную особенность настолько популярной? Прежде всего, это практично: не нужно удерживать в памяти замысловатые пароли или искать верный палец в темноте. Во-вторых, это мгновенно: современные системы распознают лицо буквально за мгновение. В-третьих, это чувство футуристичности — как будто в фильмах про vulkan casino агентов.

Впрочем за такой видимой простотой прячется полный вселенная трудных техник и инженерных концепций. Попробуем исследовать, как именно работает фейсканирование в новейших смартфонах, какие бывают способы, насколько они защищены и что нас ждёт впереди.

Короткая хроника развития техники

Распознавание лиц как методика имеется уже более 50 годов. Изначальные пробы машинного анализа лица были предприняты еще в 1960-х годы в исследовательских центрах США. Тогда ЭВМ умели лишь выделять контуры черепа и определять промежутки между зрачками и губами на черно-белых снимках.

Изначальные торговые установки появились в 90-х, но они были далеки от совершенства: работали медленно и часто давали сбои. Только с эволюцией синтетических сетей и таких платформ, как вулкан россии, сильных мобильных микросхем определение лиц стало по-настоящему широко распространённым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным идентификацией лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять личные разработки.

Основные этапы функционирования устройства идентификации

Процесс распознавания лица можно примерно сегментировать на несколько важных этапов:

1. Распознавание лиц — камера выявляет существование человеческого образа в кадре.
2. Извлечение признаков — система исследует контуры лица: форму глаз, носа, губ, позицию бровей.
3. Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со стандартом — сформированный модель сравнивается со зафиксированной при учёте биометрической данными владельца.
5. Принятие решения — если соответствие достаточно высокое, смартфон открывается.

Любой из этих этапов нуждается в особых процедур и улучшений для быстрой работы прямо на устройстве.

Аппаратные составляющие: что скрыто внутри них

Обычная передняя камера.

Простейший легкий метод распознавания лица применяет только лицевую видеокамеру мобильного устройства. Данный способ осуществлён во многих доступных версиях Android-устройств.

Преимущества:

• Не требует внешних датчиков.
• Шустро функционирует при достаточном освещённости.

Недостатки:

• Несложно обмануть изображением или видео.
• Неправильно действует при плохом освещении или непривычных углах обзора.

ИК фотокамера и точечный проекционный аппарат

Более совершенные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология составляет базу Face ID от Apple.

Каким способом это работает:

• Точечный проектор показывает на лицо пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
• ИК камера регистрирует искривление этой сетки по плоскости физиономии.
• Создаётся 3D карта глубины глубинности, что почти что неподвластна для фальсификации типичной снимком или маской.

Преимущества

• Надёжная функционирование даже в полной темноте.
• Большая защита к фальсификациям.
• Точность идентификации более 99%.

Добавочные сенсоры

В определённых аппаратах используются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период движения луча до предмета и обратно; RGB-датчики глубины; специальные оптические дальномеры для формирования более детализированной 3D-модели лица.

Эти технологии встречаются наиболее часто во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: искуственный ум на действии

Нынешние устройства распознавания физиономий немыслимы без использования искусственного интеллекта и machine learning. Именно благодаря таким технологиям, как вулкан россии, гаджет может идентифицировать пользователя даже при метаморфозах внешности: новая причёска, борода, очки или грим не становятся препятствием для разблокировки.

Обнаружение лиц

На стартовом стадии алгоритм необходимо быстро обнаружить образ лица в пределах полного изображения камеры. Для данной цели применяются каскадные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы находить лиц человека среди множества других объектов.

Пример: метод MTCNN в состоянии распознавать физиономию даже с частичном закрытии (например, шалью или ладонью).

Идентификация основных моментов

После распознавания лица устройство, такая как вулкан россии, определяет расположение ключевых точек: края глаз, верхушка носа, края губ и так далее. Обычно используется от 68 до 128 основных маркеров на лицевой области.

Это нужно для нормализации картинки: если пользователь держит смартфон под наклоном, или склонил голову, программа «выпрямляет» изображение до нормального состояния для последующего изучения.

Создание биометрии шаблона

Далее искусственная сеть строит уплотненное цифровое представление («эмбеддинг») внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Такой шаблон крайне трудно подделать: он не удерживает само изображение пользователя, а лишь уникальные черты его облика, что делает его совершенным для таких систем, как vulkan russia.

Сравнение и принятие выбора

В случае, когда человек намеревается разлочить смартфон глазами, система воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ не предоставляется.

Приспособление к трансформациям облика

Занимательная характеристика актуальных системы — возможность самообучения. Если ты часто разблокируете телефон с обновленной прической или очками, система постепенно обновляет базовый образец вашего лица для повышения точности работы без ухудшения безопасности.

Защита биометрии информации.

Множество клиенты боятся сохранять свои био-идентификационные данные на телефоне из-за риска утечки данных или хакерской атаки. Иные компании, например vulkan russia, предлагают варианты для улучшения сохранности данных юзеров.

• Локальное хранение: Основная часть устройств записывает биометрические модели лишь внутрь защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не оставляют гаджет и недоступны включая производителю.

• Шифрование: Все информация сберегаются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих разработчиков не имеют прямого доступа к биометрическим данным; они могут лишь требовать факт верификации идентичности через системный API.

Следует подчеркнуть существенную подробность: в случае, если кто-то достанет физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество изготовители осуществляют защиту от автоматического разблокирования — например, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют типы распознавания лиц?

В настоящее время можно определить определить три главных способа к осуществлению этой функции:

Программируемое двухмерное определение

Применяется только передняя видеокамера без дополнительных сенсоров глубины. Такой метод встречается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность осуществления; минимальная цена; оперативная функционирование при хорошем освещении.
Минусы: несложно ввести в заблуждение фотографией; нестабильная работа ночью; недостаточная безопасность.

Оборудование для объёмное сканирование

Применяет ИК камеру + проектор точек + датчики дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Плюсы: значительная достоверность; не получится обмануть изображение/видеозапись; стабильная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана («чёлка»)

Комбинированные методы с интеграцией ИИ

Используют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам («anti-spoofing»). Например, такие изделия, например вулкан россии и Google Pixel Face Unlock современных версий, объединяют фронтальную камеру c ИК датчиком мобильности Soli Radar для защиты от подделок жестами/масками/видеоэкранами чужих устройств.

Образцы использования разнообразных методов

• iPhone серии X/11/12/13/14 задействуют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые представил аналог Face ID в ряду Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное 2D определение по изображению фронталкой, так и сканер ириса глаза.
• Huawei Mate20 Pro применяет набор из ИК-подсветки + Dot Projector + ToF-датчик

Вопросы безопасности и ошибочные срабатывания

Несмотря на замечательный успехи инноваций за прошедшие годы, идеальных систем пока не имеется:

1. Вероятность подвоха: Бюджетные мобильники без труда «разблокируются» четкой изображением хозяина либо роликом с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые совершенные устройства могут перепутать между монозиготными близнецами либо родичами с очень похожей внешностью.
3. Трансформации облика: Стремительное утрата веса/набор веса, хирургические вмешательства или травмы иногда необходимы для перерегистрации биометрических данных.
4. Условия фотографирования: Интенсивная засветка солнцем или же интенсивная тень могут снизить точность идентификации признаков.

Вот пара советов по безопасному использованию:

• Для важных операций всегда внедряйте двухфакторную аутентификацию;
• Не запускайте опцию «Разблокировка по лицу» на дешёвых моделях без ИК-сенсоров;
• Регулярно обновляйте прошивку программное обеспечение телефона для обеспечения безопасности от современных угроз;
• Включайте опцию «Требовать раскрытых глаз» там, где она имеется.

В каких областях ещё находится применение технологии помимо смартфонов?

Хотя тема нашей статьи посвящена именно мобильным устройствам, следует отметить других сферах применения технологии:

• Мониторинг доступа в деловых центрах и резиденциях;
• Платёжные устройства финансовых учреждений («Face Pay»);
• Цифровые паспорта последнего поколения;
• Комплексы видеоконтроля городских сервисов;
• Автоматизация регистрации явки школ/институтов;
• Авторизация юзеров персональных компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система платежа проезда по лицу («Face Pay») — хватит пройти через турникет без карты или мобильника! Аналогичные программы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом изменяется техпроцесс в наше время?

Любой годочек проявляются свежие концепции для повышения качества работы систем распознавания лиц:

1. Увеличивается детализация сенсоров — чем больше деталей фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность ошибки;
2. Улучшаются нейросети — передовые архитектуры типа MobileNetV3 дают возможность быстро адаптироваться к свежим особенностям облика пользователя прямо на устройстве без пересылки информации в облачное хранилище.
3. Совершенствуются способы антиспуфинга — теперь смартфоны умеют распознавать подлинные живые облики от статичных снимков/маскировок по незаметным микродвижениям.
4. Синхронизация со умными устройствами — смарт-часы могут автоматически закрыть доступ к мобильный телефон, если пользователь отошёл далеко.
5. Появляются гибридные системы — к примеру совмещающие речевую опознание + облик + пальцевой отпечаток.

Итак, те тренды в особенности популярны на сегодняшний день:

1) Сокращение компонентов

Производители намереваются минимизировать величину прорези («чёлки») для сенсоры на экране за счёт встраивания компактных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения приватности всё больше обработки данных выполняется локально без отправки данных во дополнительный облачный сервис.

3) Унификация стандартов

Гугл интенсивно пропагандирует стандарт BiometricPrompt API, для того чтобы подобные площадки, например как вулкан россия, и любые Android-аппы могли взаимодействовать с любыми видами биометрии унифицированно.

Какое решить сегодня?

Когда вам нужна максимальная безопасность данных, подбирайте передовые устройства с вмонтированным ИК-излучателем либо ToF-датчиком глубины.

• iPhone всех существующих актуальных версий
• Huawei Companion/Series P линейки
• Mi Pro
• Vivo X серии
• Oppo Найти Х линейки.

Если финансы скромен – лучше отдавать предпочтение традиционным средствам безопасности (PIN-код/сканер отпечатка), а опцию «разблокировка по лицу», такую как в вулкан россия, задействовать только как второстепенную опцию удобства.

Как повысить практичность работы функции?

Есть некоторые лайфхаков для людей, кто уже пользуется разблокировку по лицу:

1. Периодически обновляйте свою изображение-шаблон, если сильно меняется облик.
2. Не забывайте чистить объектив передней камеры – загрязнения могут понизить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам активирует камеру как только вы поднимаете его.
4. Во время регистрационного процесса пытайтесь сохранять голову ровно перед видеоустройства исключая резкого наклона головы.
5. Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отвели взгляд от дисплея.

Перспективы эволюции инноваций

В скоро наступающие периоды можно предвкушать возникновения полностью безконтактных способов идентификации человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + голос + походка + жесты рук!

Также возможно возникновение свежих способов защиты приватности – скажем, изменяющееся корректировка электронного паттерна после каждой удачной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из самых захватывающих технологий нашего времени! Она делает интеракцию со мобильным устройством удобнее чем раньше, и такие аппы, как vulkan russia, могут существенно повысить ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы знаете, как функционирует эта система внутри, – сможете более осмысленно выбирать свой будущий гаджет!