Как действует распознавание лицевых образов в телефонах

Для чего мы останавливаемся на разблокирование по лицевому распознаванию

В последние времена определение лиц является одной из самых распространённых функций для деблокировки умных телефонов. Еще несколько лет тому назад основная часть пользователей удовлетворялись PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Какая вещь превращает данную возможность настолько популярной? Для начала, это удобно: не нужно помнить трудные пароли или находить верный палец в темноте. Также, это оперативно: современные программы узнают лицо буквально за доли секунды. В-третьем пункте, это ощущение футуризма — словно в фильмах про вулкан казино шпионов.

Впрочем за данной видимой несложностью прячется целый вселенная комплексных методов и инженерных решений. Позвольте нам понять, как конкретно работает фейсканирование в актуальных гаджетах, какие применяются технологии, насколько они надёжны и что нас предстоит.

Сжатая повествование развития технологии

Идентификация лиц как методика присутствует уже более 50 годов. Первые пробы автоматизированного анализа лиц были осуществлены еще в 1960-х годы в научных учреждениях США. Тогда компьютеры способны были лишь выделять контуры лица и определять расстояния между зрачками и устами на черно-белых снимках.

Изначальные коммерческие платформы возникли в 90-х, но они были неидеальны: работали медленно и часто ошибались. Только с прогрессом синтетических сетей и таких платформ, как вулкан россии, мощных мобильных процессоров определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали внедрять личные разработки.

Основные этапы действия системы определения

Процесс распознавания лица можно условно разделить на несколько важных этапов:

Распознавание лиц — аппарат определяет наличие человеческого образа в кадре.
Извлечение характеристик — система изучает контуры физиономии: конфигурацию глаз, носа, губ, положение бровей.
Построение модели — создаётся особенный цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с стандартом — полученный образец сопоставляется со зафиксированной при внесении биометрической данными владельца.
Принятие определения — если сходство достаточно значительное, смартфон разблокируется.

Любой из этих шагов нуждается в специальных процедур и усовершенствований для скорой работы прямо на устройстве.

Железные компоненты: что скрыто в их недрах

Обычная фронтальная камера.

Самый несложный метод идентификации облика применяет лишь переднюю видеокамеру мобильного устройства. Такой метод внедрён во многих доступных вариантах Android-девайсов.

Сильные стороны:

Необходимо нуждается в внешних сенсоров.
Быстро работает при достаточном свете.

Отрицательные стороны:

Легко ввести в заблуждение снимком или видеозаписью.
Неправильно действует при низком освещении или нестандартных точках зрения.

Инфракрасная камера и пунктирный проекционный аппарат

Более совершенные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология является основой Face ID от Apple.

Как это работает:

Точечный проекционный прибор отображает на облик использующего невидимую сетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 меток).
ИК камера записывает деформацию этой решетки по плоскости лица.
Получается 3D карта глубины глубинности, которая почти что неосуществима для фальсификации стандартной фотографией или маскировкой.

Плюсы

Надёжная функционирование даже в полной тьме.
Большая защита к фальсификациям.
Точность определения более 99%.

Добавочные датчики

В некоторых девайсах используются также экстра сенсоры: ToF (Time-of-Flight), которые определяют период распространения света до объекта и обратно; Трехцветные-датчики дальности; специальные лазерные лидары для создания более детализированной 3D-модели лица.

Эти разработки используются в основном во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные алгоритмы: искуственный разум на исполнении

Современные устройства распознавания лиц невозможны без применения artificial intelligence и машинного обучения. Именно из-за таким технологиям, как вулкан россии, устройство может распознавать юзера даже при метаморфозах внешности: новая причёска, щетина, оптика или макияж не становятся препятствием для деблокировки.

Распознавание лиц

При начальном этапе программа должна оперативно обнаружить ликовое изображение внутри целого кадра с камеры. Для этого применяются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” находить лица людей среди множества других объектов.

Пример: метод MTCNN в состоянии находить лицо даже при частичном перекрытии (например, шалью или ладонью).

Идентификация основных аспектов

После распознавания лица механизм, такая как вулкан россии, устанавливает расположение ключевых точек: уголки глаз, кончик носа, края губ и так далее. Часто применяется от 68 до 128 ключевых меток на лицевой области.

Данное нужно для стабилизации визуала: если человек удерживает телефон под углом, или наклонил голову, программа исправляет картинку до нормального состояния для последующего изучения.

Формирование биометрического модели

Далее нейросеть строит уплотненное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 флоатов.

Данный формат весьма затруднительно подделать: он не хранит само изображение юзера, а лишь особенные черты его облика, что делает его оптимальным для таких систем, как vulkan russia.

Сравнительный анализ и принятие выбора

Когда юзер хочет разлочить телефон глазами, механизм воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный порог (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ блокируется.

Приспособление к трансформациям внешнего вида

Занимательная особенность актуальных систем — возможность самообучения. Если вы часто разблокируете телефон с новой прической или очками, алгоритм постепенно освежает основной шаблон вашего лица для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических данных информации.

Многие пользователи опасаются держать свои биометрические данные на телефоне из-за риска утечки данных или хакерской атаки. Некоторые организации, вроде vulkan russia, предлагают методы для улучшения защиты данных юзеров.

Локальное сохранение: Большинство аппаратов сохраняет биометрические образцы исключительно внутрь защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют аппарат и закрыты включая создателю.
Шифрование: Все сведения хранятся только в шифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Программы внешних девелоперов не обладают прямого доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения личности через системный API.

Необходимо отметить значимую особенность: в случае, если кто-то сможет получить физический доступ к вашему телефону (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители осуществляют систему защиты от неосознанного разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно существуют типы распознавания лиц?

Сегодня можно различить 3 ключевых подхода к реализации этой функции:

Софтверное плоское идентификация

Эксплуатируется только передняя камера без вспомогательных детекторов дистанции. Подобный метод наблюдается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; минимальная стоимость; скоростная деятельность при качественном освещении.
Минусы: легко одурачить снимком; ненадежная работа ночью; слабая безопасность.

Техническое 3D оцифровка

Задействует ИК камеру + проектор пикселей + сенсоры глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Достоинства: большая достоверность; нельзя подделать изображение/видеозапись; устойчивая деятельность при любом освещении.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с дополнением ИИ

Применяют комбинацию программных методов + аппаратно-техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как вулкан россии и Google Pixel Face Unlock современных поколений, сочетают фронтальную камеру c инфракрасным датчиком движения Soli Radar для предотвращения от подделок руками/масками/видеодисплеями посторонних устройств.

Образцы использования различных способов

iPhone модели X/11/12/13/14 применяют только аппаратное трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition в первый раз представил аналог Face ID среди Android.
Samsung Galaxy S10 версия/S20 обеспечивают как софтверное двухмерное определение по снимку фронталкой, так и сенсор ириса глаза.
Huawei Mate20 Pro применяет набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Вопросы безопасности и неверные тревоги

Несмотря на поразительный успехи технологий за последние лет, безупречных систем пока не имеется:

Вероятность мошенничества: Бюджетные мобильники легко открываются четкой снимком хозяина или видеозаписью с экрана другого устройства.
Идентичные близнецы: Даже самые безупречные системы могут перепутать между монозиготными близнецами либо родственниками с очень похожей внешностью.
Метаморфозы облика: Резкое снижение веса/увеличение массы тела, косметические процедуры или травмы порой необходимы для перерегистрации биометрии.
Условия записи: Интенсивная освещённость солнцем или же глубокая темнота могут снизить аккуратность распознавания признаков.

Ниже несколько подсказок по надёжному применению:

Для важных операций всегда внедряйте двухэтапную аутентификацию;
Не запускайте возможность “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
Систематически обновляйте ПО смартфона для предотвращения угроз от новых видов атак;
Включайте опцию “Требовать раскрытых глаз” там, где она есть.

Где ещё используется технология за исключением мобильных телефонов?

Пускай основная мысль этой публикации касается именно смартфонам и планшетам, следует отметить других сферах применения технологии:

Контроль входа в рабочих помещениях и резиденциях;
Платёжные терминалы банков (“Face Pay”);
Цифровые паспорта нового поколения;
Установки видеомониторинга муниципальных подразделений;
Автоматизация учёта посещаемости образовательных учреждений/вузов;
Аутентификация пользователей компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Схожие программы осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как меняется технический процесс в нынешнее время?

Всякий год проявляются свежие концепции для повышения стандарта деятельности систем лицевого распознавания:

Увеличивается разрешение датчиков — чем больше элементов фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс неточности;
Совершенствуются нейросети — передовые архитектуры вида MobileNetV3 дают возможность оперативно осваивать дополнительным характеристикам внешности владельца непосредственно на девайсе без отправки данных в облако.
Развиваются технологии антиспуфинга — теперь телефоны способны отличать реальные живые лица от фиксированных фотографий/маскировок по незаметным движениям кожи.
Взаимодействие со смарт-гаджетами — интеллектуальные часы могут авто заблокировать телефон, если обладатель ушёл далеко.
Возникают смешанные механизмы — в частности объединяющие речевую идентификацию + лицо + пальцевой отпечаток.

Здесь, которые направления очень востребованы на сегодняшний день:

1) Миниатюризация деталей

Производители стараются минимизировать габариты выреза (“чёлки”) под сенсоры на экране за счёт встраивания маленьких ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на девайсе

Для увеличения личной безопасности всё больше вычислений осуществляется локально без передачи данных во дополнительный облачный услугу.

3) Упорядочивание регламентов

Google интенсивно продвигает норму BiometricPrompt API, с целью чтобы такие площадки, вроде вулкан россия, и каждые Android-приложения были совместимы с любыми видами биометрии единообразно.

Какое подобрать на сегодня?

Когда тебе нужна максимальная сохранность информации, остановите выбор на передовые устройства с вмонтированным ИК-излучателем или же ToF-датчиком глубины.

iPhone каждого актуальных версий
Huawei Mate/P ряда
Xiaomi Professional
Vivo X серии
Оппо Обнаружить Х линейки.

Если финансы невелик – лучше отдавать предпочтение классическим методам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, задействовать только как второстепенную возможность комфорта.

Каким способом улучшить удобство функционирования опции?

Есть несколько советов для людей, кто уже пользуется функцию распознавания лица:

Часто обновляйте свою фото-шаблон, если значительно трансформируется внешность.
Не забывайте протирать линзу передней камеры – разводы могут уменьшить четкость!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего телефон сам активирует фотоаппарат когда вы поднимаете его.
При регистрационного процесса постарайтесь удерживать голову ровно напротив объектива не допуская резкого наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от дисплея.

Будущее развития техники

В предстоящие периоды можно ожидать появления полностью бесконтактных способов идентификации человека сразу по нескольким биометрическим данным параметрам одновременно: лицо + речь + манера ходьбы + движения рук!

Также возможно развитие новых методов обеспечения личной информации – скажем, динамическое модификация электронного шаблона после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее захватывающих технологий нашего времени! Она обеспечивает взаимодействие со мобильным устройством проще чем раньше, и такие приложения, как vulkan russia, могут значительно повысить ваш юзерский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как устроена эта методика изнутри, – будете в состоянии осознаннее выбирать свой очередной устройство!