Как действует распознавание лицевых образов в смартфонах

Зачем мы останавливаемся на разблокирование по фейсу

В последние годы определение физиономий стало одной из самых популярных возможностей для открытия умных телефонов. Лишь некоторые годов тому назад большинство юзеров обходились PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает эту конкретную функцию такой востребованной? Для начала, это удобно: не нужно запоминать замысловатые пароли или находить нужный палец в тьме. Во-вторых, это быстро: современные программы распознают лицо фактически за доли секунды. В-третьем пункте, это ощущение футуристичности — будто в фильмах про вулкан россия агентов.

Однако за такой кажущейся простотой прячется целый вселенная комплексных технологий и инженерных концепций. Попробуем понять, как точно работает идентификация по лицу в новейших мобильных телефонах, какие бывают способы, насколько они надёжны и что нас предстоит.

Краткая повествование прогресса техники

Идентификация лиц как технология имеется уже более пятидесяти лет. Начальные эксперименты автоматизированного анализа лица были сделаны еще в 1960-х годы в лабораториях США. Тогда вычислительные машины умели лишь выделять контуры лица и измерять дистанции между зрачками и губами на ахроматических снимках.

Начальные бизнес установки возникли в 90-х, но они были несовершенны: работали медленно и нередко ошибались. Только с развитием синтетических сетей и таких платформ, как вулкан россии, сильных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие стали интегрировать собственные решения.

Основные этапы действия механизма определения

Процесс определения лица можно условно поделить на несколько ключевых этапов:

1. Идентификация лица — аппарат выявляет существование человеческого лица в кадре.
2. Выделение характеристик — механизм анализирует контуры облика: очертания глаз, обонятельного органа, уст, расположение бровей.
3. Построение модели — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со образцом — полученный модель сверяется с зафиксированной при регистрации биометрической данными владельца.
5. Принятие определения — если сходство достаточно значительное, смартфон открывается.

Каждый из указанных этапов требует индивидуальных методов и усовершенствований для быстрой работы прямо на устройстве.

Технические компоненты: что прячется внутри них

Типичная передняя камера.

Простейший легкий вариант идентификации физиономии использует только переднюю видеокамеру мобильного устройства. Такой способ осуществлён во многочисленных доступных версиях Android-девайсов.

Плюсы:

• Не требует внешних сенсоров.
• Шустро действует при достаточном освещённости.

Недостатки:

• Легко ввести в заблуждение изображением или видеозаписью.
• Плохо работает при плохом свете или необычных углах обзора.

ИК камера и точечный проектор

Более продвинутые системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика является основой Face ID от Apple.

Как это действует:

• Точечный проектор отображает на облик юзера невидимую структуру из тысяч инфракрасных точек (например, Face ID применяет около 30 000 меток).
• Инфракрасная устройство регистрирует искривление этой решетки по плоскости физиономии.
• Создаётся трёхмерная карта глубины, которая практически неподвластна для подделки типичной фотографией или маской.

Преимущества

• Надёжная функционирование даже в полной темноте.
• Большая защита к имитациям.
• Точность распознавания выше 99%.

Добавочные сенсоры

В некоторых аппаратах задействуются также экстра сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время прохождения луча до предмета и обратно; Трехцветные-датчики глубины; специальные лазерные дальномеры для построения более детализированной 3D-модели физиономии.

Эти технологии используются в основном во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический ум в действии

Нынешние механизмы идентификации физиономий немыслимы без использования artificial intelligence и machine learning. Именно из-за таким инновациям, как вулкан россии, гаджет в состоянии распознавать пользователя даже при метаморфозах внешнего вида: новая укладка, растительность на лице, линзы или косметика не становятся барьером для открытия.

Детектирование лиц

При стартовом шаге программа обязана мгновенно распознать лицо в пределах целого изображения с камеры. Для этого применяются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” идентифицировать человеческие лица среди множества других объектов.

Пример: метод MTCNN в состоянии распознавать лицо даже в случае частичном закрытии (например, шалью или рукой).

Идентификация ключевых моментов

После идентификации лица система, такая как вулкан россии, вычисляет местоположение основных точек: уголки глаз, конец носа, границы губ и так далее. Как правило задействуется от 68 до 128 основных точек на лице.

Данное нужно для нормализации визуала: если пользователь держит смартфон под наклоненным, или склонил голову, программа исправляет изображение до обычного угла для последующего изучения.

Создание биометрического идентификатора шаблона

Далее нейронная сеть строит компактное цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот шаблон весьма затруднительно имитировать: он не хранит само изображение пользователя, а лишь уникальные характеристики его внешности, что делает его идеальным для таких платформ, как vulkan russia.

Сравнение и вынесение решения

Когда человек хочет разблокировать мобильник глазами, механизм осуществляет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа vulkan russia, доступен; если нет — доступ не предоставляется.

Адаптация к трансформациям облика

Занимательная черта современных систем — возможность самостоятельного обучения. Если вы постоянно разблокируете мобильное устройство с новой укладкой или оптикой, система постепенно модернизирует основной образец вашего облика для повышения точности работы без ухудшения безопасности.

Защита биометрии информации.

Большинство юзеры беспокоятся хранить свои био-идентификационные данные на смартфоне из-за вероятности потери данных или взлома устройства. Иные организации, например vulkan russia, предлагают решения для увеличения сохранности информации пользователей.

• Локальное хранение: Большинство девайсов записывает биометричные модели лишь в пределах безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не покидают устройство и недоступны даже создателю.

• Шифрование: Все информация сберегаются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих девелоперов не обладают прямого возможности доступа к биометрическим данным; они могут лишь требовать подтверждение подтверждения идентичности через системный API.

Необходимо отметить значимую особенность: если какой-то человек достанет доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители осуществляют систему защиты от “слепого” разблокирования — в частности, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют виды определения лиц?

В настоящее время можно определить определить 3 главных метода к осуществлению этой операции:

Софтверное 2D распознавание

Используется только фронтальная камера без дополнительных датчиков дистанции. Этот метод наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость реализации; умеренная цена; скоростная деятельность при достаточном освещении.
Минусы: просто обмануть снимком; нестабильная работа ночью; недостаточная защищенность.

Оборудование для трёхмерное оцифровка

Использует ИК видеокамеру + проектор пикселей + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: значительная надежность; не получится обмануть фото/видео; постоянная работа в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные методы с ИИ-дополнением

Применяют комбинацию программируемых методов + аппаратную обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например вулкан россии и Google Pixel Face Unlock новейших версий, сочетают фронталку c инфракрасным сенсором мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Образцы эксплуатации разных методов

• iPhone модели X/11/12/13/14 применяют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз представил эквивалент Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как софтверное плоское идентификацию по фото фронтальной камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro использует систему из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Вопросы защиты и неверные тревоги

Несмотря на замечательный успехи инноваций за последние годы, безупречных системы пока не существует:

1. Вероятность обмана: Доступные телефоны просто открываются высококачественной снимком пользователя или видеозаписью с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные механизмы могут перепутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
3. Метаморфозы внешнего вида: Резкое утрата веса/увеличение массы тела, хирургические вмешательства или повреждения иногда требуют повторной регистрации биометрических данных.
4. Условия фотографирования: Сильная подсветка солнечным светом или же интенсивная темнота могут понизить верность распознавания признаков.

Ниже некоторые подсказок по безопасному эксплуатации:

• Для значимых операций всегда используйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Регулярно апгрейдите прошивку смартфона для защиты от современных угроз;
• Включайте функцию “Требовать распахнутых глаз” в тех местах, где она есть.

В каких местах ещё находится применение технология за исключением мобильных телефонов?

Несмотря на то, что тема этой публикации посвящена конкретно мобильным устройствам, необходимо сказать о прочих направлениях внедрения технологии:

• Контроль входа в рабочих помещениях и жилых домах;
• Платёжные устройства банков (“Face Pay”);
• Виртуальные удостоверения личности последнего поколения;
• Комплексы видеоконтроля городских подразделений;
• Механизация регистрации посещаемости школ/институтов;
• Вход пользователей компьютеров/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — достаточно пройти через барьер без пластика или мобильника! Похожие проекты осуществляются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом трансформируется техпроцесс в нынешнее время?

Каждый годочек проявляются новые идеи для усовершенствования уровня функционирования систем распознавания лиц:

1. Увеличивается детализация сенсоров — чем больше элементов фиксируется фотоаппаратом/глубинными сенсорами, тем меньше шанс погрешности;
2. Совершенствуются искусственные интеллекты — новейшие архитектуры модели MobileNetV3 обеспечивают возможность быстро адаптироваться к дополнительным чертам облика владельца напрямую на гаджете без отправки данных в облако.
3. Совершенствуются способы антиспуфинга — теперь смартфоны способны отличать настоящие анимированные лица от статичных снимков/масок по мельчайшим микродвижениям.
4. Интеграция со интеллектуальными приборами — умные часы могут самостоятельно закрыть доступ к телефон, если пользователь ушёл далеко.
5. Проявляются гибридные механизмы — например объединяющие аудио идентификацию + облик + пальцевой отпечаток.

Здесь, какие тренды очень актуальны на сегодняшний день:

1) Миниатюризация элементов

Изготовители стараются минимизировать размер выреза (“чёлки”) для сенсоры на дисплее за счёт внедрения маленьких ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на устройстве

Для повышения личной безопасности всё более расчётов происходит внутри устройства без пересылки данных во внешний облачный услугу.

3) Упорядочивание стандартов

Google активно продвигает норму BiometricPrompt API, чтобы аналогичные платформы, как вулкан россия, и любые Android-аппы были совместимы с всеми формами биометрии унифицированно.

Какое подобрать на сегодня?

Если тебе нужна предельная защита данных, выбирайте флагманские модели с интегрированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone всех существующих актуальных поколений
• Huawei Mate/P линейки
• Mi Expert
• Vivo X модели
• Оппо Обнаружить Х серии.

Если средства ограничен – лучше предпочесть обычным методам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в вулкан россия, применять только как второстепенную опцию комфорта.

Каким способом увеличить удобство использования функции?

Есть пара советов для тех, кто уже применяет разблокировку по лицу:

1. Часто обновляйте свою фото-шаблон, если кардинально меняется внешний вид.
2. Не забывайте чистить линзу фронтальной камеры – пятна могут уменьшить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам включает фотоаппарат когда вы поднимаете его.
4. Во время записи постарайтесь удерживать лицо ровно напротив камеры не допуская сильного наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от экрана.

Перспективы прогресса технологии

В ближайшие времена можно предвкушать возникновения полностью бесконтактных способов распознавания индивидуума сразу по нескольким биометрическим параметрам одновременно: лицо + звучание + походка + движения рук!

Также вероятно возникновение новых методов защиты личной информации – скажем, переменное корректировка цифрового паттерна после каждой успешной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее увлекательных технологий нашего периода! Она обеспечивает взаимодействие со телефоном комфортнее чем когда-либо прежде, и такие программы, как vulkan russia, могут значительно улучшить ваш опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как устроена эта система изнутри, – сумеете более осмысленно определять свой будущий гаджет!