Как действует распознавание лиц в телефонах

Почему мы предпочитаем разблокирование по фейсу

В прошлые времена определение лиц является одной из наиболее востребованных функций для деблокировки смартфонов. Еще некоторые годков ранее основная масса юзеров удовлетворялись пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, как admiral x, нам вполне просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что обуславливает эту функцию настолько популярной? Прежде всего, это практично: не нужно запоминать замысловатые пароли или искать нужный палец в тьме. Во-вторых, это оперативно: современные системы распознают лицо буквально за мгновения ока. В-третью очередь, это чувство будущего — как будто в кинофильмах про адмирал х казино разведчиков.

Однако за этой на первый взгляд несложностью скрывается полный универсум сложных методов и инженерных концепций. Попробуем разобраться, как точно функционирует фейсканирование в новейших смартфонах, какие применяются способы, насколько они надёжны и что нас ждёт впереди.

Короткая история прогресса инноваций

Распознавание лиц как методика имеется уже более 50 лет. Первые пробы автоматического исследования лица были сделаны еще в 1960-х годах в лабораториях США. Тогда вычислительные машины умели лишь обозначать очертания головы и измерять расстояния между глазами и устами на черно-белых снимках.

Начальные коммерческие установки возникли в 1990-х годах, но они были неидеальны: работали медленно и часто ошибались. Только с эволюцией синтетических сетей и таких площадок, как адмирал х, высокопроизводительных мобильных микросхем распознавание лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и прочие стали интегрировать личные разработки.

Ключевые шаги работы механизма идентификации

Процесс определения лица можно ориентировочно разделить на несколько основных этапов:

1. Распознавание лица — аппарат выявляет наличие гуманного лица в снимке.
2. Извлечение особенностей — система изучает черты физиономии: очертания зрительных органов, носа, губ, позицию бровей.
3. Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со образцом — сформированный образец сопоставляется с сохранённой при регистрации биометрической сведениями владельца.
5. Принятие выбора — если соответствие достаточно значительное, смартфон открывается.

Всякий из этих этапов требует специальных методов и улучшений для оперативной работы непосредственно на девайсе.

Аппаратные составляющие: что прячется внутри них

Обычная селфи камера.

Самый простой несложный вариант распознавания лица использует только лицевую видеокамеру мобильного устройства. Такой способ внедрён во различных бюджетных версиях Android-устройств.

Достоинства:

• Не нуждается в потребляет внешних датчиков.
• Быстро функционирует при качественном освещённости.

Минусы:

• Легко одурачить изображением или роликом.
• Неправильно работает при низком освещённости или необычных ракурсах.

ИК камера и пунктирный проекционный аппарат

Более совершенные системы, такие как адмирал х, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика является основой Face ID от Apple.

Каким образом это функционирует:

• Точечный проектор отображает на физиономию пользователя невидимую решетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 меток).
• Инфракрасная камера фиксирует искривление данной сетки по плоскости физиономии.
• Создаётся трёхмерная карта глубины глубинности, что практически неосуществима для имитации стандартной фотографией или маскировкой.

Плюсы

• Надёжная функционирование даже в полной тьме.
• Высокая сопротивляемость к подделкам.
• Точность распознавания выше 99%.

Дополнительные сенсорные устройства

В отдельных девайсах используются также дополнительные сенсоры: ToF (Time-of-Flight), которые фиксируют период распространения света до предмета и обратно; Цветные-датчики глубины; специальные световые дальномеры для создания более точной 3D-модели физиономии.

Эти технологии применяются наиболее часто во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: искусственный разум в действии

Нынешние устройства распознавания лиц невозможны без применения искусственного интеллекта и машинного обучения. Именно благодаря таким технологиям, как адмирал х, аппарат способно узнавать пользователя даже при метаморфозах внешнего вида: новая стрижка, растительность на лице, оптика или макияж не становятся препятствием для открытия.

Обнаружение физиономии

В начальном стадии алгоритм обязана оперативно найти образ лица в пределах всего снимка с камеры. Для данной цели используются многоуровневые классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены идентифицировать лица людей среди множества других объектов.

Пример: метод MTCNN может распознавать облик даже при неполном перекрытии (например, шарфом или рукой).

Выделение ключевых моментов

После распознавания лица устройство, такая как адмирал х, определяет положение основных точек: уголки глаз, конец носа, края губ и так далее. Часто задействуется от 68 до 128 ключевых меток на лице.

Данное нужно для стабилизации картинки: если пользователь находится с телефон под наклоном, или повернул головку, программа исправляет изображение до обычного угла для дальнейшего анализа.

Формирование биометрического идентификатора шаблона

Далее нейросеть строит уплотненное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Такой формат крайне затруднительно имитировать: он не хранит само фото юзера, а лишь уникальные особенности его вида, что делает его совершенным для таких платформ, как admiral-x.

Сопоставление и осуществление заключения

В случае, когда юзер намеревается разлочить мобильник взглядом, система повторяет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный границу (обычно больше 99%), телефон, как и платформа admiral-x, разблокируется; если нет — доступ запрещается.

Привыкание к метаморфозам внешнего вида

Увлекательная характеристика актуальных системы — возможность самообучения. Если вы часто доступаете к смартфон с обновленной укладкой или оптикой, алгоритм постепенно обновляет эталонный образец вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрических информации.

Большинство пользователи опасаются хранить свои биометрические данные на смартфоне из-за риска утечки информации или взлома гаджета. Определенные организации, вроде admiral-x, предлагают решения для увеличения сохранности данных пользователей.

• Локальное хранение: Преимущественно устройств записывает био-идентификационные модели исключительно внутрь защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не оставляют устройство и недоступны даже создателю.

• Шифрование: Все информация сберегаются только в зашифрованном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих девелоперов не имеют прямого возможности доступа к биометрическим; они могут лишь запрашивать подтверждение верификации личности через системный API.

Стоит подчеркнуть значимую подробность: если какой-то человек сможет получить доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители реализуют систему защиты от автоматического разблокирования — например, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают категории идентификации лиц на изображениях?

Сегодня можно различить 3 ключевых метода к реализации этой функции:

Программируемое плоское идентификация

Применяется только передняя видеокамера без дополнительных датчиков глубины. Подобный способ встречается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость осуществления; умеренная цена; быстрая деятельность при достаточном свете.
Минусы: несложно ввести в заблуждение фотографией; нестабильная функционирование ночью; низкая защищенность.

Техническое трёхмерное сканирование

Задействует ИК видеокамеру + проекционный модуль точек + датчики дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Преимущества: значительная надёжность; не получится обмануть фото/видео; устойчивая работа при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные способы с ИИ-дополнением

Применяют комбинацию софтверных методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например адмирал х и Google Pixel Face Unlock новейших поколений, сочетают фронталку c ИК сенсором движения Soli Radar для защиты от подделок руками/масками/видеоэкранами посторонних устройств.

Иллюстрации использования разнообразных техник

• iPhone серии X/11/12/13/14 применяют только техническое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз представил подобие Face ID в числе Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное плоское распознавание по изображению фронтальной камерой, так и сканер глазного ириса.
• Huawei Mate20 Pro задействует систему из ИК-подсветки + Dot Projector + ToF-сенсор

Проблемы безопасности и ошибочные сигналы

Несмотря на впечатляющий прогресс инноваций за недавние годы, совершенных систем пока не имеется:

1. Вероятность подвоха: Доступные телефоны просто открываются высококачественной снимком хозяина либо видеозаписью с экрана другого устройства.
2. Идентичные двойняшки: Даже самые совершенные устройства могут ошибиться между однояйцевыми близнецами либо родичами с очень похожей внешностью.
3. Метаморфозы внешнего вида: Стремительное утрата веса/увеличение массы тела, пластические операции либо травмы иногда требуют обновления данных биометрии.
4. Условия съёмки: Яркая освещённость солнечным светом либо плотная темнота могут уменьшить верность распознавания признаков.

Ниже несколько советов для защищённому эксплуатации:

• Для критически важных операций всегда внедряйте дополнительную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Регулярно апгрейдите прошивку мобильного устройства для предотвращения угроз от новых видов атак;
• Включайте настройку “Требовать распахнутых глаз” в тех местах, где она доступна.

Где ещё используется технология за исключением смартфонов?

Несмотря на то, что основная мысль нашей публикации посвящена конкретно смартфонам и планшетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Мониторинг входа в деловых центрах и резиденциях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Виртуальные паспорта последнего образца;
• Комплексы видеонаблюдения городских служб;
• Автоматизация учёта посещаемости образовательных учреждений/вузов;
• Вход пользователей компьютеров/ноутбуков.

Например: В московском метро уже тестируется система платежа проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без пластика или мобильника! Похожие проекты реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом изменяется технология сегодня?

Любой год проявляются новые идеи для усовершенствования уровня функционирования систем идентификации лиц:

1. Увеличивается разрешение сенсорных устройств — чем больше информации фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс ошибки;
2. Улучшаются нейросети — современные структуры модели MobileNetV3 позволяют скоростно осваивать дополнительным особенностям облика пользователя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Улучшаются технологии антиспуфинга — теперь телефоны способны отличать подлинные анимированные лица от статичных фотографий/маскировок по мельчайшим микродвижениям.
4. Интеграция со умными устройствами — умные часы могут авто закрыть доступ к смартфон, если обладатель ушёл далеко.
5. Проявляются гибридные механизмы — в частности комбинирующие голосовую аутентификацию + лицо + пальцевой отпечаток.

Здесь, которые тренды в особенности востребованы в данный момент:

1) Уменьшение элементов

Производители стараются уменьшить величину отверстия (“чёлки”) под сенсоры на дисплее за счёт встраивания компактных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для улучшения конфиденциальности всё более вычислений осуществляется локально без отправки данных во дополнительный облачный сервис.

3) Унификация регламентов

Google интенсивно продвигает эталон BiometricPrompt API, чтобы такие платформы, вроде admiral x, и все Android-программы были совместимы с всеми формами биометрии единообразно.

Что подобрать на сегодня?

Когда тебе необходима предельная безопасность информации, подбирайте передовые устройства с интегрированным ИК-излучателем либо ToF-датчиком глубины.

• iPhone всех существующих новейших версий
• Huawei Companion/P линейки
• Xiaomi Professional
• Vivo X модели
• Oppo Найти X серий.

Если бюджет ограничен – лучше предпочесть обычным средствам защиты (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в admiral x, использовать только как дополнительную возможность комфорта.

Как повысить практичность использования функции?

Есть пара советов для тех, кто уже использует разблокировку через лицо:

1. Регулярно обновляйте свою изображение-шаблон, если сильно изменяется внешний вид.
2. Не упускайте из виду чистить линзу передней камеры – загрязнения могут уменьшить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам включает камеру как только вы поднимаете его.
4. При записи старайтесь удерживать лицевую часть неподвижно напротив видеоустройства не допуская сильного наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от экрана.

Будущее эволюции инноваций

В предстоящие годы можно предполагать возникновения полностью бесконтактных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + голос + шаги + жесты рук!

Также вероятно возникновение современных подходов охраны конфиденциальности – к примеру, изменяющееся корректировка электронного паттерна после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из очень увлекательных инноваций нашего эпохи! Она обеспечивает интеракцию со мобильным устройством комфортнее чем когда-либо прежде, и такие программы, как admiral-x, могут существенно улучшить ваш опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как функционирует эта технология изнутри, – сможете осознаннее определять свой следующий устройство!