Каким образом работает определение лиц в смартфонах

Почему мы предпочитаем разблокировку по лицу

В последние времена идентификация лиц является одной из самых популярных возможностей для разблокировки мобильных телефонов. Лишь несколько годов назад основная часть использующих удовлетворялись PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какая вещь делает данную функцию такой востребованной? Во-первых, это комфортно: не нужно запоминать замысловатые пароли или находить правильный палец в тьме. Также, это оперативно: современные системы идентифицируют лицо буквально за мгновения ока. В-третьем пункте, это ощущение футуризма — словно в фильмах про казино вулкан разведчиков.

Однако за этой видимой легкостью прячется целый вселенная трудных методов и инженерных решений. Попробуем разобраться, как конкретно функционирует идентификация по лицу в актуальных смартфонах, какие применяются методы, насколько они безопасны и что нас ждёт впереди.

Краткая история эволюции инноваций

Идентификация лиц как технология присутствует уже более пятидесяти годов. Начальные пробы машинного исследования облика были предприняты еще в 1960-х годы в научных учреждениях США. Тогда ЭВМ способны были лишь обозначать контуры лица и определять дистанции между очами и ртом на черно-белых снимках.

Начальные коммерческие системы стали доступны в 90-х, но они были неидеальны: работали медленно и часто давали сбои. Только с эволюцией синтетических сетей и таких площадок, как вулкан россии, сильных мобильных чипов распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным идентификацией лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные решения.

Ключевые этапы действия устройства распознавания

Процесс определения лица можно примерно сегментировать на несколько ключевых этапов:

1. Распознавание лица — устройство определяет существование людского лица в снимке.
2. Определение признаков — система изучает черты облика: форму глаз, носа, уст, положение надбровных дуг.
3. Построение шаблона — создаётся особенный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с стандартом — созданный модель сверяется со записанной при внесении биометрической данными владельца.
5. Принятие определения — если соответствие достаточно существенное, смартфон деблокируется.

Любой из указанных стадий требует особых алгоритмов и оптимизаций для быстрой работы непосредственно на девайсе.

Железные компоненты: что находится внутри них

Обычная селфи камера.

Простейший легкий способ определения облика задействует исключительно лицевую камеру смартфона мобильного устройства. Подобный метод осуществлён во многих доступных моделях Android-девайсов.

Плюсы:

• Не требует дополнительных сенсоров.
• Быстро работает при качественном освещённости.

Недостатки:

• Несложно ввести в заблуждение снимком или роликом.
• Неправильно работает при плохом освещении или непривычных точках зрения.

ИК камера и точечный проектор

Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс составляет базу Face ID от Apple.

Как это функционирует:

• Точечный проектор отображает на лицо юзера невидимую решетку из тысяч инфракрасных пятен (например, Face ID использует около 30 000 меток).
• Инфракрасная устройство фиксирует деформацию данной сетки по плоскости лица.
• Создаётся 3D глубинная карта глубины, которая почти что неосуществима для фальсификации обычной снимком или маскировкой.

Достоинства

• Надёжная функционирование даже в полной тьме.
• Сильная устойчивость к имитациям.
• Точность распознавания свыше 99%.

Добавочные датчики

В некоторых устройствах применяются также вспомогательные сенсоры: ToF (Time-of-Flight), которые измеряют период распространения луча до предмета и обратно; Цветные-датчики глубины; специальные лазерные измерители расстояния для создания более точной 3D-модели лица.

Эти разработки применяются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: синтетический разум в работе

Современные системы опознания лиц неосуществимы в отсутствие применения artificial intelligence и машинного обучения. Именно благодаря таким инновациям, как вулкан россии, аппарат способно идентифицировать пользователя даже при метаморфозах внешности: новая укладка, борода, очки или косметика не становятся помехой для деблокировки.

Детектирование физиономии

В начальном этапе программа необходимо оперативно найти образ лица среди полного изображения с камеры. Для данной цели применяются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: метод MTCNN может обнаруживать физиономию даже в случае частичном закрытии (например, платком или рукой).

Выделение основных аспектов

После распознавания лица устройство, такая как вулкан россии, вычисляет местоположение основных точек: кончики глаз, конец носа, контуры губ и так далее. Обычно используется от 68 до 128 основных маркеров на лицевой поверхности.

Это нужно для нормализации изображения: если человек находится с мобильник под углом, или повернул голову, программа исправляет картинку до обычного угла для дальнейшего анализа.

Построение биометрического идентификатора шаблона

Далее нейронная сеть строит компактное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 флоатов.

Такой образец очень сложно имитировать: он не хранит непосредственно картинку пользователя, а лишь уникальные особенности его облика, что делает его совершенным для таких площадок, как vulkan russia.

Сравнительный анализ и принятие заключения

В случае, когда юзер намеревается разблокировать телефон взором, механизм воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый границу (обычно превышает 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ запрещается.

Приспособление к изменениям внешности

Увлекательная характеристика актуальных систем — возможность самообучения. Если вы регулярно открываете мобильное устройство с новой прической или оптикой, система постепенно модернизирует базовый модель вашего облика для увеличения точности действия без ухудшения безопасности.

Защита биометрических данных информации.

Многие юзеры опасаются держать свои биометрические идентификационные данные на смартфоне из-за вероятности утечки данных или хакерской атаки. Иные фирмы, такие как vulkan russia, предлагают варианты для увеличения безопасности информации клиентов.

• Локальное сохранение: Основная часть девайсов хранит биометрические шаблоны исключительно в пределах защищённого процессора Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не покидают гаджет и недоступны даже изготовителю.

• Шифрование: Все сведения сохраняются только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция приложений: Приложения внешних разработчиков не обладают непосредственного доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.

Следует подчеркнуть существенную деталь: если кто-то достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство производители реализуют систему защиты от неосознанного разблокирования — к примеру, требуют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают категории идентификации лиц?

На сегодняшний день можно определить три ключевых метода к выполнению этой операции:

Софтверное 2D определение

Используется только лицевая камера без вспомогательных датчиков дистанции. Этот подход используется чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость воплощения; минимальная стоимость; скоростная работа при качественном свете.
Минусы: просто одурачить снимком; неустойчивая деятельность ночью; недостаточная защищенность.

Техническое объёмное оцифровка

Задействует ИК видеокамеру + проекционный модуль пикселей + сенсоры дистанции (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: значительная надёжность; невозможно подделать изображение/видеозапись; постоянная работа при любом освещении.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с интеграцией ИИ

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, например вулкан россии и Google Pixel Face Unlock новейших поколений, сочетают фронтальную камеру c ИК сенсором движения Soli Radar для предотвращения от подделок руками/масками/видеоэкранами посторонних устройств.

Иллюстрации эксплуатации разных методов

• iPhone линейки X/11/12/13/14 применяют только физическое трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз внедрил подобие Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 поддерживают как софтверное двухмерное определение по снимку фронталкой, так и сенсор радужки глаза.
• Huawei Mate20 Pro задействует комплекс из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Вопросы охраны и ошибочные сигналы

Несмотря на замечательный прогресс инноваций за последние годы, безупречных механизмов пока не существует:

1. Шанс подвоха: Доступные мобильники без труда открываются качественной снимком владельца или же видеозаписью с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые идеальные механизмы могут ошибиться между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Трансформации внешности: Резкое снижение веса/увеличение массы тела, хирургические вмешательства либо повреждения порой требуют повторной регистрации биометрических данных.
4. Условия фотографирования: Интенсивная подсветка солнцем или же интенсивная затенение могут уменьшить верность распознавания признаков.

Ниже пара советов для безопасному эксплуатации:

• Для критически важных операций всегда используйте дополнительную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
• Систематически обновляйте программное обеспечение мобильного устройства для защиты от актуальных атак;
• Включайте функцию “Требовать распахнутых глаз” везде, где она доступна.

В каких областях ещё применяется технологии помимо мобильных телефонов?

Пускай предмет данной работы касается в частности смартфонам и планшетам, необходимо сказать о других сферах применения технологии:

• Мониторинг доступа в офисах и резиденциях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Электронные паспорта последнего типа;
• Системы видеоконтроля городских служб;
• Автоматизация отслеживания посещаемости учебных заведений/университетов;
• Вход участников ПК/ноутбуков.

Например: В городском метро уже тестируется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через барьер без карты или телефона! Схожие инициативы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется техпроцесс сегодня?

Всякий год возникают современные мысли для усовершенствования качества работы систем распознавания лиц:

1. Увеличивается детализация сенсоров — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше риск неточности;
2. Совершенствуются нейросети — современные конструкции вида MobileNetV3 дают возможность скоростно осваивать свежим характеристикам внешности пользователя напрямую на гаджете без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь мобильные устройства способны распознавать настоящие анимированные облики от фиксированных снимков/масок по микроскопическим движениям кожи.
4. Взаимодействие со умными устройствами — интеллектуальные часы могут самостоятельно блокировать телефон, если владелец отошёл далеко.
5. Возникают гибридные системы — к примеру объединяющие голосовую идентификацию + облик + дактилоскопический след.

Вот, какие тренды очень востребованы сейчас:

1) Уменьшение элементов

Производители пытаются уменьшить величину прорези (“чёлки”) под сенсоры на дисплее за счёт встраивания миниатюрных ИК-излучателей прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработка прямо на устройстве

Для увеличения личной безопасности всё больше расчётов происходит на месте без передачи данных во сторонний облачный услугу.

3) Стандартизация регламентов

Гугл энергично продвигает эталон BiometricPrompt API, с целью чтобы подобные системы, вроде вулкан россия, и все Android-аппы были совместимы с всеми формами биометрии единообразно.

Что выбрать сегодня?

Когда тебе нужна предельная сохранность данных, подбирайте передовые аппараты с интегрированным ИК-излучателем или же ToF-сенсором глубины.

• iPhone каждого последних поколений
• Huawei Mate/P линейки
• Mix Professional
• Vivo X серии
• Oppo Find X серий.

Если бюджет ограничен – лучше отдавать предпочтение классическим методам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, использовать только как опциональную возможность комфорта.

Каким образом повысить практичность использования опции?

Есть некоторые лайфхаков для тех, кто уже применяет разблокировку по лицу:

1. Периодически обновляйте свою фотографию-шаблон, если кардинально изменяется облик.
2. Не упускайте из виду очищать линзу фронтальной камеры – разводы могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам запускает фотоаппарат как только вы поднимаете его.
4. При регистрационного процесса старайтесь удерживать лицо ровно напротив камеры исключая значительного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отворачиваетесь от экрана.

Возможности развития инноваций

В скоро наступающие годы можно ожидать возникновения полностью дистанционных способов идентификации индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + звучание + манера ходьбы + движения рук!

Также возможно возникновение свежих способов охраны конфиденциальности – например, изменяющееся корректировка электронного шаблона после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – единственная из самых увлекательных техник нашего времени! Она обеспечивает взаимодействие со мобильным устройством удобнее чем до этого, и такие программы, как vulkan russia, могут существенно повысить ваш пользовательский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как работает эта технология изнутри, – будете в состоянии более осмысленно определять свой будущий гаджет!