Каким способом работает определение лицевых образов в смартфонах

Почему мы выбираем разблокировку по лицу

В прошлые годы определение лиц является одной из наиболее востребованных опций для разблокировки мобильных телефонов. Лишь несколько годов ранее основная часть пользователей обходились PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением таких технологий, как вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Какой аспект обуславливает эту конкретную функцию очень нужной? Прежде всего, это удобно: не нужно удерживать в памяти трудные пароли или искать нужный палец в мраке. Также, это мгновенно: современные системы узнают лицо буквально за мгновение. В-третьем пункте, это ощущение футуристичности — словно в кинолентах про вулкан автомат разведчиков.

Впрочем за данной видимой легкостью таится весь мир трудных техник и инженерных разработок. Попробуем понять, как точно работает распознавание лиц в современных смартфонах, какие применяются методы, насколько они безопасны и что нас ждёт впереди.

Короткая хроника развития технологии

Идентификация лиц как технология присутствует уже более 50 лет. Начальные эксперименты машинного анализа облика были сделаны еще в 1960-х годы в научных учреждениях США. Тогда компьютеры способны были лишь определять силуэты головы и вычислять расстояния между очами и губами на черно-белых снимках.

Первые коммерческие системы появились в девяностых годах, но они были неидеальны: функционировали медленно и часто давали сбои. Только с эволюцией синтетических сетей и таких систем, как вулкан россии, сильных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с достоверным трёхмерным сканированием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять собственные решения.

Главные этапы функционирования механизма определения

Процесс распознавания лица можно примерно сегментировать на несколько важных этапов:

1. Распознавание лиц — аппарат определяет наличие гуманного лица в кадре.
2. Определение характеристик — алгоритм анализирует черты физиономии: форму зрительных органов, носа, уст, расположение надбровных дуг.
3. Построение структуры — создаётся неповторимый цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со стандартом — полученный шаблон сопоставляется со сохранённой при регистрации биометрической данными владельца.
5. Принятие выбора — если соответствие достаточно высокое, смартфон разблокируется.

Каждый из этих этапов нуждается в особых методов и улучшений для оперативной работы непосредственно на девайсе.

Железные составляющие: что скрыто внутри них

Стандартная передняя камера.

Наиболее несложный способ идентификации лица использует исключительно лицевую камеру мобильного устройства. Такой подход осуществлён во многих бюджетных моделях Android-устройств.

Плюсы:

• Необходимо нуждается в внешних датчиков.
• Шустро функционирует при хорошем свете.

Отрицательные стороны:

• Просто обмануть снимком или роликом.
• Плохо действует при плохом освещённости или необычных углах обзора.

Инфракрасная камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как вулкан россии, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс является основой Face ID от Apple.

Как это действует:

• Точечный проекционный прибор проецирует на облик юзера невидимую решетку из тысяч инфракрасных меток (например, Face ID применяет около 30 000 пятен).
• Инфракрасная камера фиксирует деформацию этой сетки по поверхности лица.
• Формируется 3D глубинная карта глубинности, что почти что невозможна для имитации обычной снимком или маской.

Преимущества

• Надёжная работа даже в полной темноте.
• Высокая сопротивляемость к фальсификациям.
• Точность распознавания свыше 99%.

Дополнительные сенсоры

В отдельных девайсах задействуются также экстра датчики: ToF (Time-of-Flight), которые фиксируют время прохождения света до цели и обратно; RGB-датчики глубины; специальные оптические измерители расстояния для построения более аккуратной 3D-модели физиономии.

Эти технологии встречаются в основном во флагманских моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: искусственный интеллект на действии

Нынешние механизмы распознавания лиц неосуществимы в отсутствие применения искусственного интеллекта и машинного обучения. Именно благодаря таким разработкам, как вулкан россии, гаджет может узнавать юзера даже при изменениях внешности: новая укладка, щетина, очки или косметика не становятся помехой для открытия.

Распознавание лица

При первом шаге алгоритм обязана оперативно обнаружить лицо в пределах всего снимка с камеры. Для этого задействуются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN в состоянии обнаруживать физиономию даже при частичном закрытии (например, шарфом или рукой).

Выделение важных точек

После идентификации лица механизм, такая как вулкан россии, устанавливает местоположение главных точек: уголки глаз, кончик носа, контуры губ и так далее. Часто применяется от 68 до 128 главных точек на лицевой области.

Это действие нужно для нормализации визуала: если пользователь находится с мобильник под наклоненным, или склонил голову, программа “выпрямляет” изображение до стандартного положения для последующего изучения.

Создание биометрического идентификатора шаблона

Далее нейросеть строит компактное математическое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Такой шаблон весьма трудно имитировать: он не удерживает непосредственно фото юзера, а лишь исключительные особенности его облика, что делает его оптимальным для таких площадок, как vulkan russia.

Сравнение и принятие заключения

Когда пользователь желает разлочить смартфон взглядом, механизм осуществляет все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый границу (обычно больше 99%), телефон, как и платформа vulkan russia, разблокируется; если нет — доступ блокируется.

Приспособление к трансформациям внешности

Занимательная характеристика современных системы — способность самостоятельного обучения. Если ты часто доступаете к мобильное устройство с новой прической или оптикой, алгоритм постепенно модернизирует эталонный шаблон вашего облика для повышения точности работы без снижения уровня безопасности.

Охрана биометрических данных данных.

Многие юзеры боятся хранить свои биометрические данные на телефоне из-за угрозы потери данных или хакерской атаки. Некоторые фирмы, например vulkan russia, предлагают методы для увеличения защиты данных юзеров.

• Локальное сохранение: Основная часть девайсов хранит биометрические шаблоны только в пределах защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не выходят из гаджет и закрыты включая изготовителю.

• Шифрование: Все данные сберегаются только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних девелоперов не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения личности через системный API.

Необходимо подчеркнуть существенную особенность: если какой-то человек достанет доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители внедряют систему защиты от неосознанного разблокирования — например, заставляют открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются типы идентификации лиц на изображениях?

На сегодняшний день можно выделить выделить 3 ключевых способа к выполнению этой операции:

Софтверное двухмерное идентификация

Эксплуатируется только лицевая камера без дополнительных датчиков глубины. Такой способ используется наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность осуществления; умеренная затраты; быстрая работа при хорошем свете.
Минусы: несложно ввести в заблуждение фотографией; ненадежная функционирование ночью; недостаточная защищенность.

Оборудование для трёхмерное сканирование

Использует ИК камеру + проекционный модуль точек + датчики глубины (Face ID у Apple; подобные решения у Huawei Mate).
Преимущества: высокая надёжность; нельзя обмануть изображение/видеозапись; стабильная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные подходы с ИИ-дополнением

Задействуют комбинацию программных методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как вулкан россии и Google Pixel Face Unlock современных версий, объединяют фронтальную камеру c ИК сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Образцы применения разнообразных техник

• iPhone линейки X/11/12/13/14 применяют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID среди Android.
• Samsung Galaxy S10 версия/S20 обеспечивают как софтверное двухмерное идентификацию по фото фронтальной камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro применяет набор из ИК-освещения + Dot Projector + ToF-датчик

Трудности безопасности и ошибочные сигналы

Несмотря на замечательный прогресс техники за последние лет, безупречных системы пока не наблюдается:

1. Шанс подвоха: Бюджетные смартфоны легко “разблокируются” четкой изображением хозяина или же видео с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные системы могут перепутать между однояйцевыми близнецами либо родственниками с очень аналогичной внешностью.
3. Метаморфозы внешнего вида: Стремительное похудение/увеличение массы тела, хирургические вмешательства либо повреждения в некоторых случаях требуют перерегистрации биометрии.
4. Условия съёмки: Яркая освещённость солнечным светом или глубокая тень могут понизить верность определения признаков.

Вот некоторые рекомендаций по надёжному эксплуатации:

• Для критически важных операций всегда внедряйте двухфакторную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Постоянно обновляйте прошивку ПО телефона для предотвращения угроз от актуальных атак;
• Включайте функцию “Требовать распахнутых глаз” в тех местах, где она доступна.

Где также находится применение технология помимо смартфонов?

Хотя основная мысль данной публикации сосредоточена на конкретно портативным гаджетам, необходимо сказать о прочих направлениях внедрения технологии:

• Контроль входа в деловых центрах и жилых домах;
• Платёжные устройства банков (“Face Pay”);
• Электронные паспорта нового типа;
• Установки видеоконтроля городских служб;
• Механизация учёта присутствия учебных заведений/вузов;
• Вход юзеров ПК/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Похожие программы развиваются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким образом трансформируется техпроцесс в наше время?

Каждый годик возникают новые мысли для повышения стандарта работы систем лицевого распознавания:

1. Увеличивается детализация сенсоров — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность неточности;
2. Развиваются искусственные интеллекты — современные структуры типа MobileNetV3 позволяют быстро осваивать свежим чертам внешности обладателя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Улучшаются методы антиспуфинга — теперь телефоны умеют распознавать реальные анимированные лица от неподвижных фото/масок по микроскопическим микродвижениям.
4. Интеграция со умными устройствами — умные часы могут автоматически блокировать мобильный телефон, если владелец отошёл далеко.
5. Возникают смешанные устройства — к примеру объединяющие голосовую опознание + физиономию + пальцевой отпечаток.

Здесь, те тренды в особенности популярны в данный момент:

1) Сокращение деталей

Производители пытаются уменьшить габариты отверстия (“чёлки”) для датчики на экране за счёт интеграции компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на аппарате

Для повышения приватности всё больше расчётов осуществляется локально без отправки данных во сторонний облачный услугу.

3) Унификация регламентов

Google активно пропагандирует стандарт BiometricPrompt API, с целью чтобы аналогичные системы, вроде вулкан россия, и все Android-программы могли работать с любыми видами биометрии стандартизированно.

Какое выбрать сегодня?

Когда вам всем важна наивысшая безопасность информации, выбирайте передовые модели с вмонтированным ИК-излучателем либо ToF-датчиком глубины.

• iPhone каждого новейших поколений
• Huawei Partner/P линейки
• Xiaomi Professional
• Vivo X модели
• Оппо Найти Икс линейки.

Если финансы ограничен – лучше предпочесть классическим способам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в вулкан россия, применять только как второстепенную возможность комфорта.

Каким способом улучшить удобство функционирования возможности?

Есть несколько советов для тех, кто уже применяет разблокировку через лицо:

1. Часто обновляйте свою фотографию-шаблон, если значительно изменяется облик.
2. Не упускайте из виду очищать объектив фронтальной камеры – пятна могут понизить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам запускает фотоаппарат если вы берёте его в руки.
4. В процессе регистрационного процесса пытайтесь держать лицо ровно перед камеры не допуская значительного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отворачиваетесь от экрана.

Перспективы эволюции инноваций

В ближайшие годы можно предполагать развития полностью безконтактных способов распознавания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + речь + манера ходьбы + жесты рук!

Также возможно возникновение новых методов обеспечения личной информации – к примеру, переменное модификация цифрового паттерна после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из самых интересных технологий нашего периода! Она делает общение со мобильным устройством проще чем до этого, и такие программы, как vulkan russia, могут значительно повысить ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как функционирует эта технология в деталях, – сможете осознаннее выбирать свой следующий девайс!