Каким образом действует определение лиц в телефонах

Для чего мы выбираем разлочивание по лицу

В прошлые годы определение лиц стало одной из наиболее востребованных опций для деблокировки смартфонов. Лишь некоторые годов ранее основная масса юзеров удовлетворялись пин-кодами, ключами доступа или датчиками отпечатков пальцев. Но при появлением таких технологий, например Вулкан Платинум, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь делает эту конкретную функцию такой востребованной? Во-первых, это удобно: не нужно запоминать трудные пароли или находить верный палец в темноте. Во-вторых, это быстро: современные алгоритмы распознают лицо практически за мгновения ока. В-третьем пункте, это чувство футуристичности — как будто в фильмах про вулкан платинум зеркало разведчиков.

Однако за этой на первый взгляд простотой скрывается целый универсум трудных техник и инженерных разработок. Позвольте нам разобраться, как конкретно работает распознавание лиц в актуальных мобильных телефонах, какие применяются способы, насколько они безопасны и что нас предстоит.

Короткая хроника эволюции техники

Распознавание лиц как техника имеется уже более 50 годов. Изначальные пробы автоматического анализа облика были осуществлены еще в 1960-х годы в лабораториях США. Тогда компьютеры способны были лишь выделять контуры черепа и определять промежутки между зрачками и устами на черно-белых снимках.

Начальные торговые платформы стали доступны в 1990-х годах, но они были далеки от совершенства: функционировали медленно и часто давали сбои. Только с прогрессом синтетических сетей и таких площадок, как Vulkan Platinum, сильных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным сканированием лица. За ним последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать собственные разработки.

Главные этапы действия устройства определения

Процесс распознавания лица можно ориентировочно поделить на несколько важных этапов:

1. Идентификация лиц — устройство выявляет наличие людского лица в кадре.
2. Определение особенностей — система анализирует особенности лица: конфигурацию зрительных органов, носа, уст, расположение бровей.
3. Построение структуры — создаётся неповторимый электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение с образцом — созданный модель сверяется со сохранённой при учёте биометрической данными владельца.
5. Принятие решения — если сходство достаточно существенное, смартфон открывается.

Любой из указанных этапов нуждается в индивидуальных алгоритмов и улучшений для оперативной работы непосредственно на девайсе.

Аппаратные составляющие: что скрыто внутри

Стандартная селфи камера.

Самый легкий вариант определения физиономии использует исключительно лицевую камеру смартфона смартфона. Данный подход осуществлён во многочисленных недорогих версиях Android-устройств.

Положительные стороны:

• Не нуждается в потребляет внешних сенсоров.
• Оперативно работает при достаточном свете.

Слабые стороны:

• Несложно ввести в заблуждение снимком или видео.
• Неправильно функционирует при плохом освещении или непривычных ракурсах.

ИК фотокамера и точечный проектор

Более продвинутые системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология является основой Face ID от Apple.

Каким образом это функционирует:

• Точечный проекционный прибор проецирует на лицо юзера невидимую структуру из тысяч инфракрасных точек (например, Face ID использует около 30 000 точек).
• Инфракрасная устройство записывает деформацию данной решетки по плоскости физиономии.
• Создаётся трехмерная карта глубины глубинности, что практически невозможна для имитации обычной фотографией или маской.

Преимущества

• Надёжная деятельность даже в полной темноте.
• Большая сопротивляемость к имитациям.
• Точность определения свыше 99%.

Дополнительные датчики

В определённых девайсах применяются также экстра сенсоры: ToF (Time-of-Flight), которые определяют период движения света до предмета и обратно; Цветные-датчики дальности; специальные световые измерители расстояния для создания более аккуратной 3D-модели лица.

Эти разработки встречаются наиболее часто во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: синтетический ум в исполнении

Нынешние механизмы распознавания лиц немыслимы в отсутствие эксплуатации ИИ и машинного обучения. Именно из-за таким технологиям, как Vulkan Platinum, аппарат способно распознавать пользователя даже при трансформациях облика: новая укладка, борода, линзы или грим не становятся помехой для разблокировки.

Обнаружение физиономии

На первом шаге программа должна быстро обнаружить ликовое изображение среди всего изображения с камеры. Для данной цели используются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: алгоритм MTCNN может распознавать физиономию даже в случае неполном перекрытии (например, шалью или ладонью).

Определение важных аспектов

После распознавания лица устройство, такая как Vulkan Platinum, устанавливает положение основных точек: кончики глаз, верхушка носа, края губ и так далее. Обычно задействуется от 68 до 128 главных маркеров на лицевой поверхности.

Это действие необходимо для нормализации изображения: если юзер держит мобильник под наклоном, или склонил голову, программа исправляет картинку до обычного угла для дальнейшего анализа.

Создание биометрического идентификатора модели

Далее нейронная сеть строит сжатое цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” внешности длиной от 128 до 512 вещественных чисел.

Этот шаблон крайне сложно сфальсифицировать: он не удерживает само фото пользователя, а лишь особенные черты его внешности, что делает его оптимальным для таких площадок, как Вулкан Казино Платинум.

Сравнительный анализ и принятие заключения

Если пользователь хочет разблокировать смартфон взглядом, механизм осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает установленный границу (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ не предоставляется.

Приспособление к трансформациям внешности

Интересная особенность актуальных системы — способность самостоятельного обучения. Если ты регулярно доступаете к смартфон с новой укладкой или очками, система постепенно модернизирует основной модель вашего лица для улучшения точности функционирования без ухудшения безопасности.

Охрана биометрических данных информации.

Множество клиенты боятся сохранять свои био-идентификационные данные на мобильном устройстве из-за вероятности потери данных или хакерской атаки. Некоторые фирмы, вроде Вулкан Казино Платинум, предоставляют варианты для повышения безопасности сведений клиентов.

• Локальное хранение: Большинство аппаратов хранит биометрические образцы только внутри безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают аппарат и не доступны в том числе изготовителю.

• Шифрование: Все информация сберегаются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих разработчиков не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.

Следует подчеркнуть существенную особенность: в случае, если кто-либо получит доступ к вашему телефону физически (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому большинство компании осуществляют защиту от автоматического разблокирования — в частности, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды идентификации лиц на изображениях?

Сегодня можно определить три основных подхода к выполнению этой операции:

Программное плоское распознавание

Применяется только фронтальная видеокамера без экстра детекторов дистанции. Такой метод наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность реализации; минимальная затраты; быстрая функционирование при хорошем освещении.
Минусы: несложно ввести в заблуждение снимком; неустойчивая деятельность ночью; недостаточная защищенность.

Аппаратное 3D сканирование

Применяет ИК видеокамеру + проекционный модуль точек + сенсоры глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Достоинства: высокая достоверность; нельзя исказить изображение/видеозапись; постоянная функционирование в любых условиях освещения.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Гибридные подходы с интеграцией ИИ

Используют комбинацию программных методов + аппаратную обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, например Vulkan Platinum и Google Pixel Face Unlock новейших версий, объединяют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для предотвращения от фальсификаций руками/масками/видеоэкранами чужих устройств.

Иллюстрации применения различных техник

• iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз внедрил аналог Face ID среди Android.
• Samsung Galaxy S10 модель/S20 имеют как программное обеспечение плоское определение по изображению фронталкой, так и датчик ириса глаза.
• Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Проблемы защиты и ложные срабатывания

Несмотря на поразительный успехи инноваций за недавние годы, идеальных механизмов пока не существует:

1. Возможность обмана: Бюджетные смартфоны без труда “разблокируются” высококачественной изображением пользователя или же видеозаписью с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые идеальные системы могут перепутать между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Трансформации облика: Внезапное похудение/увеличение массы тела, косметические процедуры или травмы иногда необходимы для повторной регистрации биометрии.
4. Условия съёмки: Интенсивная освещённость солнцем либо глубокая темнота могут снизить точность идентификации признаков.

Вот некоторые советов для безопасному эксплуатации:

• Для важных операций всегда используйте дополнительную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Регулярно обновляйте прошивку ПО телефона для предотвращения угроз от современных угроз;
• Включайте настройку “Требовать раскрытых глаз” в тех местах, где она имеется.

В каких областях ещё используется технология за исключением смартфонов?

Несмотря на то, что основная мысль данной работы посвящена в частности смартфонам и планшетам, стоит упомянуть о альтернативных областях использования технологии:

• Мониторинг входа в деловых центрах и жилых домах;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Цифровые паспорта нового поколения;
• Системы видеоконтроля городских сервисов;
• Автоматизация учёта явки учебных заведений/университетов;
• Авторизация пользователей персональных компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без карты или мобильника! Схожие инициативы развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом изменяется технология в наше время?

Любой годочек возникают новые мысли для улучшения уровня работы систем распознавания лиц:

1. Увеличивается чёткость сенсорных устройств — чем больше деталей фиксируется видеокамерой/датчиками глубины, тем меньше вероятность погрешности;
2. Развиваются нейронные сети — современные конструкции вида MobileNetV3 позволяют быстро обучаться свежим чертам вида владельца прямо на устройстве без пересылки информации в облачное хранилище.
3. Развиваются методы антиспуфинга — теперь телефоны могут различать реальные анимированные лица от неподвижных фото/масок по незаметным микродвижениям.
4. Взаимодействие со смарт-гаджетами — смарт-часы могут авто закрыть доступ к телефон, если пользователь отошёл далеко.
5. Появляются гибридные системы — к примеру объединяющие речевую опознание + облик + дактилоскопический след.

Итак, какие тенденции очень популярны в данный момент:

1) Миниатюризация элементов

Изготовители намереваются уменьшить размер отверстия (“чёлки”) для сенсоры на дисплее за счёт интеграции миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для повышения конфиденциальности всё больше расчётов осуществляется на месте без отправки информации во дополнительный облачный сервис.

3) Унификация регламентов

Гугл активно пропагандирует стандарт BiometricPrompt API, для того чтобы подобные платформы, например как Вулкан Платинум, и каждые Android-аппы были совместимы с различными типами биометрии единообразно.

Что решить сегодня?

В случае если тебе важна предельная сохранность информации, выбирайте флагманские устройства с интегрированным ИК-проектором либо ToF-датчиком глубины.

• iPhone каждого актуальных моделей
• Huawei Partner/Series P линейки
• Mi Pro
• Vivo X линейки
• Oppo Find X линейки.

Если средства ограничен – лучше предпочесть традиционным средствам защиты (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как опциональную возможность комфорта.

Каким способом повысить практичность использования возможности?

Есть некоторые лайфхаков для пользователей, кто уже использует функцию распознавания лица:

1. Часто меняйте свою фотографию-шаблон, если сильно изменяется внешний вид.
2. Не забывайте чистить объектив передней камеры – разводы могут понизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам включает камеру если вы берёте его в руки.
4. В процессе регистрации старайтесь держать голову ровно впереди камеры исключая сильного наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от экрана.

Перспективы эволюции техники

В скоро наступающие годы можно ожидать развития полностью бесконтактных способов распознавания индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + звучание + походка + движения рук!

Также предполагается появление современных подходов охраны приватности – к примеру, динамическое модификация электронного шаблона после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень захватывающих инноваций нашего времени! Она обеспечивает общение со мобильным устройством комфортнее чем до этого, и такие аппы, как Вулкан Казино Платинум, могут существенно улучшить ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как устроена эта система внутри, – будете в состоянии осознаннее определять свой будущий девайс!