Как работает определение лицевых образов в телефонах

Для чего мы останавливаемся на разблокировку по фейсу

В недавние годы определение лиц стало одной из самых распространённых опций для деблокировки умных телефонов. Всего некоторые лет тому назад большинство использующих обходились пин-кодами, паролями или датчиками отпечатков пальцев. Но с появлением подобных технологий, например Spinto, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь превращает данную особенность настолько популярной? Во-первых, это комфортно: не нужно запоминать замысловатые пароли или искать верный палец в мраке. Во-вторых, это мгновенно: современные системы распознают лицо буквально за мгновение. В-третью очередь, это ощущение футуристичности — будто в кинолентах про казино спинто разведчиков.

Однако за этой кажущейся простотой скрывается целый универсум сложных технологий и инженерных разработок. Попробуем разобраться, как конкретно действует распознавание лиц в актуальных смартфонах, какие существуют технологии, насколько они защищены и что нас ожидает в будущем.

Короткая хроника развития инноваций

Идентификация лиц как технология существует уже более 50 лет. Первые попытки автоматизированного исследования облика были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ умели лишь обозначать очертания черепа и определять дистанции между глазами и губами на черно-белых снимках.

Первые бизнес системы стали доступны в 90-х, но они были неидеальны: действовали неспешно и нередко ошибались. Только с прогрессом искусственных сетей и таких систем, как Спинто, мощных мобильных чипов распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным идентификацией лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать собственные разработки.

Главные этапы функционирования устройства определения

Процесс распознавания лица можно примерно разделить на несколько основных этапов:

1. Распознавание лица — устройство выявляет присутствие людского образа в снимке.
2. Извлечение особенностей — механизм анализирует черты лица: конфигурацию зрительных органов, носа, уст, позицию бровей.
3. Построение шаблона — создаётся особенный цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со эталоном — полученный модель сверяется со сохранённой при учёте биометрической сведениями владельца.
5. Принятие выбора — если соответствие достаточно значительное, смартфон деблокируется.

Любой из этих стадий запрашивает специальных процедур и оптимизаций для быстрой работы прямо на устройстве.

Технические составляющие: что прячется в их недрах

Типичная передняя камера.

Простейший легкий вариант распознавания облика применяет исключительно переднюю камеру смартфона смартфона. Данный подход осуществлён во различных бюджетных версиях Android-девайсов.

Достоинства:

• Не нуждается в требует дополнительные сенсоров.
• Оперативно функционирует при качественном свете.

Слабые стороны:

• Несложно ввести в заблуждение фотографией или видеозаписью.
• Плохо работает при слабом свете или нестандартных ракурсах.

ИК камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как Спинто, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс составляет базу Face ID от Apple.

Как это функционирует:

• Точечный проектор показывает на лицо пользователя невидимую структуру из тысяч инфракрасных точек (например, Face ID использует около 30 000 меток).
• ИК устройство записывает деформацию данной сетки по поверхности лица.
• Получается 3D карта глубины глубинности, которая почти невозможна для подделки типичной фотографией или маскировкой.

Плюсы

• Надёжная деятельность даже в полной темноте.
• Высокая защита к фальсификациям.
• Точность идентификации более 99%.

Добавочные сенсоры

В отдельных девайсах применяются также дополнительные датчики: ToF (Time-of-Flight), которые определяют время прохождения луча до цели и обратно; Цветные-датчики дальности; специальные световые лидары для создания более детализированной 3D-модели лица.

Эти инновации применяются в основном во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: синтетический интеллект в действии

Текущие системы распознавания лиц неосуществимы в отсутствие использования ИИ и машинного обучения. Именно вследствие таким инновациям, как Спинто, гаджет способно распознавать владельца даже при метаморфозах внешнего вида: новая укладка, растительность на лице, линзы или макияж не становятся помехой для разблокировки.

Распознавание лиц

На начальном этапе программа необходимо оперативно найти лицо внутри целого снимка камеры. Для этой задачи задействуются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые натренированы идентифицировать человеческие лица среди множества других объектов.

Пример: метод MTCNN способен распознавать физиономию даже с частичном перекрытии (например, платком или ладонью).

Определение основных аспектов

После распознавания лица механизм, такая как Спинто, вычисляет расположение ключевых точек: уголки глаз, верхушка носа, контуры губ и так далее. Как правило задействуется от 68 до 128 ключевых меток на лице.

Это действие требуется для нормализации визуала: если человек находится с смартфон под наклоном, или наклонил головку, программа исправляет изображение до стандартного положения для последующего изучения.

Формирование биометрического шаблона

Далее нейросеть строит сжатое цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 чисел с плавающей запятой.

Данный образец крайне затруднительно имитировать: он не удерживает само изображение юзера, а лишь особенные особенности его вида, что делает его совершенным для таких платформ, как Спинто казино.

Сопоставление и вынесение решения

Если человек желает разлочить смартфон взглядом, механизм осуществляет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает определённый порог (обычно больше 99%), телефон, как и платформа Спинто казино, разблокируется; если нет — доступ блокируется.

Адаптация к изменениям облика

Занимательная черта современных системы — возможность самостоятельного обучения. Если вы постоянно разблокируете мобильное устройство с новой укладкой или оптикой, система постепенно освежает основной образец вашего внешности для улучшения точности функционирования без ухудшения безопасности.

Охрана биометрических данных данных.

Многие клиенты беспокоятся сохранять свои биометрические идентификационные данные на смартфоне из-за угрозы потери данных или взлома гаджета. Иные фирмы, такие как Спинто казино, предлагают варианты для улучшения безопасности данных пользователей.

• Локальное сбережение: Большинство аппаратов хранит биометричные шаблоны только внутри защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из аппарат и не доступны даже изготовителю.

• Шифрование: Все данные сохраняются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих девелоперов не имеют прямого доступа к биометрическим; они могут лишь требовать факт верификации личности через системный API.

Стоит отметить важную деталь: в случае, если какой-то человек достанет физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители реализуют защиту от неосознанного разблокирования — например, заставляют раскрыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют имеются виды распознавания лиц?

На сегодняшний день можно выделить выделить 3 главных метода к реализации этой задачи:

Программное 2D распознавание

Используется только фронтальная видеокамера без экстра детекторов дистанции. Этот способ встречается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; низкая цена; быстрая функционирование при достаточном освещении.
Минусы: просто одурачить снимком; ненадежная деятельность ночью; слабая защищенность.

Аппаратное трёхмерное сканирование

Использует инфракрасную видеокамеру + проекционный модуль точек + датчики дистанции (Face ID у Apple; подобные технологии у Huawei Mate).
Плюсы: большая достоверность; не получится обмануть изображение/видеозапись; устойчивая деятельность в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные методы с дополнением ИИ

Применяют комбинацию программных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например Спинто и Google Pixel Face Unlock современных поколений, комбинируют фронталку c ИК датчиком мобильности Soli Radar для предотвращения от подделок руками/масками/видеоэкранами чужих устройств.

Иллюстрации эксплуатации различных методов

• iPhone линейки X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз внедрил эквивалент Face ID среди Android.
• Samsung Galaxy S10 версия/S20 имеют как программное 2D определение по фото фронтальной камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro применяет набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Трудности защиты и неверные сигналы

Несмотря на поразительный развитие техники за прошедшие годы, безупречных механизмов пока не наблюдается:

1. Шанс обмана: Бюджетные мобильники просто “разблокируются” качественной снимком пользователя или роликом с дисплея иного гаджета.
2. Идентичные близнецы: Даже самые совершенные механизмы могут спутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
3. Метаморфозы внешнего вида: Резкое похудение/набор веса, косметические процедуры либо повреждения иногда необходимы для повторной регистрации биометрии.
4. Условия съёмки: Интенсивная засветка солнцем или же глубокая затенение могут уменьшить аккуратность определения признаков.

Здесь некоторые рекомендаций для безопасному применению:

• Для значимых операций всегда используйте двухэтапную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Регулярно обновляйте прошивку телефона для обеспечения безопасности от новых видов атак;
• Включайте настройку “Требовать открытых глаз” везде, где она доступна.

В каких областях также находится применение технологии за исключением смартфонов?

Пускай тема нашей работы сосредоточена на в частности портативным гаджетам, необходимо сказать о альтернативных областях использования технологии:

• Управление доступа в рабочих помещениях и жилых домах;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Цифровые идентификационные документы последнего типа;
• Системы видеонаблюдения городских сервисов;
• Автоматизация отслеживания присутствия школ/институтов;
• Авторизация участников компьютеров/ноутбуков.

Например: В столичном метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через барьер без карты или телефона! Схожие инициативы развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким образом меняется технический процесс в наше время?

Каждый год возникают свежие мысли для улучшения качества функционирования систем лицевого распознавания:

1. Увеличивается чёткость сенсорных устройств — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше шанс ошибки;
2. Развиваются нейронные сети — передовые структуры типа MobileNetV3 обеспечивают возможность скоростно адаптироваться к дополнительным характеристикам вида владельца прямо на устройстве без отправки данных в облако.
3. Улучшаются способы антиспуфинга — теперь смартфоны могут распознавать реальные движущиеся лица от статичных фото/масок по незаметным микродвижениям.
4. Синхронизация со смарт-гаджетами — смарт-часы могут самостоятельно блокировать смартфон, если обладатель ушёл далеко.
5. Возникают смешанные системы — к примеру объединяющие речевую аутентификацию + лицо + дактилоскопический след.

Итак, которые тренды очень популярны в данный момент:

1) Уменьшение деталей

Изготовители стараются сократить габариты отверстия (“чёлки”) для датчики на дисплее за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения приватности всё более обработки данных выполняется на месте без пересылки информации во внешний облачный сервис.

3) Упорядочивание стандартов

Google интенсивно пропагандирует эталон BiometricPrompt API, чтобы аналогичные платформы, например как Spinto, и любые Android-приложения могли взаимодействовать с различными типами биометрии унифицированно.

Что решить на сегодня?

Когда тебе необходима максимальная сохранность данных, выбирайте флагманские устройства с интегрированным ИК-излучателем либо ToF-сенсором глубины.

• iPhone каждого новейших поколений
• Huawei Partner/P Series линейки
• Mi Pro
• Vivo X модели
• Oppo Найти X линейки.

Если бюджет скромен – лучше отдавать предпочтение классическим методам безопасности (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в Spinto, использовать только как второстепенную опцию комфорта.

Каким образом повысить практичность работы функции?

Есть несколько лайфхаков для пользователей, кто уже применяет разблокировку через лицо:

1. Часто меняйте свою фотографию-шаблон, если значительно изменяется облик.
2. Не забывайте очищать объектив передней камеры – пятна могут уменьшить четкость!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам запускает фотоаппарат как только вы поднимаете его.
4. При регистрации пытайтесь удерживать лицевую часть неподвижно напротив видеоустройства не допуская резкого наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от экрана.

Будущее развития инноваций

В скоро наступающие периоды можно ожидать развития полностью бесконтактных способов идентификации человека сразу по нескольким биометрическим данным параметрам одновременно: лицо + речь + походка + жесты рук!

Также возможно возникновение новых способов обеспечения конфиденциальности – скажем, изменяющееся корректировка электронного паттерна после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из самых увлекательных техник нашего времени! Она делает интеракцию со мобильным устройством комфортнее чем когда-либо прежде, и такие аппы, как Спинто казино, могут значительно оптимизировать ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как устроена эта технология изнутри, – сумеете осознаннее определять свой будущий гаджет!