Как работает определение лиц в телефонах

Почему мы предпочитаем разлочивание по фейсу

В недавние времена распознавание лиц стало одной из самых популярных функций для открытия умных телефонов. Всего несколько годков тому назад большинство пользователей удовлетворялись пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением подобных технологий, как Spinto, нам вполне просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект делает эту конкретную возможность настолько популярной? Во-первых, это комфортно: не нужно удерживать в памяти трудные пароли или отыскивать нужный палец в тьме. Также, это оперативно: современные программы узнают лицо буквально за мгновение. В-третьих, это ощущение футуристичности — будто в фильмах про https://www.russles.ru/ разведчиков.

Впрочем за этой видимой несложностью прячется целый мир комплексных техник и инженерных решений. Давайте исследовать, как конкретно функционирует распознавание лиц в актуальных гаджетах, какие существуют технологии, насколько они защищены и что нас предстоит.

Сжатая история прогресса технологии

Распознавание лиц как методика имеется уже более 50 лет. Изначальные пробы автоматического изучения лица были осуществлены еще в 1960-х годы в лабораториях США. Тогда вычислительные машины умели лишь определять очертания черепа и измерять расстояния между глазами и губами на ахроматических изображениях.

Изначальные бизнес установки появились в девяностых годах, но они были далеки от совершенства: действовали неспешно и часто ошибались. Только с прогрессом синтетических сетей и таких платформ, как Спинто, мощных мобильных процессоров идентификация лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным сканированием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять свои разработки.

Основные шаги работы системы идентификации

Процесс идентификации лица можно условно разделить на несколько ключевых этапов:

1. Обнаружение лица — камера распознает присутствие людского образа в снимке.
2. Определение признаков — алгоритм исследует контуры лица: очертания зрительных органов, носа, губ, положение бровей.
3. Построение шаблона — создаётся неповторимый цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со образцом — полученный образец сравнивается с сохранённой при внесении биометрической данными владельца.
5. Принятие выбора — если сходство достаточно существенное, смартфон разблокируется.

Каждый из этих шагов запрашивает особых процедур и усовершенствований для оперативной работы непосредственно на девайсе.

Железные компоненты: что прячется в их недрах

Стандартная фронтальная камера.

Самый простой несложный способ идентификации физиономии задействует только лицевую видеокамеру мобильного устройства. Данный метод внедрён во различных доступных моделях Android-устройств.

Преимущества:

• Не требует дополнительных датчиков.
• Быстро действует при достаточном свете.

Недостатки:

• Просто ввести в заблуждение фотографией или видео.
• Неудачно работает при слабом освещённости или непривычных точках зрения.

ИК камера и пунктирный проектор

Более продвинутые системы, такие как Спинто, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология составляет базу Face ID от Apple.

Каким способом это действует:

• Точечный проекционный прибор проецирует на облик использующего невидимую структуру из тысяч инфракрасных точек (например, Face ID задействует около 30 000 точек).
• ИК устройство регистрирует изменение формы данной решетки по плоскости физиономии.
• Получается трехмерная карта глубины, что почти что неподвластна для имитации стандартной снимком или маскировкой.

Преимущества

• Надёжная работа даже в полной темноте.
• Высокая устойчивость к имитациям.
• Точность определения более 99%.

Дополнительные датчики

В определённых устройствах используются также экстра сенсоры: ToF (Time-of-Flight), которые фиксируют время прохождения луча до цели и обратно; RGB-датчики дальности; специальные оптические дальномеры для создания более аккуратной 3D-модели физиономии.

Эти инновации встречаются наиболее часто во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: искусственный интеллект в исполнении

Современные устройства идентификации физиономий немыслимы в отсутствие применения ИИ и машинного обучения. Именно вследствие таким разработкам, как Спинто, устройство может распознавать владельца даже при метаморфозах внешности: новая стрижка, щетина, очки или макияж не становятся помехой для деблокировки.

Детектирование лица

На первом шаге программа должна быстро найти лицо среди всего изображения с камеры. Для этой задачи применяются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые „обучены“ идентифицировать лиц человека среди множества других объектов.

Пример: процесс MTCNN способен находить лицо даже при частичном закрытии (например, платком или ладонью).

Выделение основных моментов

После идентификации лица устройство, такая как Спинто, вычисляет местоположение главных точек: кончики глаз, верхушка носа, границы губ и так далее. Обычно используется от 68 до 128 главных меток на лицевой области.

Это действие требуется для нормализации изображения: если человек держит смартфон под наклоненным, или повернул голову, программа корректирует картинку до обычного угла для дальнейшего анализа.

Формирование биометрического идентификатора модели

Далее нейросеть строит уплотненное цифровое представление („эмбеддинг“) облика пользователя — своеобразный цифровой „отпечаток“ внешности длиной от 128 до 512 вещественных чисел.

Данный шаблон весьма трудно сфальсифицировать: он не сохраняет непосредственно картинку юзера, а лишь особенные черты его облика, что делает его идеальным для таких систем, как Спинто казино.

Сопоставление и принятие заключения

В случае, когда человек желает разблокировать телефон взором, программа воспроизводит все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный уровень (обычно больше 99%), телефон, как и платформа Спинто казино, доступен; если нет — доступ блокируется.

Приспособление к трансформациям облика

Интересная особенность нынешних систем — возможность самообучения. Если вы регулярно разблокируете телефон с свежей укладкой или оптикой, алгоритм постепенно обновляет базовый модель вашего внешности для увеличения точности действия без ухудшения безопасности.

Охрана биометрических данных.

Большинство клиенты боятся хранить свои био-идентификационные данные на телефоне из-за угрозы утечки данных или взлома устройства. Определенные организации, например Спинто казино, предлагают решения для улучшения защиты сведений юзеров.

• Локальное сохранение: Большинство аппаратов хранит биометрические модели лишь внутрь безопасного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют аппарат и закрыты в том числе изготовителю.

• Шифрование: Все информация сберегаются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих разработчиков не имеют непосредственного возможности доступа к биометрическим данным; они могут лишь требовать факт верификации личности через системный API.

Следует отметить значимую особенность: в случае, если кто-либо сможет получить физический доступ к вашему телефону (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие изготовители внедряют систему защиты от автоматического разблокирования — к примеру, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие бывают категории определения лиц?

Сегодня можно определить выделить три главных подхода к выполнению этой операции:

Программируемое двухмерное идентификация

Применяется только передняя камера без дополнительных датчиков дистанции. Подобный подход используется обычно в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность осуществления; умеренная стоимость; быстрая функционирование при достаточном свете.
Минусы: несложно ввести в заблуждение снимком; нестабильная деятельность ночью; недостаточная охрана.

Аппаратное объёмное сканирование

Применяет инфракрасную видеокамеру + проекционный модуль точек + сенсоры дистанции (Face ID у Apple; аналогичные технологии у Huawei Mate).
Плюсы: высокая достоверность; нельзя исказить изображение/видеозапись; устойчивая работа при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана („чёлка“)

Комбинированные методы с ИИ-дополнением

Применяют комбинацию программируемых методов + техническую обработку + постобработку нейросетями для повышения устойчивости к атакам („anti-spoofing“). Например, такие изделия, например Спинто и Google Pixel Face Unlock новейших поколений, объединяют фронталку c ИК датчиком движения Soli Radar для защиты от подделок жестами/масками/видеоэкранами посторонних устройств.

Образцы применения разных способов

• iPhone серии X/11/12/13/14 используют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил подобие Face ID в ряду Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное плоское идентификацию по изображению фронталкой, так и сенсор глазного ириса.
• Huawei Mate20 Pro использует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Вопросы охраны и ложные срабатывания

Несмотря на замечательный развитие технологий за недавние лет, идеальных системы пока не имеется:

1. Возможность обмана: Бюджетные мобильники легко открываются высококачественной фотографией хозяина или роликом с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые безупречные механизмы могут спутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
3. Метаморфозы внешнего вида: Внезапное похудение/увеличение массы тела, косметические процедуры или травмы в некоторых случаях требуют перерегистрации биометрии.
4. Условия съёмки: Сильная засветка солнечным светом или плотная затенение могут уменьшить точность определения признаков.

Ниже несколько советов по надёжному применению:

• Для значимых операций всегда внедряйте двухэтапную аутентификацию;
• Не включайте возможность „Разблокировка по лицу“ на бюджетных аппаратах без ИК-сенсоров;
• Постоянно обновляйте программное обеспечение смартфона для предотвращения угроз от современных угроз;
• Включайте опцию „Требовать распахнутых глаз“ там, где она есть.

Где дополнительно применяется технологии помимо смартфонов?

Несмотря на то, что предмет данной статьи касается в частности портативным гаджетам, необходимо сказать о альтернативных областях использования технологии:

• Контроль доступа в офисах и жилых домах;
• Платёжные терминалы банков („Face Pay“);
• Электронные паспорта последнего образца;
• Установки видеоконтроля городских служб;
• Механизация отслеживания явки учебных заведений/вузов;
• Аутентификация юзеров персональных компьютеров/ноутбуков.

Например: В городском метро уже проверяется система платежа проезда по фейсу („Face Pay“) — хватит пройти через турникет без пластика или мобильника! Похожие проекты реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом меняется техпроцесс в наше время?

Всякий годочек возникают новые мысли для усовершенствования качества деятельности систем распознавания лиц:

1. Увеличивается чёткость датчиков — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше шанс ошибки;
2. Совершенствуются нейронные сети — передовые конструкции типа MobileNetV3 дают возможность скоростно обучаться дополнительным характеристикам облика владельца прямо на устройстве без пересылки информации в облачное хранилище.
3. Совершенствуются методы антиспуфинга — теперь мобильные устройства умеют отличать реальные движущиеся лица от фиксированных фото/маскировок по незаметным микродвижениям.
4. Интеграция со интеллектуальными приборами — смарт-часы могут самостоятельно закрыть доступ к мобильный телефон, если владелец удалился на значительное расстояние.
5. Проявляются гибридные системы — к примеру объединяющие голосовую опознание + лицо + дактилоскопический след.

Здесь, которые направления особенно актуальны сейчас:

1) Уменьшение элементов

Изготовители намереваются сократить величину выреза („чёлки“) для датчики на экране за счёт интеграции маленьких ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на устройстве

Для повышения конфиденциальности всё более вычислений осуществляется внутри устройства без отправки информации во внешний облачный сервис.

3) Унификация стандартов

Гугл интенсивно пропагандирует норму BiometricPrompt API, с целью чтобы аналогичные площадки, вроде Spinto, и все Android-аппы могли взаимодействовать с всеми формами биометрии единообразно.

Какое решить сегодня?

Когда тебе необходима наивысшая безопасность информации, подбирайте топовые модели с вмонтированным ИК-проектором или же ToF-сенсором глубины.

• iPhone каждого актуальных версий
• Huawei Companion/P Series серии
• Mix Professional
• Vivo X линейки
• Oppo Find Х серии.

Если средства ограничен – лучше отдавать предпочтение классическим способам защиты (PIN-код/сканер отпечатка), а возможность „разблокировка по лицу“, такую как в Spinto, задействовать только как второстепенную опцию комфорта.

Как улучшить практичность использования опции?

Есть некоторые хитростей для пользователей, кто уже пользуется разблокировку через лицо:

1. Периодически обновляйте свою фотографию-шаблон, если значительно изменяется внешность.
2. Не забывайте очищать линзу фронтальной камеры – загрязнения могут уменьшить точность!
3. Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам включает камеру если вы берёте его в руки.
4. В процессе регистрации постарайтесь сохранять лицо прямо впереди видеоустройства исключая сильного наклона головы.
5. Используйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвернулись от экрана.

Перспективы эволюции инноваций

В ближайшие времена можно предвкушать возникновения полностью дистанционных способов распознавания индивидуума сразу по нескольким биометрическим параметрам одновременно: облик + голос + шаги + жесты рук!

Также вероятно появление современных способов охраны приватности – скажем, переменное изменение электронного шаблона после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее захватывающих техник нашего периода! Она обеспечивает интеракцию со мобильным устройством комфортнее чем до этого, и такие аппы, как Спинто казино, могут значительно повысить ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как функционирует эта система в деталях, – сможете вдумчиво определять свой следующий девайс!