Как функционирует распознавание лиц в смартфонах

Для чего мы останавливаемся на разлочивание по лицевому распознаванию

В прошлые времена распознавание физиономий является одной из самых популярных опций для деблокировки умных телефонов. Всего пару годков назад основная часть юзеров удовлетворялись пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, например cabura, нам вполне просто взглянуть на экран — и аппарат тут же опознает своего владельца.

Что превращает данную возможность очень нужной? Прежде всего, это практично: не нужно удерживать в памяти замысловатые пароли или отыскивать правильный палец в тьме. Кроме того, это быстро: современные системы распознают лицо практически за доли секунды. В-третьих, это впечатление будущего — как будто в кинолентах про кабура шпионов.

Тем не менее за такой видимой простотой таится полный вселенная трудных техник и инженерных разработок. Попробуем понять, как именно работает распознавание лиц в актуальных смартфонах, какие применяются технологии, насколько они безопасны и что нас предстоит.

Сжатая повествование прогресса инноваций

Распознавание лиц как методика существует уже более пятидесяти лет. Изначальные пробы машинного анализа облика были сделаны еще в 1960-х годах в лабораториях США. Тогда компьютеры умели лишь обозначать силуэты головы и измерять промежутки между зрачками и губами на ахроматических фотографиях.

Первые бизнес платформы стали доступны в девяностых годах, но они были далеки от совершенства: работали медленно и часто давали сбои. Только с развитием искусственных сетей и таких платформ, как кабура, мощных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным идентификацией лица. За этим последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять свои разработки.

Ключевые этапы действия механизма распознавания

Процесс определения лица можно ориентировочно разделить на несколько ключевых этапов:

1. Идентификация лиц — камера распознает присутствие людского образа в снимке.
2. Выделение признаков — механизм изучает черты физиономии: форму глаз, обонятельного органа, губ, позицию надбровных дуг.
3. Построение структуры — создаётся уникальный электронный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со образцом — сформированный модель сверяется со зафиксированной при внесении биометрической данными владельца.
5. Принятие выбора — если сходство достаточно существенное, смартфон открывается.

Всякий из этих стадий требует специальных методов и оптимизаций для оперативной работы непосредственно на девайсе.

Аппаратные компоненты: что прячется внутри

Обычная селфи камера.

Самый простой простой вариант идентификации облика использует лишь фронтальную камеру смартфона. Данный способ внедрён во многих доступных моделях Android-устройств.

Положительные стороны:

• Необходимо нуждается в дополнительные сенсоров.
• Шустро действует при достаточном свете.

Недостатки:

• Легко ввести в заблуждение фотографией или видеозаписью.
• Неудачно работает при низком освещённости или нестандартных точках зрения.

Инфракрасная камера и пунктирный проекционный аппарат

Более совершенные системы, такие как кабура, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология составляет базу Face ID от Apple.

Каким образом это работает:

• Точечный проекционный прибор показывает на облик пользователя невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 пятен).
• Инфракрасная камера записывает искривление этой сетки по плоскости лица.
• Создаётся трехмерная карта глубины глубинности, которая почти невозможна для подделки стандартной снимком или маской.

Выигрыши

• Надёжная функционирование даже в полной тьме.
• Большая сопротивляемость к подделкам.
• Точность распознавания свыше 99%.

Дополнительные датчики

В отдельных девайсах применяются также вспомогательные датчики: ToF (Time-of-Flight), которые измеряют период распространения света до предмета и обратно; RGB-датчики дальности; специальные световые измерители расстояния для создания более детализированной 3D-модели лица.

Эти разработки применяются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные алгоритмы: синтетический ум на исполнении

Современные системы идентификации физиономий немыслимы в отсутствие эксплуатации искусственного интеллекта и machine learning. Именно из-за таким инновациям, как кабура, аппарат может идентифицировать пользователя даже при изменениях облика: новая причёска, борода, линзы или грим не становятся препятствием для разблокировки.

Распознавание физиономии

На стартовом шаге алгоритм должна быстро обнаружить ликовое изображение в пределах всего изображения камеры. Для этого применяются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые “обучены” распознавать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN способен распознавать физиономию даже с неполном перекрытии (например, шарфом или рукой).

Выделение основных аспектов

После распознавания лица механизм, такая как кабура, определяет положение основных точек: кончики глаз, кончик носа, края губ и так далее. Часто используется от 68 до 128 ключевых точек на лицевой поверхности.

Данное необходимо для стабилизации изображения: если пользователь удерживает мобильник под наклоном, или повернул голову, программа корректирует картинку до нормального состояния для дальнейшего анализа.

Формирование биометрического шаблона

Далее нейронная сеть строит уплотненное цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный образец весьма затруднительно имитировать: он не хранит непосредственно изображение пользователя, а лишь особенные особенности его вида, что делает его оптимальным для таких систем, как кабура казино.

Сравнительный анализ и вынесение заключения

Когда юзер желает разлочить мобильник взглядом, программа повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный границу (обычно превышает 99%), телефон, как и платформа кабура казино, разблокируется; если нет — доступ запрещается.

Адаптация к метаморфозам внешности

Увлекательная особенность актуальных систем — способность самостоятельного обучения. Если ты регулярно разблокируете телефон с новой прической или оптикой, система постепенно модернизирует базовый модель вашего облика для улучшения точности функционирования без снижения уровня безопасности.

Безопасность биометрических данных данных.

Множество клиенты беспокоятся хранить свои био-идентификационные данные на мобильном устройстве из-за вероятности потери данных или взлома гаджета. Определенные компании, например кабура казино, предлагают методы для улучшения защиты информации пользователей.

• Локальное сбережение: Основная часть девайсов записывает биометричные образцы только внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не выходят из устройство и закрыты даже создателю.

• Шифрование: Все данные хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь запрашивать факт верификации личности через системный API.

Необходимо упомянуть важную подробность: в случае, если какой-то человек достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании реализуют защиту от “слепого” разблокирования — например, заставляют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются типы определения лиц на изображениях?

Сегодня можно выделить различить 3 главных способа к выполнению этой задачи:

Программное плоское распознавание

Применяется только лицевая камера без дополнительных детекторов дистанции. Такой подход наблюдается наиболее часто в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: легкость воплощения; низкая цена; быстрая деятельность при качественном освещении.
Минусы: легко обмануть снимком; нестабильная функционирование ночью; низкая безопасность.

Техническое трёхмерное сканирование

Использует ИК видеокамеру + проекционный модуль пикселей + датчики глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Плюсы: большая достоверность; не получится обмануть изображение/видеозапись; устойчивая функционирование в любых условиях освещения.
Минусы: удорожание устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с интеграцией ИИ

Используют комбинацию программных методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие товары, например кабура и Google Pixel Face Unlock новейших поколений, комбинируют фронталку c ИК сенсором мобильности Soli Radar для предотвращения от подделок руками/масками/видеодисплеями посторонних устройств.

Иллюстрации эксплуатации разнообразных техник

• iPhone модели X/11/12/13/14 применяют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз внедрил аналог Face ID в ряду Android.
• Samsung Galaxy S10 модель/S20 имеют как софтверное двухмерное идентификацию по фото селфи-камерой, так и датчик ириса глаза.
• Huawei Mate20 Pro применяет комплекс из ИК-освещения + Dot Projector + ToF-датчик

Проблемы безопасности и ложные сигналы

Несмотря на поразительный успехи техники за прошедшие лет, совершенных систем пока не наблюдается:

1. Шанс подвоха: Бюджетные смартфоны легко доступны высококачественной изображением хозяина или видеозаписью с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые безупречные механизмы могут спутать между монозиготными близнецами либо родичами с очень аналогичной внешностью.
3. Изменения облика: Резкое похудение/увеличение массы тела, хирургические вмешательства или повреждения в некоторых случаях требуют повторной регистрации биометрических данных.
4. Условия записи: Интенсивная засветка солнечным светом либо плотная темнота могут понизить аккуратность идентификации признаков.

Вот пара рекомендаций для безопасному эксплуатации:

• Для важных операций всегда используйте двухэтапную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на бюджетных моделях без ИК-сенсоров;
• Регулярно обновляйте программное обеспечение телефона для предотвращения угроз от новых видов атак;
• Включайте настройку “Требовать открытых глаз” в тех местах, где она доступна.

В каких областях ещё применяется технология за исключением смартфонов?

Пускай основная мысль данной статьи касается в частности смартфонам и планшетам, следует отметить прочих направлениях внедрения технологии:

• Мониторинг входа в деловых центрах и многоквартирных зданиях;
• Платёжные терминалы банков (“Face Pay”);
• Электронные паспорта последнего типа;
• Комплексы видеоконтроля муниципальных служб;
• Механизация отслеживания посещаемости школ/университетов;
• Авторизация юзеров компьютеров/ноутбуков.

Например: В московском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Схожие проекты реализуются в Поднебесной (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким способом меняется технический процесс сегодня?

Каждый годик проявляются новые мысли для повышения уровня функционирования систем идентификации лиц:

1. Увеличивается детализация сенсоров — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше вероятность погрешности;
2. Развиваются нейронные сети — новейшие архитектуры типа MobileNetV3 позволяют быстро обучаться свежим характеристикам внешности обладателя прямо на устройстве без пересылки информации в облачное хранилище.
3. Совершенствуются способы антиспуфинга — теперь смартфоны могут различать подлинные живые лица от неподвижных фотографий/масок по микроскопическим движениям кожи.
4. Взаимодействие со смарт-гаджетами — смарт-часы могут автоматически блокировать телефон, если владелец отошёл далеко.
5. Проявляются гибридные устройства — например совмещающие аудио опознание + лицо + дактилоскопический след.

Итак, какие тенденции особенно востребованы сейчас:

1) Миниатюризация деталей

Производители пытаются сократить величину выреза (“чёлки”) под сенсоры на дисплее за счёт встраивания миниатюрных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для увеличения приватности всё больше обработки данных выполняется на месте без передачи информации во сторонний облачный услугу.

3) Упорядочивание норм

Гугл энергично продвигает норму BiometricPrompt API, чтобы аналогичные системы, как cabura, и каждые Android-аппы могли взаимодействовать с любыми видами биометрии унифицированно.

Какое выбрать на сегодня?

Если тебе необходима максимальная сохранность информации, подбирайте передовые устройства со встроенным ИК-излучателем или ToF-сенсором глубины.

• iPhone каждого актуальных моделей
• Huawei Companion/P серии
• Mix Pro
• Vivo X линейки
• Oppo Найти X серии.

Если бюджет скромен – лучше предпочесть обычным методам защиты (PIN-код/сканер пальца), а функцию “разблокировка по лицу”, такую как в cabura, задействовать только как опциональную опцию удобства.

Каким способом повысить комфорт работы опции?

Есть некоторые лайфхаков для пользователей, кто уже использует разблокировку через лицо:

1. Периодически меняйте свою изображение-шаблон, если значительно трансформируется внешность.
2. Не упускайте из виду протирать объектив фронтальной камеры – загрязнения могут понизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам активирует камеру когда вы берёте его в руки.
4. При регистрации постарайтесь сохранять голову ровно впереди видеоустройства исключая резкого наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает телефон, если вы отворачиваетесь от дисплея.

Перспективы развития техники

В скоро наступающие времена можно предвкушать появления полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим параметрам одновременно: физиономия + звучание + шаги + движения рук!

Также вероятно появление современных методов охраны конфиденциальности – скажем, динамическое модификация цифрового паттерна после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее увлекательных инноваций нашего периода! Она обеспечивает интеракцию со мобильным устройством удобнее чем до этого, и такие приложения, как кабура казино, могут существенно повысить ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы понимаете, как работает эта технология в деталях, – сумеете вдумчиво подбирать свой очередной девайс!