Каким образом работает распознавание лиц в мобильных устройствах

Зачем мы предпочитаем разблокировку по фейсу

В недавние годы распознавание физиономий является одной из наиболее востребованных опций для деблокировки умных телефонов. Всего некоторые лет ранее основная часть использующих удовлетворялись PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но при появлением таких технологий, например cabura, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Что делает данную функцию такой востребованной? Для начала, это комфортно: не нужно помнить сложные пароли или искать нужный палец в темноте. Также, это быстро: современные программы идентифицируют лицо фактически за мгновения ока. В-третьих, это чувство будущего — словно в кинолентах про кабура агентов.

Однако за этой кажущейся несложностью прячется целый мир комплексных методов и инженерных разработок. Позвольте нам исследовать, как именно функционирует идентификация по лицу в актуальных мобильных телефонах, какие применяются методы, насколько они защищены и что нас ожидает в будущем.

Короткая история прогресса инноваций

Идентификация лиц как методика присутствует уже более пятидесяти лет. Первые попытки автоматического изучения облика были осуществлены еще в 1960-х годах в научных учреждениях США. Тогда ЭВМ способны были лишь выделять силуэты черепа и измерять промежутки между глазами и устами на черно-белых снимках.

Изначальные бизнес установки стали доступны в девяностых годах, но они были несовершенны: действовали неспешно и часто давали сбои. Только с эволюцией синтетических сетей и таких площадок, как кабура, мощных мобильных процессоров определение лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным идентификацией лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие стали интегрировать собственные решения.

Ключевые этапы действия устройства идентификации

Процесс распознавания лица можно условно поделить на несколько важных этапов:

Обнаружение лиц — аппарат выявляет наличие людского лица в снимке.
Определение особенностей — механизм изучает особенности физиономии: форму зрительных органов, носа, уст, позицию надбровных дуг.
Построение структуры — создаётся уникальный виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение со эталоном — полученный шаблон сверяется с записанной при учёте биометрической данными владельца.
Принятие решения — если соответствие достаточно высокое, смартфон открывается.

Любой из указанных шагов запрашивает специальных методов и улучшений для оперативной работы непосредственно на девайсе.

Железные составляющие: что прячется внутри них

Типичная фронтальная камера.

Самый простой простой вариант распознавания облика задействует только фронтальную видеокамеру смартфона. Такой метод внедрён во многих доступных вариантах Android-устройств.

Сильные стороны:

Необходимо потребляет дополнительных датчиков.
Оперативно функционирует при достаточном освещении.

Недостатки:

Легко одурачить фотографией или видеозаписью.
Плохо действует при слабом освещении или непривычных ракурсах.

ИК камера и пунктирный проектор

Более совершенные системы, такие как кабура, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная методика составляет базу Face ID от Apple.

Каким образом это работает:

Точечный проектор отображает на лицо пользователя невидимую сетку из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
Инфракрасная устройство фиксирует изменение формы данной сетки по поверхности лица.
Создаётся трехмерная карта глубины глубины, которая практически неподвластна для имитации стандартной фото или маскировкой.

Плюсы

Надёжная работа даже в полной тьме.
Высокая сопротивляемость к фальсификациям.
Точность определения более 99%.

Дополнительные сенсорные устройства

В определённых устройствах используются также дополнительные сенсоры: ToF (Time-of-Flight), которые фиксируют период прохождения луча до объекта и обратно; Трехцветные-датчики глубины; специальные лазерные дальномеры для построения более аккуратной 3D-модели физиономии.

Эти разработки применяются в основном во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные методы: синтетический интеллект в работе

Нынешние системы распознавания лиц неосуществимы без эксплуатации искусственного интеллекта и machine learning. Именно вследствие таким инновациям, как кабура, аппарат может узнавать пользователя даже при метаморфозах внешнего вида: новая стрижка, щетина, оптика или макияж не становятся помехой для деблокировки.

Обнаружение лица

При стартовом этапе программа обязана быстро найти образ лица внутри всего изображения с камеры. Для этой задачи используются многоуровневые классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые подготовлены распознавать лица людей среди множества других объектов.

Пример: алгоритм MTCNN в состоянии находить физиономию даже при неполном перекрытии (например, шарфом или ладонью).

Выделение важных аспектов

После идентификации лица устройство, такая как кабура, вычисляет положение ключевых точек: кончики глаз, конец носа, границы губ и так далее. Обычно применяется от 68 до 128 главных маркеров на лицевой области.

Это требуется для выравнивания визуала: если юзер находится с смартфон под наклоном, или склонил голову, программа корректирует картинку до обычного угла для последующего изучения.

Построение биометрического идентификатора модели

Далее искусственная сеть строит сжатое математическое представление („эмбеддинг“) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Данный шаблон крайне сложно сфальсифицировать: он не удерживает непосредственно фото юзера, а лишь особенные особенности его внешности, что делает его идеальным для таких систем, как кабура казино.

Сравнение и вынесение выбора

Если человек желает открыть мобильник глазами, программа воспроизводит все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный порог (обычно больше 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ запрещается.

Приспособление к трансформациям облика

Увлекательная характеристика актуальных систем — возможность самостоятельного обучения. Если вы постоянно открываете мобильное устройство с новой укладкой или оптикой, программа постепенно обновляет эталонный образец вашего лица для повышения точности работы без ухудшения безопасности.

Безопасность биометрических информации.

Многие юзеры опасаются сохранять свои био-идентификационные данные на смартфоне из-за риска утечки данных или хакерской атаки. Определенные организации, такие как кабура казино, предлагают методы для улучшения защиты информации юзеров.

Локальное сохранение: Преимущественно девайсов хранит био-идентификационные образцы только внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не выходят из аппарат и закрыты даже изготовителю.
Шифрование: Все данные сохраняются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Приложения внешних девелоперов не имеют непосредственного доступа к биометрическим; они могут лишь запрашивать факт подтверждения личности через системный API.

Необходимо подчеркнуть существенную особенность: если какой-то человек достанет физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие изготовители осуществляют защиту от неосознанного разблокирования — к примеру, просят разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают категории идентификации лиц?

В настоящее время можно определить 3 основных метода к осуществлению этой задачи:

Софтверное плоское определение

Эксплуатируется только передняя видеокамера без вспомогательных датчиков дистанции. Такой метод наблюдается наиболее часто в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: несложность осуществления; низкая стоимость; оперативная функционирование при хорошем освещении.
Минусы: легко ввести в заблуждение снимком; неустойчивая работа ночью; недостаточная охрана.

Аппаратное 3D оцифровка

Применяет инфракрасную видеокамеру + проекционный модуль точек + датчики глубины (Face ID у Apple; подобные технологии у Huawei Mate).
Преимущества: значительная достоверность; невозможно исказить изображение/видеозапись; стабильная работа в любых условиях освещения.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана („чёлка“)

Комбинированные методы с интеграцией ИИ

Задействуют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для повышения устойчивости к атакам („anti-spoofing“). Например, подобные товары, как кабура и Google Pixel Face Unlock последних версий, сочетают фронтальную камеру c ИК датчиком мобильности Soli Radar для предотвращения от подделок руками/масками/видеодисплеями чужих устройств.

Иллюстрации эксплуатации разнообразных способов

iPhone модели X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition в первый раз представил подобие Face ID в числе Android.
Samsung Galaxy S10/S20 обеспечивают как программное обеспечение плоское идентификацию по изображению фронтальной камерой, так и сенсор радужки глаза.
Huawei Mate20 Pro использует систему из ИК-освещения + Dot Projector + ToF-датчик

Проблемы защиты и ошибочные сигналы

Несмотря на поразительный прогресс инноваций за недавние лет, идеальных механизмов пока не наблюдается:

Шанс подвоха: Бюджетные мобильники без труда „разблокируются“ высококачественной снимком пользователя либо видеозаписью с дисплея иного гаджета.
Идентичные близнецы: Даже самые безупречные системы могут спутать между однояйцевыми близнецами либо родичами с очень похожей внешностью.
Трансформации внешности: Стремительное снижение веса/увеличение массы тела, хирургические вмешательства или травмы иногда требуют обновления данных биометрии.
Условия фотографирования: Яркая освещённость солнцем или интенсивная темнота могут понизить верность распознавания признаков.

Вот несколько советов для защищённому использованию:

Для критически важных операций всегда используйте двухэтапную аутентификацию;
Не активируйте функцию „Разблокировка по лицу“ на бюджетных устройствах без ИК-сенсоров;
Систематически обновляйте программное обеспечение мобильного устройства для обеспечения безопасности от современных угроз;
Включайте опцию „Требовать открытых глаз“ везде, где она доступна.

В каких областях также применяется технологии за исключением смартфонов?

Пускай предмет данной статьи посвящена именно мобильным устройствам, стоит упомянуть о прочих направлениях внедрения технологии:

Управление входа в рабочих помещениях и жилых домах;
Платёжные аппараты финансовых учреждений („Face Pay“);
Электронные паспорта современного образца;
Комплексы видеонаблюдения городских подразделений;
Автоматизирование отслеживания присутствия образовательных учреждений/университетов;
Авторизация юзеров ПК/ноутбуков.

Например: В московском метро уже тестируется система оплаты проезда по лицу („Face Pay“) — хватит пройти через барьер без пластика или телефона! Аналогичные инициативы развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как трансформируется техпроцесс сегодня?

Всякий годочек проявляются современные идеи для усовершенствования стандарта функционирования систем лицевого распознавания:

Увеличивается разрешение сенсоров — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше риск погрешности;
Совершенствуются нейронные сети — передовые архитектуры типа MobileNetV3 дают возможность быстро обучаться свежим чертам облика обладателя напрямую на гаджете без пересылки информации в облачное хранилище.
Совершенствуются технологии антиспуфинга — теперь мобильные устройства способны отличать реальные движущиеся лица от фиксированных фотографий/масок по мельчайшим микродвижениям.
Взаимодействие со умными устройствами — смарт-часы могут авто заблокировать смартфон, если обладатель удалился на значительное расстояние.
Возникают гибридные системы — к примеру совмещающие речевую опознание + облик + дактилоскопический след.

Здесь, какие тенденции в особенности востребованы на сегодняшний день:

1) Сокращение элементов

Компании стараются сократить величину выреза („чёлки“) для сенсоры на экране за счёт встраивания компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на девайсе

Для повышения приватности всё больше расчётов выполняется локально без отправки информации во сторонний облачный услугу.

3) Стандартизация стандартов

Google интенсивно пропагандирует стандарт BiometricPrompt API, для того чтобы такие платформы, вроде cabura, и каждые Android-аппы могли работать с любыми видами биометрии единообразно.

Что решить на сегодня?

Когда тебе важна предельная сохранность данных, остановите выбор на флагманские аппараты с интегрированным ИК-излучателем либо ToF-датчиком глубины.

iPhone всех существующих новейших поколений
Huawei Companion/P Series линейки
Mix Professional
Vivo X серии
Оппо Обнаружить X серий.

Если средства скромен – лучше выбирать традиционным способам защиты (PIN-код/сканер пальца), а возможность „разблокировка по лицу“, такую как в cabura, использовать только как дополнительную опцию комфорта.

Каким способом улучшить практичность использования функции?

Есть несколько советов для людей, кто уже применяет функцию распознавания лица:

Регулярно обновляйте свою фото-шаблон, если сильно меняется облик.
Не забывайте протирать объектив фронтальной камеры – загрязнения могут снизить четкость!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам активирует камеру если вы поднимаете его.
В процессе регистрации старайтесь сохранять лицевую часть ровно впереди видеоустройства без значительного наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отворачиваетесь от экрана.

Будущее эволюции технологии

В предстоящие периоды можно предвкушать появления полностью безконтактных способов идентификации индивидуума сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + шаги + движения рук!

Также предполагается возникновение новых способов защиты конфиденциальности – например, переменное корректировка электронного шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из самых увлекательных технологий нашего времени! Она обеспечивает общение со телефоном проще чем когда-либо прежде, и такие программы, как кабура казино, могут в разы улучшить ваш опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы осведомлены, как функционирует эта технология внутри, – будете в состоянии осознаннее выбирать свой следующий устройство!