Как работает распознавание лиц в телефонах

Почему мы выбираем разлочивание по фейсу

В прошлые годы идентификация лиц стало одной из наиболее востребованных опций для открытия умных телефонов. Всего некоторые годков тому назад основная масса пользователей удовлетворялись PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением подобных технологий, например cabura, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какой аспект превращает эту особенность очень нужной? Прежде всего, это комфортно: не нужно помнить трудные пароли или находить правильный палец в тьме. Во-вторых, это мгновенно: современные алгоритмы идентифицируют лицо буквально за мгновения ока. В-третьем пункте, это впечатление будущего — как будто в фильмах про cabura casino агентов.

Однако за данной на первый взгляд легкостью прячется целый мир сложных технологий и инженерных разработок. Попробуем исследовать, как именно действует распознавание лиц в современных мобильных телефонах, какие существуют методы, насколько они надёжны и что нас ожидает в будущем.

Сжатая история развития технологии

Идентификация лиц как техника присутствует уже более 50 годов. Изначальные эксперименты автоматизированного изучения облика были предприняты еще в 1960-х годы в лабораториях США. Тогда ЭВМ могли лишь выделять силуэты черепа и определять промежутки между зрачками и губами на монохромных снимках.

Первые торговые платформы возникли в 1990-х годах, но они были далеки от совершенства: работали медленно и часто ошибались. Только с прогрессом искусственных сетей и таких систем, как кабура, мощных мобильных процессоров идентификация лиц стало по-настоящему общедоступным явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным сканированием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали интегрировать собственные разработки.

Ключевые этапы действия устройства идентификации

Процесс определения лица можно условно разделить на несколько ключевых этапов:

Идентификация лиц — устройство выявляет присутствие людского лица в снимке.
Определение признаков — алгоритм изучает черты физиономии: форму зрительных органов, обонятельного органа, уст, позицию бровей.
Построение структуры — создаётся уникальный цифровой отпечаток (faceprint) на основе определённых признаков.
Сравнение со эталоном — полученный образец сопоставляется с сохранённой при учёте биометрической информацией владельца.
Принятие выбора — если сходство достаточно значительное, смартфон открывается.

Любой из указанных стадий запрашивает особых процедур и оптимизаций для скорой работы прямо на устройстве.

Аппаратные компоненты: что прячется внутри

Стандартная фронтальная камера.

Самый простой легкий способ идентификации физиономии использует лишь переднюю видеокамеру мобильного устройства. Подобный подход осуществлён во многих доступных версиях Android-устройств.

Достоинства:

Не требует дополнительных сенсоров.
Оперативно работает при качественном свете.

Слабые стороны:

Просто обмануть изображением или роликом.
Неправильно функционирует при низком свете или нестандартных ракурсах.

ИК камера и пунктирный проектор

Более продвинутые системы, такие как кабура, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология является основой Face ID от Apple.

Как это работает:

Точечный устройство проекции отображает на лицо использующего невидимую решетку из тысяч инфракрасных меток (например, Face ID использует около 30 000 пятен).
Инфракрасная камера фиксирует изменение формы этой решетки по плоскости лица.
Создаётся 3D глубинная карта глубины, которая практически неосуществима для имитации стандартной снимком или маскировкой.

Преимущества

Надёжная функционирование даже в полной темноте.
Высокая сопротивляемость к имитациям.
Точность идентификации более 99%.

Дополнительные сенсоры

В определённых девайсах задействуются также вспомогательные сенсоры: ToF (Time-of-Flight), которые измеряют время прохождения света до объекта и обратно; Трехцветные-датчики глубины; специальные оптические лидары для формирования более аккуратной 3D-модели физиономии.

Эти технологии встречаются наиболее часто во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: искусственный интеллект на работе

Текущие устройства распознавания лиц немыслимы без эксплуатации artificial intelligence и машинного обучения. Именно вследствие таким разработкам, как кабура, аппарат может распознавать владельца даже при изменениях внешнего вида: новая причёска, щетина, оптика или макияж не становятся барьером для разблокировки.

Распознавание лица

В стартовом этапе алгоритм должна быстро распознать образ лица внутри полного кадра с камеры. Для данной цели применяются каскадные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые “обучены” идентифицировать лица людей среди множества других объектов.

Пример: алгоритм MTCNN способен обнаруживать облик даже при частичном закрытии (например, платком или рукой).

Идентификация важных точек

После распознавания лица устройство, такая как кабура, вычисляет местоположение основных точек: кончики глаз, верхушка носа, контуры губ и так далее. Как правило применяется от 68 до 128 ключевых меток на лице.

Это требуется для нормализации изображения: если пользователь находится с смартфон под углом, или склонил голову, программа корректирует изображение до стандартного положения для последующего изучения.

Формирование биометрического образца

Далее нейронная сеть строит сжатое числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 вещественных чисел.

Данный формат весьма сложно подделать: он не хранит само картинку юзера, а лишь особенные характеристики его облика, что делает его совершенным для таких площадок, как кабура казино.

Сопоставление и принятие решения

Когда юзер намеревается разблокировать смартфон взором, система воспроизводит все описанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно больше 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ не предоставляется.

Адаптация к изменениям внешнего вида

Увлекательная черта актуальных системы — способность самообучения. Если ты регулярно доступаете к телефон с свежей прической или очками, программа постепенно модернизирует основной модель вашего внешности для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрии информации.

Множество пользователи опасаются сохранять свои биометрические данные на смартфоне из-за угрозы утечки данных или взлома устройства. Иные фирмы, вроде кабура казино, предлагают варианты для повышения защиты сведений клиентов.

Локальное сохранение: Преимущественно аппаратов записывает биометричные модели только внутри защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не выходят из аппарат и недоступны даже создателю.
Шифрование: Все информация хранятся только в кодированном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Приложения внешних разработчиков не имеют прямого возможности доступа к биометрическим данным; они могут лишь требовать факт подтверждения личности через системный API.

Необходимо упомянуть существенную подробность: если кто-либо сможет получить доступ к вашему телефону физически (например, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому значительное количество производители реализуют защиту от автоматического разблокирования — например, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются виды распознавания лиц на изображениях?

На сегодняшний день можно определить определить 3 ключевых способа к осуществлению этой задачи:

Программируемое 2D определение

Используется только фронтальная видеокамера без экстра датчиков глубины. Этот способ наблюдается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость реализации; низкая стоимость; быстрая работа при хорошем свете.
Минусы: несложно одурачить фотографией; неустойчивая работа ночью; низкая безопасность.

Оборудование для трёхмерное сканирование

Использует ИК камеру + проектор точек + сенсоры глубины (Face ID у Apple; подобные решения у Huawei Mate).
Достоинства: высокая надежность; невозможно подделать изображение/видеозапись; стабильная деятельность в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с дополнением ИИ

Задействуют комбинацию софтверных методов + техническую обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как кабура и Google Pixel Face Unlock современных поколений, объединяют фронтальную камеру c инфракрасным датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Примеры использования различных способов

iPhone линейки X/11/12/13/14 применяют только аппаратное трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition первый раз внедрил аналог Face ID в ряду Android.
Samsung Galaxy S10 версия/S20 поддерживают как программное 2D определение по снимку селфи-камерой, так и сенсор ириса глаза.
Huawei Mate20 Pro использует комплекс из ИК-подсветки + Dot Projector + ToF-датчик

Вопросы охраны и ошибочные тревоги

Несмотря на впечатляющий успехи техники за прошедшие годы, идеальных систем пока не существует:

Возможность подвоха: Бюджетные смартфоны без труда “разблокируются” качественной изображением хозяина либо роликом с дисплея иного гаджета.
Идентичные двойняшки: Даже самые совершенные механизмы могут перепутать между монозиготными близнецами либо семьями с очень аналогичной внешностью.
Метаморфозы внешнего вида: Стремительное снижение веса/увеличение массы тела, пластические операции либо травмы порой требуют перерегистрации биометрии.
Условия фотографирования: Яркая подсветка солнцем или же интенсивная затенение могут понизить верность распознавания признаков.

Ниже пара советов для надёжному применению:

Для значимых операций всегда внедряйте двухэтапную аутентификацию;
Не активируйте опцию “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
Постоянно апгрейдите программное обеспечение мобильного устройства для защиты от новых видов атак;
Включайте функцию “Требовать раскрытых глаз” там, где она имеется.

Где ещё используется технологии за исключением мобильных телефонов?

Хотя тема данной статьи посвящена именно смартфонам и планшетам, необходимо сказать о прочих направлениях внедрения технологии:

Мониторинг доступа в деловых центрах и многоквартирных зданиях;
Платёжные устройства банков (“Face Pay”);
Цифровые удостоверения личности современного типа;
Установки видеомониторинга городских сервисов;
Автоматизация регистрации явки образовательных учреждений/университетов;
Аутентификация участников персональных компьютеров/ноутбуков.

Например: В столичном метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — нужно лишь пройти через барьер без карты или телефона! Схожие проекты развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом трансформируется технический процесс в нынешнее время?

Каждый годик возникают новые идеи для повышения стандарта деятельности систем лицевого распознавания:

Увеличивается детализация датчиков — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше шанс ошибки;
Совершенствуются нейросети — новейшие архитектуры типа MobileNetV3 позволяют быстро адаптироваться к дополнительным характеристикам вида пользователя непосредственно на девайсе без отправки данных в облако.
Улучшаются методы антиспуфинга — теперь мобильные устройства могут различать реальные анимированные лица от фиксированных фотографий/масок по незаметным микродвижениям.
Взаимодействие со умными устройствами — смарт-часы могут автоматически блокировать смартфон, если обладатель отошёл далеко.
Появляются комбинированные системы — к примеру совмещающие речевую аутентификацию + лицо + пальцевой отпечаток.

Вот, которые направления в особенности популярны сейчас:

1) Миниатюризация элементов

Производители намереваются минимизировать габариты прорези (“чёлки”) для датчики на экране за счёт внедрения маленьких ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения приватности всё более обработки данных осуществляется внутри устройства без пересылки данных во внешний облачный услугу.

3) Стандартизация норм

Гугл энергично продвигает стандарт BiometricPrompt API, для того чтобы такие площадки, вроде cabura, и все Android-аппы могли работать с всеми формами биометрии единообразно.

Какое выбрать на сегодня?

Когда вам нужна предельная защита информации, остановите выбор на флагманские устройства со встроенным ИК-проектором либо ToF-сенсором глубины.

iPhone всех существующих актуальных моделей
Huawei Partner/P Series серии
Mix Expert
Vivo X линейки
Oppo Найти Икс линейки.

Если бюджет скромен – лучше предпочесть традиционным методам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в cabura, задействовать только как дополнительную опцию удобства.

Каким способом увеличить удобство функционирования опции?

Есть пара советов для тех, кто уже пользуется функцию распознавания лица:

Периодически обновляйте свою фотографию-шаблон, если сильно меняется внешность.
Не пренебрегайте очищать объектив передней камеры – пятна могут понизить точность!
Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – так смартфон сам включает фотоаппарат когда вы поднимаете его.
При регистрации постарайтесь держать лицевую часть неподвижно перед видеоустройства без сильного наклона головы.
Задействуйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отворачиваетесь от экрана.

Возможности прогресса техники

В предстоящие годы можно ожидать появления полностью безконтактных способов идентификации персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + звучание + походка + манипуляции руками!

Также вероятно появление современных методов защиты приватности – скажем, изменяющееся модификация электронного образца после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из самых интересных инноваций нашего эпохи! Она делает взаимодействие со телефоном комфортнее чем когда-либо прежде, и такие программы, как кабура казино, могут существенно оптимизировать ваш юзерский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы знаете, как работает эта технология в деталях, – будете в состоянии осознаннее подбирать свой следующий устройство!