Как работает определение лицевых образов в телефонах

Почему мы выбираем разлочивание по лицевому распознаванию

В прошлые времена определение физиономий является одной из самых распространённых функций для разблокировки умных телефонов. Всего некоторые лет ранее основная масса юзеров удовлетворялись PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением подобных технологий, как Вулкан Платинум, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает эту конкретную возможность такой востребованной? Прежде всего, это удобно: не нужно удерживать в памяти замысловатые пароли или отыскивать нужный палец в темноте. Кроме того, это быстро: современные алгоритмы распознают лицо фактически за мгновение. В-третьих, это ощущение будущего — будто в фильмах про вулкан платинум разведчиков.

Однако за данной видимой несложностью скрывается весь мир комплексных методов и инженерных решений. Позвольте нам исследовать, как именно работает идентификация по лицу в актуальных смартфонах, какие применяются технологии, насколько они надёжны и что нас ожидает в будущем.

Краткая история эволюции инноваций

Распознавание лиц как методика существует уже более 50 годов. Изначальные попытки автоматического изучения лиц были осуществлены еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры умели лишь выделять контуры головы и измерять дистанции между зрачками и устами на ахроматических изображениях.

Начальные торговые системы стали доступны в 1990-х годах, но они были далеки от совершенства: действовали неспешно и часто ошибались. Только с прогрессом синтетических сетей и таких площадок, как Vulkan Platinum, сильных мобильных процессоров идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый массовый смартфон с надёжным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные решения.

Основные этапы работы устройства определения

Процесс определения лица можно примерно сегментировать на несколько ключевых этапов:

1. Распознавание лица — устройство выявляет существование гуманного лица в снимке.
2. Извлечение признаков — механизм исследует особенности физиономии: форму зрительных органов, обонятельного органа, уст, положение надбровных дуг.
3. Построение шаблона — создаётся уникальный цифровой отпечаток (faceprint) на основе определённых признаков.
4. Сравнение со стандартом — сформированный модель сопоставляется с сохранённой при внесении биометрической сведениями владельца.
5. Принятие выбора — если совпадение достаточно высокое, смартфон разблокируется.

Любой из этих шагов нуждается в специальных процедур и оптимизаций для быстрой работы прямо на устройстве.

Аппаратные элементы: что прячется в их недрах

Обычная селфи камера.

Наиболее простой метод определения облика применяет только фронтальную видеокамеру смартфона. Данный способ реализован во многих бюджетных вариантах Android-девайсов.

Плюсы:

• Не нуждается в потребляет внешних сенсоров.
• Оперативно функционирует при хорошем свете.

Отрицательные стороны:

• Просто одурачить фотографией или видеозаписью.
• Неудачно действует при низком свете или нестандартных точках зрения.

ИК фотокамера и пунктирный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология составляет базу Face ID от Apple.

Каким образом это функционирует:

• Точечный устройство проекции отображает на физиономию пользователя невидимую сетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 точек).
• ИК камера регистрирует изменение формы этой решетки по плоскости лица.
• Получается трёхмерная глубинная карта глубины, что практически неосуществима для фальсификации обычной снимком или маской.

Выигрыши

• Надёжная функционирование даже в полной темноте.
• Высокая устойчивость к подделкам.
• Точность распознавания более 99%.

Добавочные сенсорные устройства

В определённых девайсах используются также экстра сенсорные устройства: ToF (Time-of-Flight), которые определяют время прохождения луча до цели и обратно; RGB-датчики дальности; специальные оптические лидары для формирования более аккуратной 3D-модели лица.

Эти инновации встречаются наиболее часто во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический интеллект в действии

Современные системы опознания лиц немыслимы в отсутствие эксплуатации artificial intelligence и machine learning. Именно благодаря таким инновациям, как Vulkan Platinum, гаджет может узнавать пользователя даже при изменениях внешнего вида: новая укладка, щетина, оптика или макияж не становятся барьером для открытия.

Обнаружение лица

На первом стадии алгоритм обязана мгновенно распознать лицо в пределах целого кадра с камеры. Для данной цели применяются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые натренированы идентифицировать лица людей среди множества других объектов.

Пример: метод MTCNN способен находить облик даже в случае частичном закрытии (например, шарфом или рукой).

Выделение основных моментов

После распознавания лица устройство, такая как Vulkan Platinum, устанавливает положение главных точек: уголки глаз, кончик носа, контуры губ и так далее. Как правило задействуется от 68 до 128 главных маркеров на лице.

Это нужно для стабилизации картинки: если человек удерживает смартфон под наклоненным, или склонил голову, программа исправляет картинку до обычного угла для последующего изучения.

Построение биометрического модели

Далее искусственная сеть строит уплотненное математическое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 чисел с плавающей запятой.

Данный формат очень сложно имитировать: он не сохраняет само картинку юзера, а лишь исключительные особенности его внешности, что делает его идеальным для таких платформ, как Вулкан Казино Платинум.

Сопоставление и принятие заключения

Когда человек хочет разлочить смартфон глазами, система повторяет все указанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает заданный границу (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ блокируется.

Привыкание к метаморфозам облика

Занимательная черта современных систем — способность самостоятельного обучения. Если ты регулярно доступаете к телефон с новой укладкой или оптикой, система постепенно освежает основной модель вашего внешности для увеличения точности действия без снижения уровня безопасности.

Охрана биометрии данных.

Большинство юзеры боятся хранить свои биометрические данные на мобильном устройстве из-за вероятности утечки информации или хакерской атаки. Определенные компании, такие как Вулкан Казино Платинум, предлагают методы для повышения защиты сведений пользователей.

• Локальное сбережение: Основная часть устройств сохраняет биометрические образцы только внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не выходят из гаджет и не доступны даже создателю.

• Шифрование: Все данные хранятся только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы сторонних разработчиков не обладают прямого доступа к биометрическим данным; они могут лишь запрашивать подтверждение подтверждения идентичности через системный API.

Стоит упомянуть существенную особенность: в случае, если кто-то получит доступ к вашему телефону физически (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители внедряют меры безопасности от автоматического разблокирования — например, требуют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно бывают виды идентификации лиц?

Сегодня можно выделить три основных способа к выполнению этой операции:

Софтверное плоское определение

Эксплуатируется только фронтальная камера без дополнительных сенсоров глубины. Подобный подход наблюдается обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность реализации; низкая цена; быстрая работа при достаточном освещении.
Минусы: несложно обмануть фотографией; нестабильная работа ночью; низкая охрана.

Оборудование для объёмное оцифровка

Применяет инфракрасную видеокамеру + проекционный модуль пикселей + сенсоры глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Плюсы: высокая надежность; невозможно обмануть фото/видео; постоянная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Смешанные подходы с интеграцией ИИ

Используют комбинацию программных методов + аппаратную обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как Vulkan Platinum и Google Pixel Face Unlock новейших поколений, объединяют фронтальную камеру c ИК сенсором движения Soli Radar для предотвращения от подделок жестами/масками/видеодисплеями чужих устройств.

Образцы применения разнообразных техник

• iPhone линейки X/11/12/13/14 используют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition первый раз представил аналог Face ID в ряду Android.
• Samsung Galaxy S10/S20 поддерживают как программное 2D распознавание по снимку фронталкой, так и сканер радужки глаза.
• Huawei Mate20 Pro задействует комплекс из ИК-подсветки + Dot Projector + ToF-датчик

Трудности охраны и ошибочные сигналы

Несмотря на замечательный прогресс техники за прошедшие годы, идеальных механизмов пока не существует:

1. Возможность мошенничества: Недорогие мобильники просто доступны качественной снимком хозяина либо видео с экрана другого устройства.
2. Идентичные близняшки: Даже самые совершенные системы могут спутать между однояйцевыми близнецами либо семьями с очень похожей внешностью.
3. Изменения внешности: Внезапное утрата веса/набор веса, пластические операции или повреждения порой требуют перерегистрации биометрии.
4. Условия записи: Сильная засветка солнцем либо интенсивная тень могут снизить аккуратность распознавания признаков.

Здесь некоторые рекомендаций для надёжному применению:

• Для критически важных операций всегда используйте дополнительную аутентификацию;
• Не включайте функцию “Разблокировка по лицу” на дешёвых устройствах без ИК-сенсоров;
• Постоянно обновляйте программное обеспечение смартфона для предотвращения угроз от актуальных атак;
• Включайте настройку “Требовать распахнутых глаз” в тех местах, где она доступна.

В каких местах ещё применяется технологии за исключением мобильных телефонов?

Несмотря на то, что тема нашей работы сосредоточена на конкретно портативным гаджетам, необходимо сказать о прочих направлениях внедрения технологии:

• Мониторинг входа в деловых центрах и резиденциях;
• Платёжные устройства финансовых учреждений (“Face Pay”);
• Цифровые паспорта нового поколения;
• Комплексы видеоконтроля муниципальных подразделений;
• Автоматизация отслеживания посещаемости школ/институтов;
• Авторизация участников персональных компьютеров/ноутбуков.

Например: В городском метро уже тестируется система платежа проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или мобильника! Похожие инициативы реализуются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как изменяется техпроцесс сегодня?

Каждый год проявляются современные идеи для повышения уровня работы систем идентификации лиц:

1. Увеличивается детализация сенсорных устройств — чем больше деталей фиксируется фотоаппаратом/глубинными сенсорами, тем меньше риск погрешности;
2. Развиваются искусственные интеллекты — современные конструкции типа MobileNetV3 позволяют скоростно обучаться новым характеристикам вида пользователя напрямую на гаджете без отправки данных в облако.
3. Развиваются способы антиспуфинга — теперь телефоны умеют отличать реальные анимированные лица от неподвижных фото/маскировок по мельчайшим движениям кожи.
4. Интеграция со умными устройствами — смарт-часы могут автоматически закрыть доступ к мобильный телефон, если обладатель ушёл далеко.
5. Возникают смешанные устройства — в частности совмещающие речевую аутентификацию + физиономию + пальцевой отпечаток.

Здесь, какие направления очень востребованы в данный момент:

1) Уменьшение деталей

Изготовители намереваются сократить габариты прорези (“чёлки”) для датчики на экране за счёт встраивания маленьких ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Переработка прямо на устройстве

Для повышения личной безопасности всё более вычислений осуществляется на месте без отправки данных во сторонний облачный услугу.

3) Упорядочивание норм

Гугл энергично продвигает норму BiometricPrompt API, с целью чтобы аналогичные платформы, например как Вулкан Платинум, и все Android-приложения могли взаимодействовать с различными типами биометрии стандартизированно.

Какое решить на сегодня?

Когда тебе необходима предельная защита данных, выбирайте топовые модели с интегрированным ИК-излучателем или ToF-сенсором глубины.

• iPhone каждого актуальных поколений
• Huawei Companion/Series P ряда
• Mi Expert
• Vivo X серии
• Oppo Найти X серии.

Если бюджет скромен – лучше отдавать предпочтение традиционным средствам безопасности (PIN-код/сканер отпечатка), а функцию “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как опциональную опцию удобства.

Каким способом увеличить удобство использования опции?

Есть пара лайфхаков для тех, кто уже пользуется разблокировку по лицу:

1. Регулярно обновляйте свою фотографию-шаблон, если значительно меняется внешность.
2. Не упускайте из виду протирать линзу передней камеры – пятна могут снизить четкость!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам запускает камеру как только вы поднимаете его.
4. Во время регистрационного процесса постарайтесь держать лицевую часть неподвижно напротив видеоустройства не допуская значительного наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает мобильное устройство, если вы отвели взгляд от экрана.

Перспективы прогресса техники

В скоро наступающие времена можно предвкушать появления полностью бесконтактных способов опознания персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + походка + движения рук!

Также предполагается развитие новых способов охраны личной информации – скажем, переменное изменение диджитал образца после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из самых интересных техник нашего эпохи! Она делает взаимодействие со мобильным устройством комфортнее чем когда-либо прежде, и такие приложения, как Вулкан Казино Платинум, могут значительно оптимизировать ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы знаете, как устроена эта методика в деталях, – будете в состоянии вдумчиво определять свой следующий устройство!