Как функционирует распознавание лицевых образов в смартфонах

Почему мы выбираем разблокирование по фейсу

В недавние времена распознавание физиономий стало одной из самых распространённых возможностей для открытия умных телефонов. Всего некоторые лет тому назад основная часть пользователей обходились PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением таких технологий, например Вулкан Платинум, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какой аспект делает данную особенность такой востребованной? Прежде всего, это комфортно: не нужно удерживать в памяти сложные пароли или искать правильный палец в темноте. Кроме того, это оперативно: современные системы узнают лицо буквально за мгновения ока. В-третьих, это чувство будущего — будто в кинофильмах про Вулкан казино шпионов.

Впрочем за такой видимой простотой скрывается полный универсум трудных методов и инженерных концепций. Позвольте нам понять, как именно работает фейсканирование в современных мобильных телефонах, какие бывают способы, насколько они защищены и что нас ждёт впереди.

Короткая история эволюции инноваций

Идентификация лиц как технология присутствует уже более пятидесяти лет. Первые попытки автоматизированного изучения лиц были предприняты еще в 1960-х годы в лабораториях США. Тогда компьютеры способны были лишь обозначать силуэты головы и определять расстояния между очами и устами на монохромных фотографиях.

Первые бизнес установки появились в девяностых годах, но они были несовершенны: работали медленно и часто давали сбои. Только с эволюцией синтетических сетей и таких платформ, как Vulkan Platinum, высокопроизводительных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным распознаванием лица. За этим пошли Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные разработки.

Основные этапы функционирования системы определения

Процесс распознавания лица можно примерно разделить на несколько важных этапов:

1. Распознавание лица — устройство определяет присутствие гуманного лица в изображении.
2. Выделение признаков — механизм изучает контуры физиономии: форму зрительных органов, обонятельного органа, уст, положение надбровных дуг.
3. Построение модели — создаётся уникальный виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
4. Сравнение со эталоном — созданный модель сверяется с записанной при учёте биометрической сведениями владельца.
5. Принятие решения — если сходство достаточно существенное, смартфон открывается.

Всякий из указанных шагов запрашивает индивидуальных процедур и оптимизаций для скорой работы прямо на устройстве.

Железные составляющие: что находится в их недрах

Обычная селфи камера.

Самый простой легкий метод определения облика использует только лицевую камеру смартфона мобильного устройства. Такой способ реализован во различных доступных моделях Android-девайсов.

Преимущества:

• Необходимо нуждается в дополнительных сенсоров.
• Шустро работает при достаточном освещении.

Недостатки:

• Легко одурачить изображением или видеозаписью.
• Плохо работает при плохом освещении или непривычных ракурсах.

Инфракрасная камера и пунктирный проекционный аппарат

Более усовершенствованные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая техпроцесс составляет базу Face ID от Apple.

Каким образом это функционирует:

• Точечный устройство проекции проецирует на лицо использующего невидимую структуру из тысяч инфракрасных меток (например, Face ID использует около 30 000 точек).
• ИК устройство записывает деформацию данной сетки по поверхности физиономии.
• Формируется 3D карта глубины глубины, что почти что неосуществима для фальсификации обычной снимком или маскировкой.

Плюсы

• Надёжная функционирование даже в полной тьме.
• Высокая устойчивость к фальсификациям.
• Точность распознавания свыше 99%.

Дополнительные сенсоры

В некоторых устройствах применяются также дополнительные сенсоры: ToF (Time-of-Flight), которые измеряют период прохождения света до предмета и обратно; Цветные-датчики дальности; специальные световые лидары для формирования более точной 3D-модели физиономии.

Эти технологии используются наиболее часто во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: синтетический интеллект в действии

Нынешние механизмы распознавания лиц невозможны при отсутствии использования искусственного интеллекта и machine learning. Именно вследствие таким инновациям, как Vulkan Platinum, аппарат в состоянии идентифицировать владельца даже при трансформациях внешнего вида: новая причёска, щетина, очки или макияж не становятся барьером для открытия.

Распознавание лица

В начальном этапе программа необходимо оперативно найти ликовое изображение внутри целого снимка камеры. Для данной цели задействуются последовательные классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые натренированы распознавать человеческие лица среди множества других объектов.

Пример: метод MTCNN может распознавать физиономию даже в случае частичном перекрытии (например, шалью или рукой).

Идентификация важных моментов

После идентификации лица система, такая как Vulkan Platinum, вычисляет положение основных точек: кончики глаз, верхушка носа, границы губ и так далее. Часто применяется от 68 до 128 главных меток на лицевой поверхности.

Это действие требуется для нормализации картинки: если человек держит мобильник под наклоном, или наклонил головку, программа исправляет изображение до обычного угла для дальнейшего анализа.

Формирование биометрии модели

Далее нейронная сеть строит сжатое числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Данный образец очень сложно имитировать: он не удерживает непосредственно изображение юзера, а лишь исключительные характеристики его облика, что делает его идеальным для таких платформ, как Вулкан Казино Платинум.

Сравнительный анализ и осуществление решения

В случае, когда юзер желает открыть мобильник глазами, программа воспроизводит все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает установленный порог (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ не предоставляется.

Адаптация к трансформациям внешности

Интересная черта современных систем — возможность самостоятельного обучения. Если вы часто открываете смартфон с новой стрижкой или очками, система постепенно освежает базовый шаблон вашего облика для увеличения точности действия без ухудшения безопасности.

Охрана биометрии данных.

Большинство пользователи боятся хранить свои био-идентификационные данные на мобильном устройстве из-за риска утечки данных или хакерской атаки. Определенные компании, например Вулкан Казино Платинум, предоставляют решения для повышения защиты сведений пользователей.

• Локальное сбережение: Большинство аппаратов сохраняет био-идентификационные модели исключительно внутри защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не покидают гаджет и закрыты даже создателю.

• Шифрование: Все сведения сберегаются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Приложения внешних разработчиков не обладают непосредственного доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Следует подчеркнуть важную деталь: в случае, если кто-то получит физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие производители осуществляют систему защиты от автоматического разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются категории идентификации лиц?

В настоящее время можно выделить определить три ключевых способа к выполнению этой функции:

Софтверное двухмерное определение

Применяется только лицевая видеокамера без экстра датчиков дистанции. Подобный способ наблюдается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: простота воплощения; низкая затраты; быстрая деятельность при достаточном свете.
Минусы: просто ввести в заблуждение фотографией; нестабильная работа ночью; недостаточная защищенность.

Аппаратное трёхмерное сканирование

Использует ИК камеру + проектор пикселей + датчики дистанции (Face ID от Apple; подобные решения у Huawei Mate).
Преимущества: большая достоверность; невозможно обмануть изображение/видеозапись; устойчивая деятельность при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные способы с ИИ-дополнением

Задействуют комбинацию софтверных методов + техническую обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например Vulkan Platinum и Google Pixel Face Unlock последних поколений, комбинируют фронталку c инфракрасным сенсором мобильности Soli Radar для предотвращения от подделок руками/масками/видеодисплеями чужих устройств.

Иллюстрации использования различных техник

• iPhone линейки X/11/12/13/14 задействуют только физическое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые представил подобие Face ID в числе Android.
• Samsung Galaxy S10/S20 имеют как программное обеспечение плоское распознавание по снимку селфи-камерой, так и сканер ириса глаза.
• Huawei Mate20 Pro задействует набор из ИК-подсветки + Dot Projector + ToF-сенсор

Вопросы охраны и ошибочные сигналы

Несмотря на поразительный развитие инноваций за последние годы, совершенных систем пока не существует:

1. Вероятность обмана: Недорогие мобильники просто открываются высококачественной изображением владельца или же видеозаписью с экрана другого устройства.
2. Идентичные двойняшки: Даже самые идеальные устройства могут ошибиться между однояйцевыми близнецами либо семьями с очень похожей внешностью.
3. Метаморфозы внешнего вида: Резкое похудение/набор веса, пластические операции или повреждения порой необходимы для перерегистрации биометрических данных.
4. Условия записи: Сильная освещённость солнечным светом или же интенсивная затенение могут понизить аккуратность идентификации признаков.

Здесь несколько рекомендаций по безопасному эксплуатации:

• Для значимых операций всегда применяйте двухфакторную аутентификацию;
• Не включайте возможность “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Постоянно обновляйте ПО смартфона для защиты от современных угроз;
• Включайте опцию “Требовать открытых глаз” везде, где она есть.

В каких областях дополнительно используется технологии кроме мобильных телефонов?

Хотя основная мысль данной статьи посвящена в частности смартфонам и планшетам, необходимо сказать о альтернативных областях использования технологии:

• Мониторинг входа в деловых центрах и резиденциях;
• Платёжные терминалы банков (“Face Pay”);
• Виртуальные паспорта последнего поколения;
• Системы видеонаблюдения городских служб;
• Автоматизация учёта посещаемости образовательных учреждений/вузов;
• Вход юзеров ПК/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без карты или телефона! Похожие программы развиваются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом изменяется технология в наше время?

Каждый год проявляются свежие идеи для улучшения уровня работы систем распознавания лиц:

1. Увеличивается детализация датчиков — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность неточности;
2. Развиваются нейронные сети — передовые конструкции модели MobileNetV3 позволяют скоростно адаптироваться к дополнительным особенностям вида пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Улучшаются методы антиспуфинга — теперь мобильные устройства могут отличать реальные движущиеся облики от фиксированных фотографий/маскировок по незаметным микродвижениям.
4. Интеграция со интеллектуальными приборами — интеллектуальные часы могут авто заблокировать телефон, если пользователь удалился на значительное расстояние.
5. Появляются гибридные механизмы — в частности объединяющие аудио аутентификацию + физиономию + отпечаток пальца.

Вот, которые тенденции очень востребованы на сегодняшний день:

1) Уменьшение компонентов

Производители пытаются уменьшить размер отверстия (“чёлки”) для сенсоры на дисплее за счёт встраивания миниатюрных ИК-излучателей прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработка прямо на девайсе

Для увеличения приватности всё более расчётов выполняется локально без пересылки информации во сторонний облачный услугу.

3) Стандартизация регламентов

Гугл энергично продвигает стандарт BiometricPrompt API, чтобы подобные платформы, вроде Вулкан Платинум, и каждые Android-приложения могли взаимодействовать с различными типами биометрии унифицированно.

Какое выбрать на сегодня?

Когда вам всем важна наивысшая безопасность информации, подбирайте топовые устройства со встроенным ИК-проектором или же ToF-датчиком глубины.

• iPhone всех последних моделей
• Huawei Companion/Series P серии
• Xiaomi Pro
• Vivo X линейки
• Оппо Найти Икс серий.

Если средства ограничен – лучше предпочесть классическим методам безопасности (PIN-код/сканер пальца), а опцию “разблокировка по лицу”, такую как в Вулкан Платинум, использовать только как второстепенную возможность комфорта.

Как повысить удобство функционирования возможности?

Есть некоторые хитростей для людей, кто уже использует разблокировку через лицо:

1. Часто меняйте свою фотографию-шаблон, если кардинально изменяется внешний вид.
2. Не забывайте чистить линзу передней камеры – загрязнения могут уменьшить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам активирует камеру если вы поднимаете его.
4. При записи пытайтесь держать лицевую часть ровно перед камеры исключая значительного наклона головы.
5. Задействуйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвели взгляд от экрана.

Возможности прогресса технологии

В скоро наступающие периоды можно предвкушать возникновения полностью дистанционных способов распознавания человека сразу по нескольким биометрическим параметрам одновременно: физиономия + речь + манера ходьбы + движения рук!

Также предполагается развитие свежих подходов защиты личной информации – например, изменяющееся модификация электронного шаблона после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из очень захватывающих техник нашего периода! Она делает общение со телефоном удобнее чем раньше, и такие приложения, как Вулкан Казино Платинум, могут в разы улучшить ваш юзерский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы понимаете, как устроена эта методика изнутри, – сумеете более осмысленно определять свой следующий устройство!