Как работает определение лиц в телефонах

Для чего мы останавливаемся на разблокирование по лицу

В прошлые времена идентификация физиономий является одной из самых распространённых функций для разблокировки умных телефонов. Всего несколько лет назад большинство пользователей удовлетворялись пин-кодами, секретными кодами или датчиками отпечатков пальцев. Но при появлением подобных технологий, как Вулкан Платинум, нам достаточно просто взглянуть на экран — и устройство тут же узнает своего владельца.

Что обуславливает данную возможность такой востребованной? Для начала, это комфортно: не нужно удерживать в памяти трудные пароли или отыскивать нужный палец в тьме. Во-вторых, это мгновенно: современные системы распознают лицо буквально за доли секунды. В-третьем пункте, это впечатление футуристичности — будто в фильмах про казино Вулкан агентов.

Однако за данной кажущейся простотой прячется целый универсум комплексных техник и инженерных решений. Давайте исследовать, как именно работает идентификация по лицу в современных гаджетах, какие бывают методы, насколько они надёжны и что нас ждёт впереди.

Короткая история эволюции технологии

Распознавание лиц как методика имеется уже более 50 лет. Начальные эксперименты автоматизированного анализа лиц были предприняты еще в 1960-х годы в исследовательских центрах США. Тогда компьютеры умели лишь выделять контуры головы и определять расстояния между очами и губами на черно-белых изображениях.

Первые торговые платформы появились в 90-х, но они были несовершенны: действовали неспешно и часто давали сбои. Только с эволюцией нейронных сетей и таких платформ, как Vulkan Platinum, мощных мобильных микросхем идентификация лиц стало по-настоящему массовым явлением.

В две тысячи семнадцатом году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с безопасным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять собственные разработки.

Ключевые шаги работы устройства распознавания

Процесс идентификации лица можно примерно разделить на несколько важных этапов:

1. Идентификация лица — устройство выявляет существование людского лица в кадре.
2. Извлечение особенностей — система изучает контуры физиономии: очертания зрительных органов, носа, уст, положение бровей.
3. Построение шаблона — создаётся неповторимый электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с образцом — полученный образец сравнивается с зафиксированной при учёте биометрической сведениями владельца.
5. Принятие выбора — если сходство достаточно значительное, смартфон открывается.

Всякий из данных шагов запрашивает специальных процедур и оптимизаций для оперативной работы непосредственно на девайсе.

Железные составляющие: что находится внутри

Обычная передняя камера.

Самый несложный способ идентификации физиономии задействует лишь переднюю камеру смартфона мобильного устройства. Подобный метод осуществлён во многих бюджетных моделях Android-девайсов.

Преимущества:

• Не потребляет дополнительные датчиков.
• Быстро функционирует при хорошем освещении.

Слабые стороны:

• Просто одурачить снимком или видеозаписью.
• Плохо работает при плохом освещении или нестандартных углах обзора.

ИК камера и пунктирный проектор

Более совершенные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология лежит в основе Face ID от Apple.

Каким образом это функционирует:

• Точечный устройство проекции проецирует на физиономию пользователя невидимую структуру из тысяч инфракрасных пятен (например, Face ID использует около 30 000 точек).
• Инфракрасная камера фиксирует изменение формы данной сетки по плоскости физиономии.
• Формируется 3D глубинная карта глубины, которая почти неподвластна для подделки стандартной фотографией или маской.

Достоинства

• Надёжная функционирование даже в полной тьме.
• Большая сопротивляемость к подделкам.
• Точность определения свыше 99%.

Дополнительные сенсоры

В некоторых устройствах задействуются также экстра сенсоры: ToF (Time-of-Flight), которые измеряют период движения света до предмета и обратно; RGB-датчики дальности; специальные световые дальномеры для построения более детализированной 3D-модели физиономии.

Эти разработки применяются наиболее часто во флагманских аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные процедуры: синтетический интеллект на работе

Современные механизмы опознания лиц неосуществимы в отсутствие эксплуатации artificial intelligence и машинного обучения. Именно благодаря таким инновациям, как Vulkan Platinum, гаджет в состоянии идентифицировать пользователя даже при трансформациях внешности: новая стрижка, борода, оптика или косметика не становятся барьером для разблокировки.

Детектирование физиономии

При стартовом шаге алгоритм обязана быстро распознать лицо среди всего изображения камеры. Для этого применяются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” находить человеческие лица среди множества других объектов.

Пример: метод MTCNN может обнаруживать физиономию даже в случае частичном перекрытии (например, платком или рукой).

Идентификация важных аспектов

После обнаружения лица устройство, такая как Vulkan Platinum, устанавливает положение главных точек: уголки глаз, кончик носа, края губ и так далее. Часто задействуется от 68 до 128 основных меток на лице.

Данное необходимо для стабилизации картинки: если пользователь удерживает смартфон под углом, или склонил головку, программа “выпрямляет” картинку до нормального состояния для дальнейшего анализа.

Формирование биометрии шаблона

Далее нейронная сеть строит компактное числовое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 чисел с плавающей запятой.

Такой формат крайне затруднительно подделать: он не удерживает само картинку пользователя, а лишь уникальные характеристики его облика, что делает его совершенным для таких платформ, как Вулкан Казино Платинум.

Сопоставление и осуществление решения

Когда пользователь хочет разлочить телефон глазами, программа воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый уровень (обычно больше 99%), телефон, как и платформа Вулкан Казино Платинум, разблокируется; если нет — доступ запрещается.

Привыкание к метаморфозам внешности

Занимательная характеристика современных систем — способность самостоятельного обучения. Если ты регулярно доступаете к мобильное устройство с свежей стрижкой или оптикой, система постепенно модернизирует эталонный модель вашего лица для повышения точности работы без ухудшения безопасности.

Охрана биометрических информации.

Множество пользователи опасаются хранить свои био-идентификационные данные на мобильном устройстве из-за угрозы утечки данных или взлома гаджета. Иные организации, например Вулкан Казино Платинум, предлагают методы для повышения сохранности сведений клиентов.

• Локальное сохранение: Преимущественно девайсов сохраняет биометричные модели лишь в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют устройство и закрыты в том числе изготовителю.

• Шифрование: Все информация сберегаются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Программы внешних девелоперов не имеют прямого возможности доступа к биометрическим; они могут лишь требовать факт подтверждения идентичности через системный API.

Следует отметить значимую деталь: в случае, если кто-то достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому многие производители реализуют систему защиты от автоматического разблокирования — например, просят раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют виды идентификации лиц на изображениях?

На сегодняшний день можно выделить выделить 3 основных подхода к выполнению этой задачи:

Программируемое двухмерное распознавание

Применяется только лицевая видеокамера без вспомогательных сенсоров дистанции. Этот метод встречается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; умеренная стоимость; оперативная функционирование при достаточном освещении.
Минусы: несложно ввести в заблуждение снимком; нестабильная функционирование ночью; низкая безопасность.

Оборудование для трёхмерное сканирование

Использует ИК камеру + проектор пикселей + датчики дистанции (Face ID у Apple; подобные технологии у Huawei Mate).
Достоинства: значительная надёжность; невозможно обмануть изображение/видеозапись; стабильная деятельность при любом освещении.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с интеграцией ИИ

Задействуют комбинацию софтверных методов + аппаратную обработку + постобработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные продукты, как Vulkan Platinum и Google Pixel Face Unlock последних поколений, объединяют фронтальную камеру c ИК датчиком движения Soli Radar для защиты от подделок жестами/масками/видеодисплеями посторонних устройств.

Иллюстрации применения разнообразных техник

• iPhone модели X/11/12/13/14 применяют только техническое трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition впервые представил эквивалент Face ID среди Android.
• Samsung Galaxy S10 модель/S20 поддерживают как программное двухмерное определение по фото фронталкой, так и датчик ириса глаза.
• Huawei Mate20 Pro задействует систему из ИК-подсветки + Dot Projector + ToF-датчик

Вопросы защиты и ложные сигналы

Несмотря на замечательный прогресс инноваций за прошедшие лет, совершенных механизмов пока не имеется:

1. Возможность подвоха: Доступные мобильники просто открываются высококачественной снимком хозяина или же видео с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые безупречные системы могут перепутать между однояйцевыми близнецами либо родственниками с очень схожей внешностью.
3. Метаморфозы облика: Резкое утрата веса/увеличение массы тела, косметические процедуры либо повреждения порой требуют перерегистрации биометрических данных.
4. Условия фотографирования: Сильная засветка солнцем или же интенсивная тень могут уменьшить точность распознавания признаков.

Здесь некоторые советов для безопасному эксплуатации:

• Для критически важных операций всегда используйте двухэтапную аутентификацию;
• Не включайте опцию “Разблокировка по лицу” на бюджетных аппаратах без ИК-сенсоров;
• Систематически обновляйте прошивку телефона для предотвращения угроз от современных угроз;
• Включайте опцию “Требовать открытых глаз” в тех местах, где она есть.

В каких областях также используется технология за исключением мобильных телефонов?

Несмотря на то, что предмет данной публикации посвящена именно мобильным устройствам, следует отметить прочих направлениях внедрения технологии:

• Управление доступа в рабочих помещениях и резиденциях;
• Платёжные устройства банков (“Face Pay”);
• Электронные идентификационные документы нового поколения;
• Системы видеонаблюдения городских служб;
• Автоматизирование учёта посещаемости школ/институтов;
• Аутентификация пользователей ПК/ноутбуков.

Например: В московском метро уже проверяется система платежа проезда по лицу (“Face Pay”) — достаточно пройти через турникет без пластика или телефона! Похожие программы развиваются в Китае (Шэньчжэнь), Южной Корее и некоторых европейских странах.

Каким способом трансформируется техпроцесс в наше время?

Всякий годик возникают современные концепции для усовершенствования уровня функционирования систем идентификации лиц:

1. Увеличивается детализация сенсоров — чем больше информации фиксируется фотоаппаратом/глубинными сенсорами, тем меньше шанс погрешности;
2. Совершенствуются нейросети — современные архитектуры модели MobileNetV3 позволяют скоростно осваивать новым особенностям вида обладателя непосредственно на девайсе без отправки данных в облако.
3. Улучшаются способы антиспуфинга — теперь смартфоны способны распознавать реальные движущиеся лица от фиксированных снимков/маскировок по незаметным движениям кожи.
4. Взаимодействие со интеллектуальными приборами — смарт-часы могут самостоятельно блокировать телефон, если пользователь ушёл далеко.
5. Проявляются смешанные устройства — в частности комбинирующие речевую идентификацию + физиономию + отпечаток пальца.

Вот, какие направления особенно востребованы на сегодняшний день:

1) Уменьшение элементов

Компании пытаются уменьшить габариты прорези (“чёлки”) под сенсоры на экране за счёт встраивания компактных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения приватности всё больше расчётов осуществляется на месте без пересылки информации во дополнительный облачный услугу.

3) Стандартизация регламентов

Гугл энергично продвигает стандарт BiometricPrompt API, для того чтобы аналогичные системы, вроде Вулкан Платинум, и все Android-аппы могли работать с различными типами биометрии единообразно.

Что решить сегодня?

Если тебе необходима наивысшая безопасность данных, выбирайте флагманские модели со встроенным ИК-излучателем или ToF-датчиком глубины.

• iPhone каждого новейших моделей
• Huawei Partner/P ряда
• Mix Pro
• Vivo X серии
• Oppo Find Икс серий.

Если финансы ограничен – лучше отдавать предпочтение обычным методам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как опциональную опцию удобства.

Каким образом увеличить удобство функционирования опции?

Есть некоторые лайфхаков для людей, кто уже пользуется разблокировку через лицо:

1. Часто меняйте свою изображение-шаблон, если сильно меняется облик.
2. Не упускайте из виду протирать объектив передней камеры – пятна могут снизить четкость!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам запускает фотоаппарат если вы берёте его в руки.
4. При регистрации пытайтесь держать лицо прямо перед камеры исключая сильного наклона головы.
5. Используйте функцию “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от экрана.

Перспективы эволюции инноваций

В скоро наступающие периоды можно предполагать возникновения полностью дистанционных способов распознавания индивидуума сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + походка + манипуляции руками!

Также вероятно появление свежих методов защиты конфиденциальности – к примеру, изменяющееся изменение электронного шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из очень интересных технологий нашего периода! Она предоставляет интеракцию со мобильным устройством комфортнее чем когда-либо прежде, и такие аппы, как Вулкан Казино Платинум, могут существенно улучшить ваш пользовательский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы понимаете, как функционирует эта система изнутри, – будете в состоянии более осмысленно выбирать свой очередной гаджет!