Каким образом функционирует распознавание лиц в телефонах
Зачем мы выбираем разблокировку по фейсу
В прошлые годы определение физиономий является одной из наиболее востребованных опций для открытия смартфонов. Еще пару годов тому назад большинство юзеров обходились PIN-кодами, паролями или сканерами отпечатков пальцев. Но при появлением подобных технологий, как вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.
Какая вещь обуславливает эту функцию такой востребованной? Для начала, это комфортно: не нужно удерживать в памяти трудные пароли или отыскивать верный палец в мраке. Во-вторых, это быстро: современные алгоритмы идентифицируют лицо буквально за мгновения ока. В-третью очередь, это ощущение футуристичности — будто в кинолентах про вулкан казино разведчиков.
Однако за этой кажущейся простотой скрывается полный мир трудных методов и инженерных решений. Попробуем разобраться, как конкретно действует распознавание лиц в актуальных гаджетах, какие существуют способы, насколько они защищены и что нас ждёт впереди.
Сжатая повествование развития инноваций
Распознавание лиц как техника присутствует уже более пятидесяти годов. Первые эксперименты машинного анализа облика были сделаны еще в 1960-х годах в исследовательских центрах США. Тогда компьютеры способны были лишь обозначать силуэты головы и определять расстояния между зрачками и устами на черно-белых изображениях.
Изначальные коммерческие платформы возникли в 1990-х годах, но они были неидеальны: работали медленно и нередко ошибались. Только с эволюцией искусственных сетей и таких систем, как вулкан россии, мощных мобильных чипов определение лиц стало по-настоящему общедоступным явлением.
В 2017 году Apple представила iPhone X с системой Face ID — это был первый популярный смартфон с надёжным трёхмерным распознаванием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие начали внедрять личные решения.
Основные этапы работы механизма распознавания
Процесс распознавания лица можно ориентировочно разделить на несколько основных этапов:
- Обнаружение лиц — аппарат выявляет присутствие людского образа в снимке.
- Определение характеристик — механизм изучает особенности физиономии: конфигурацию зрительных органов, носа, уст, позицию надбровных дуг.
- Построение структуры — создаётся уникальный цифровой отпечаток (faceprint) на основе выделенных признаков.
- Сравнение с образцом — сформированный шаблон сравнивается со записанной при учёте биометрической сведениями владельца.
- Принятие выбора — если сходство достаточно существенное, смартфон разблокируется.
Всякий из этих стадий требует индивидуальных процедур и оптимизаций для скорой работы непосредственно на девайсе.
Железные элементы: что скрыто внутри
Обычная селфи камера.
Самый простой легкий вариант распознавания физиономии задействует только переднюю камеру смартфона смартфона. Подобный способ осуществлён во многочисленных бюджетных версиях Android-устройств.
Достоинства:
- Не нуждается в требует внешних датчиков.
- Оперативно функционирует при достаточном освещении.
Слабые стороны:
- Просто одурачить снимком или роликом.
- Плохо функционирует при низком освещённости или необычных точках зрения.
ИК фотокамера и точечный проекционный аппарат
Более продвинутые системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика лежит в основе Face ID от Apple.
Каким способом это функционирует:
- Точечный устройство проекции показывает на облик юзера невидимую структуру из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
- Инфракрасная камера записывает искривление данной решетки по плоскости лица.
- Создаётся трёхмерная глубинная карта глубины, что почти неподвластна для подделки стандартной снимком или маскировкой.
Достоинства
- Надёжная функционирование даже в полной темноте.
- Высокая устойчивость к фальсификациям.
- Точность определения свыше 99%.
Добавочные сенсоры
В отдельных аппаратах используются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые измеряют время прохождения света до предмета и обратно; RGB-датчики дальности; специальные световые лидары для построения более детализированной 3D-модели физиономии.
Эти инновации используются в основном во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).
Софтверные методы: искусственный интеллект в действии
Нынешние устройства опознания лиц неосуществимы при отсутствии использования ИИ и машинного обучения. Именно вследствие таким разработкам, как вулкан россии, гаджет может распознавать владельца даже при метаморфозах облика: новая причёска, щетина, линзы или макияж не становятся барьером для разблокировки.
Детектирование лица
В начальном этапе программа должна оперативно распознать образ лица среди полного кадра с камеры. Для данной цели задействуются каскадные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы идентифицировать лиц человека среди множества других объектов.
Пример: процесс MTCNN способен находить физиономию даже при частичном перекрытии (например, шалью или рукой).
Выделение основных моментов
После обнаружения лица устройство, такая как вулкан россии, устанавливает расположение основных точек: края глаз, кончик носа, контуры губ и так далее. Часто применяется от 68 до 128 ключевых меток на лицевой области.
Это требуется для стабилизации изображения: если пользователь удерживает телефон под наклоненным, или наклонил голову, программа “выпрямляет” изображение до обычного угла для последующего изучения.
Создание биометрии образца
Далее нейросеть строит компактное числовое представление (“эмбеддинг”) лица пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 вещественных чисел.
Такой шаблон весьма трудно имитировать: он не хранит непосредственно фото пользователя, а лишь исключительные характеристики его внешности, что делает его оптимальным для таких платформ, как vulkan russia.
Сравнительный анализ и принятие выбора
Если человек намеревается разблокировать смартфон глазами, механизм осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.
Если схожесть превышает заданный порог (обычно выше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ блокируется.
Привыкание к изменениям облика
Интересная характеристика нынешних систем — возможность самостоятельного обучения. Если ты часто разблокируете смартфон с обновленной стрижкой или очками, программа постепенно обновляет эталонный шаблон вашего лица для улучшения точности функционирования без ухудшения безопасности.
Охрана биометрических информации.
Многие клиенты боятся хранить свои биометрические идентификационные данные на телефоне из-за риска потери данных или взлома устройства. Некоторые организации, вроде vulkan russia, предлагают варианты для повышения безопасности данных юзеров.
-
Локальное хранение: Преимущественно аппаратов сохраняет био-идентификационные модели исключительно в пределах защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они всегда не оставляют гаджет и не доступны даже создателю.
-
Шифрование: Все сведения хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.
-
Изоляция приложений: Приложения внешних девелоперов не обладают непосредственного доступа к биометрическим; они могут лишь запрашивать факт подтверждения идентичности через системный API.
Следует отметить значимую подробность: если какой-то человек достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство изготовители внедряют защиту от автоматического разблокирования — к примеру, просят открыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.
Какие бывают категории определения лиц?
На сегодняшний день можно различить три главных способа к выполнению этой операции:
Программное двухмерное определение
Применяется только передняя видеокамера без экстра детекторов дистанции. Такой подход наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).
Преимущества: несложность реализации; низкая цена; скоростная работа при качественном свете.
Минусы: несложно обмануть фотографией; нестабильная деятельность ночью; слабая охрана.
Техническое 3D сканирование
Применяет ИК камеру + проекционный модуль пикселей + датчики глубины (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: большая надежность; не получится обмануть фото/видео; стабильная функционирование в любых условиях освещения.
Минусы: повышение стоимости устройства; увеличение толщины верхней рамки экрана (“чёлка”)
Смешанные способы с интеграцией ИИ
Используют комбинацию программных методов + аппаратную обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие продукты, как вулкан россии и Google Pixel Face Unlock последних версий, комбинируют фронталку c ИК сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.
Иллюстрации использования разных способов
- iPhone линейки X/11/12/13/14 применяют только аппаратное трёхмерное сканирование в 3D
- Xiaomi Mi8 Explorer Edition в первый раз предложил подобие Face ID в ряду Android.
- Samsung Galaxy S10 модель/S20 имеют как программное обеспечение двухмерное определение по фото фронтальной камерой, так и сканер ириса глаза.
- Huawei Mate20 Pro применяет комплекс из ИК-освещения + Dot Projector + ToF-сенсор
Трудности безопасности и ошибочные срабатывания
Несмотря на замечательный прогресс инноваций за прошедшие лет, идеальных систем пока не имеется:
- Вероятность обмана: Доступные телефоны легко доступны качественной изображением хозяина или же видео с экрана другого устройства.
- Идентичные близнецы: Даже самые идеальные устройства могут перепутать между однояйцевыми близнецами либо семьями с очень похожей внешностью.
- Изменения облика: Внезапное снижение веса/набор веса, пластические операции либо повреждения порой требуют обновления данных биометрии.
- Условия фотографирования: Яркая засветка солнечным светом либо глубокая затенение могут уменьшить точность распознавания признаков.
Вот некоторые подсказок по безопасному применению:
- Для важных операций всегда внедряйте дополнительную аутентификацию;
- Не включайте опцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
- Постоянно обновляйте ПО мобильного устройства для защиты от актуальных атак;
- Включайте настройку “Требовать открытых глаз” в тех местах, где она доступна.
Где ещё используется технология за исключением смартфонов?
Несмотря на то, что тема нашей публикации сосредоточена на именно смартфонам и планшетам, необходимо сказать о других сферах применения технологии:
- Мониторинг доступа в рабочих помещениях и резиденциях;
- Платёжные устройства финансовых учреждений (“Face Pay”);
- Электронные паспорта последнего поколения;
- Комплексы видеомониторинга городских служб;
- Автоматизирование отслеживания присутствия школ/вузов;
- Аутентификация юзеров компьютеров/ноутбуков.
Например: В городском метро уже тестируется система платежа проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без карты или мобильника! Схожие инициативы развиваются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.
Каким способом трансформируется технология в нынешнее время?
Каждый годочек появляются современные концепции для усовершенствования качества работы систем идентификации лиц:
- Увеличивается разрешение сенсоров — чем больше деталей фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность погрешности;
- Развиваются нейросети — передовые конструкции модели MobileNetV3 дают возможность быстро обучаться дополнительным особенностям вида пользователя напрямую на гаджете без отправки данных в облако.
- Развиваются способы антиспуфинга — теперь смартфоны способны распознавать настоящие движущиеся лица от фиксированных фотографий/масок по микроскопическим микродвижениям.
- Синхронизация со смарт-гаджетами — смарт-часы могут самостоятельно заблокировать мобильный телефон, если владелец удалился на значительное расстояние.
- Возникают смешанные устройства — например объединяющие аудио идентификацию + физиономию + дактилоскопический след.
Итак, какие тренды особенно востребованы в данный момент:
1) Миниатюризация деталей
Изготовители намереваются минимизировать габариты отверстия (“чёлки”) для сенсоры на экране за счёт внедрения маленьких ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.
2) Переработка прямо на аппарате
Для улучшения приватности всё более вычислений осуществляется внутри устройства без отправки информации во сторонний облачный сервис.
3) Стандартизация регламентов
Гугл активно пропагандирует эталон BiometricPrompt API, чтобы аналогичные платформы, например как вулкан россия, и все Android-программы могли работать с различными типами биометрии стандартизированно.
Какое решить на сегодня?
Если вам нужна наивысшая безопасность данных, подбирайте топовые устройства с интегрированным ИК-излучателем или же ToF-сенсором глубины.
- iPhone всех существующих последних моделей
- Huawei Companion/Series P серии
- Mi Professional
- Vivo X модели
- Oppo Find Х серий.
Если средства ограничен – лучше выбирать традиционным способам защиты (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в вулкан россия, использовать только как дополнительную опцию комфорта.
Каким образом улучшить комфорт работы опции?
Есть некоторые хитростей для тех, кто уже использует функцию распознавания лица:
- Часто обновляйте свою фотографию-шаблон, если значительно меняется внешний вид.
- Не забывайте протирать линзу фронтальной камеры – пятна могут понизить четкость!
- Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам запускает фотоаппарат если вы поднимаете его.
- В процессе регистрации постарайтесь удерживать голову ровно впереди камеры без резкого наклона головы.
- Используйте возможность “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от дисплея.
Возможности развития техники
В скоро наступающие годы можно ожидать возникновения полностью дистанционных способов опознания человека сразу по нескольким биометрическим параметрам одновременно: лицо + голос + походка + манипуляции руками!
Также предполагается развитие новых подходов обеспечения личной информации – к примеру, динамическое модификация цифрового паттерна после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.
Распознавание лиц – одна из очень увлекательных инноваций нашего периода! Она обеспечивает взаимодействие со мобильным устройством проще чем когда-либо прежде, и такие приложения, как vulkan russia, могут значительно улучшить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.
Теперь, если вы понимаете, как функционирует эта система внутри, – сумеете более осмысленно определять свой очередной девайс!