Как действует распознавание лиц в смартфонах
Для чего мы останавливаемся на разлочивание по лицу
В недавние годы определение лиц стало одной из наиболее востребованных возможностей для открытия умных телефонов. Еще несколько годов ранее большинство использующих удовлетворялись пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, как вулкан россия, нам достаточно просто взглянуть на экран — и устройство тут же узнает своего владельца.
Что делает эту конкретную функцию такой востребованной? Во-первых, это практично: не нужно удерживать в памяти замысловатые пароли или находить нужный палец в мраке. Кроме того, это оперативно: современные программы распознают лицо буквально за доли секунды. В-третью очередь, это чувство будущего — как будто в кинофильмах про вулкан россия агентов.
Тем не менее за этой кажущейся несложностью прячется полный универсум комплексных технологий и инженерных разработок. Давайте понять, как точно действует распознавание лиц в современных гаджетах, какие бывают методы, насколько они надёжны и что нас предстоит.
Краткая история прогресса инноваций
Распознавание лиц как технология существует уже более пятидесяти лет. Изначальные пробы автоматизированного исследования лиц были предприняты еще в 1960-х годы в исследовательских центрах США. Тогда вычислительные машины могли лишь определять контуры головы и вычислять расстояния между очами и ртом на черно-белых снимках.
Изначальные бизнес системы появились в 90-х, но они были далеки от совершенства: функционировали медленно и часто ошибались. Только с эволюцией синтетических сетей и таких площадок, как вулкан россии, сильных мобильных микросхем определение лиц стало по-настоящему широко распространённым явлением.
В две тысячи семнадцатом году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным сканированием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять свои решения.
Главные шаги действия системы определения
Процесс распознавания лица можно условно поделить на несколько основных этапов:
- Обнаружение лица — устройство распознает существование гуманного образа в кадре.
- Выделение признаков — алгоритм анализирует контуры лица: форму глаз, обонятельного органа, уст, положение надбровных дуг.
- Построение модели — создаётся неповторимый электронный отпечаток (faceprint) на основе определённых признаков.
- Сравнение со эталоном — полученный модель сверяется с зафиксированной при регистрации биометрической информацией владельца.
- Принятие выбора — если совпадение достаточно существенное, смартфон деблокируется.
Каждый из этих этапов требует специальных алгоритмов и усовершенствований для оперативной работы прямо на устройстве.
Технические составляющие: что прячется в их недрах
Стандартная селфи камера.
Самый несложный вариант идентификации облика использует лишь переднюю камеру смартфона мобильного устройства. Такой метод осуществлён во различных недорогих моделях Android-устройств.
Достоинства:
- Необходимо потребляет дополнительные сенсоров.
- Шустро действует при хорошем освещении.
Недостатки:
- Легко ввести в заблуждение снимком или видео.
- Плохо функционирует при слабом освещении или необычных ракурсах.
Инфракрасная фотокамера и точечный проекционный аппарат
Более усовершенствованные системы, такие как вулкан россии, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта методика лежит в основе Face ID от Apple.
Каким способом это функционирует:
- Точечный устройство проекции проецирует на лицо пользователя невидимую структуру из тысяч инфракрасных пятен (например, Face ID применяет около 30 000 точек).
- Инфракрасная устройство фиксирует искривление этой решетки по поверхности лица.
- Формируется трёхмерная карта глубины глубины, которая почти неподвластна для подделки типичной фотографией или маской.
Достоинства
- Надёжная деятельность даже в полной тьме.
- Сильная сопротивляемость к фальсификациям.
- Точность распознавания более 99%.
Добавочные сенсоры
В отдельных устройствах применяются также дополнительные сенсорные устройства: ToF (Time-of-Flight), которые фиксируют период движения света до цели и обратно; Цветные-датчики глубины; специальные оптические измерители расстояния для построения более аккуратной 3D-модели лица.
Эти инновации применяются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).
Софтверные алгоритмы: искуственный разум на исполнении
Современные системы распознавания лиц невозможны в отсутствие применения ИИ и machine learning. Именно вследствие таким инновациям, как вулкан россии, аппарат способно узнавать юзера даже при метаморфозах внешнего вида: новая укладка, борода, очки или грим не становятся помехой для открытия.
Детектирование физиономии
В начальном шаге программа обязана мгновенно распознать лицо в пределах всего изображения с камеры. Для данной цели задействуются последовательные классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые подготовлены находить человеческие лица среди множества других объектов.
Пример: процесс MTCNN в состоянии распознавать физиономию даже при частичном закрытии (например, платком или рукой).
Определение ключевых моментов
После обнаружения лица система, такая как вулкан россии, определяет расположение основных точек: уголки глаз, верхушка носа, края губ и так далее. Часто задействуется от 68 до 128 основных меток на лице.
Это необходимо для стабилизации визуала: если человек удерживает мобильник под углом, или повернул головку, программа корректирует картинку до обычного угла для дальнейшего анализа.
Создание биометрического образца
Далее нейронная сеть строит сжатое числовое представление (« эмбеддинг ») внешности пользователя — своеобразный цифровой след внешности длиной от 128 до 512 чисел с плавающей запятой.
Данный образец очень трудно подделать: он не хранит непосредственно фото пользователя, а лишь уникальные особенности его облика, что делает его идеальным для таких платформ, как vulkan russia.
Сравнение и принятие выбора
Если человек хочет разблокировать телефон глазами, система воспроизводит все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.
Если аналогичность превышает определённый границу (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.
Привыкание к изменениям облика
Интересная черта нынешних систем — возможность самообучения. Если ты постоянно доступаете к мобильное устройство с свежей прической или оптикой, система постепенно обновляет базовый шаблон вашего облика для улучшения точности функционирования без ухудшения безопасности.
Безопасность биометрических данных.
Большинство пользователи опасаются хранить свои биометрические идентификационные данные на мобильном устройстве из-за вероятности утечки данных или взлома гаджета. Некоторые компании, например vulkan russia, предлагают методы для увеличения защиты информации юзеров.
-
Локальное сбережение: Основная часть девайсов хранит биометричные шаблоны исключительно в пределах защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные ни разу не не оставляют устройство и не доступны даже изготовителю.
-
Шифрование: Все информация сохраняются только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.
-
Изоляция приложений: Приложения сторонних разработчиков не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения идентичности через системный API.
Стоит подчеркнуть важную подробность: в случае, если какой-то человек достанет доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании осуществляют защиту от неосознанного разблокирования — к примеру, требуют разомкнуть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.
Какие существуют типы распознавания лиц?
На сегодняшний день можно выделить различить три главных подхода к осуществлению этой функции:
Программное двухмерное идентификация
Используется только фронтальная камера без экстра сенсоров дистанции. Подобный подход используется наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).
Достоинства: несложность воплощения; низкая цена; скоростная работа при достаточном освещении.
Минусы: несложно ввести в заблуждение снимком; нестабильная функционирование ночью; низкая охрана.
Техническое 3D сканирование
Использует ИК камеру + проектор точек + сенсоры глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Плюсы: значительная надёжность; нельзя исказить фото/видео; устойчивая деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (« чёлка »)
Смешанные способы с интеграцией ИИ
Используют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (« anti-spoofing »). Например, подобные товары, например вулкан россии и Google Pixel Face Unlock современных версий, объединяют фронталку c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами чужих устройств.
Образцы использования разных техник
- iPhone серии X/11/12/13/14 задействуют только аппаратное трёхмерное 3D-сканирование
- Xiaomi Mi8 Explorer Edition впервые представил подобие Face ID в ряду Android.
- Samsung Galaxy S10 модель/S20 поддерживают как софтверное двухмерное идентификацию по снимку фронтальной камерой, так и сканер ириса глаза.
- Huawei Mate20 Pro использует систему из ИК-освещения + Dot Projector + ToF-датчик
Вопросы охраны и ложные срабатывания
Несмотря на поразительный прогресс инноваций за последние лет, совершенных систем пока не наблюдается:
- Шанс обмана: Доступные смартфоны просто « разблокируются » четкой снимком владельца или видеозаписью с дисплея иного гаджета.
- Идентичные близнецы: Даже самые идеальные устройства могут перепутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
- Изменения облика: Внезапное утрата веса/увеличение массы тела, пластические операции либо повреждения иногда требуют обновления данных биометрических данных.
- Условия фотографирования: Интенсивная засветка солнечным светом или глубокая затенение могут снизить точность определения признаков.
Ниже некоторые рекомендаций для защищённому эксплуатации:
- Для критически важных операций всегда используйте дополнительную аутентификацию;
- Не запускайте функцию « Разблокировка по лицу » на недорогих моделях без ИК-сенсоров;
- Систематически обновляйте программное обеспечение телефона для обеспечения безопасности от новых видов атак;
- Включайте функцию « Требовать открытых глаз » там, где она имеется.
Где дополнительно применяется технология помимо мобильных телефонов?
Пускай основная мысль нашей публикации касается именно смартфонам и планшетам, необходимо сказать о прочих направлениях внедрения технологии:
- Мониторинг доступа в рабочих помещениях и резиденциях;
- Платёжные терминалы банков (« Face Pay »);
- Виртуальные паспорта нового образца;
- Системы видеомониторинга муниципальных подразделений;
- Автоматизирование отслеживания присутствия учебных заведений/университетов;
- Вход юзеров компьютеров/ноутбуков.
Например: В городском метро уже проверяется система оплаты проезда по лицу (« Face Pay ») — хватит пройти через турникет без пластика или телефона! Аналогичные программы осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.
Каким способом изменяется техпроцесс в нынешнее время?
Каждый годочек проявляются свежие мысли для улучшения уровня деятельности систем лицевого распознавания:
- Увеличивается разрешение сенсорных устройств — чем больше деталей фиксируется фотоаппаратом/датчиками глубины, тем меньше вероятность неточности;
- Развиваются нейросети — современные архитектуры типа MobileNetV3 обеспечивают возможность быстро адаптироваться к дополнительным особенностям внешности обладателя прямо на устройстве без пересылки информации в облачное хранилище.
- Развиваются способы антиспуфинга — теперь мобильные устройства умеют различать реальные движущиеся облики от неподвижных снимков/маскировок по микроскопическим микродвижениям.
- Интеграция со интеллектуальными приборами — умные часы могут автоматически блокировать смартфон, если пользователь ушёл далеко.
- Проявляются гибридные устройства — в частности комбинирующие аудио аутентификацию + физиономию + дактилоскопический след.
Итак, те направления в особенности востребованы сейчас:
1) Уменьшение компонентов
Производители намереваются уменьшить размер прорези (« чёлки ») под датчики на экране за счёт встраивания компактных ИК-проекторов прямо под поверхность дисплея либо высувных модулей камеры.
2) Переработка прямо на аппарате
Для улучшения конфиденциальности всё более расчётов выполняется на месте без передачи данных во сторонний облачный услугу.
3) Унификация регламентов
Гугл энергично продвигает эталон BiometricPrompt API, чтобы такие площадки, например как вулкан россия, и каждые Android-приложения были совместимы с любыми видами биометрии унифицированно.
Какое выбрать на сегодня?
Когда тебе нужна наивысшая сохранность информации, выбирайте флагманские аппараты с вмонтированным ИК-проектором либо ToF-датчиком глубины.
- iPhone всех существующих последних моделей
- Huawei Companion/P Series ряда
- Mi Professional
- Vivo X серии
- Оппо Найти Икс серии.
Если средства ограничен – лучше предпочесть обычным способам безопасности (PIN-код/сканер отпечатка), а опцию « разблокировка по лицу », такую как в вулкан россия, использовать только как второстепенную опцию удобства.
Каким способом улучшить комфорт использования возможности?
Есть пара лайфхаков для пользователей, кто уже пользуется разблокировку по лицу:
- Часто меняйте свою изображение-шаблон, если сильно изменяется облик.
- Не пренебрегайте протирать объектив передней камеры – загрязнения могут снизить четкость!
- Включайте настройку “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам запускает фотоаппарат если вы поднимаете его.
- При регистрации старайтесь держать лицевую часть прямо впереди объектива исключая резкого наклона головы.
- Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвели взгляд от дисплея.
Перспективы прогресса технологии
В скоро наступающие годы можно предвкушать возникновения полностью дистанционных способов идентификации человека сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + речь + походка + жесты рук!
Также предполагается развитие свежих способов защиты личной информации – скажем, динамическое изменение цифрового паттерна после каждой результативной авторизации, чтобы усложнить его копирование злоумышленниками.
Распознавание лиц – одна из самых увлекательных инноваций нашего периода! Она делает взаимодействие со мобильным устройством проще чем когда-либо прежде, и такие приложения, как vulkan russia, могут значительно улучшить ваш юзерский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.
Теперь, если вы осведомлены, как устроена эта система изнутри, – сумеете вдумчиво определять свой будущий гаджет!