Как работает распознавание лиц в смартфонах

Зачем мы выбираем разблокирование по лицу

В последние времена распознавание физиономий превратилось в одной из наиболее востребованных опций для деблокировки умных телефонов. Еще некоторые годов тому назад большинство использующих обходились пин-кодами, паролями или сканерами отпечатков пальцев. Но с появлением таких технологий, например вулкан россия, нам достаточно лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Что обуславливает эту функцию такой востребованной? Прежде всего, это практично: не нужно удерживать в памяти замысловатые пароли или находить нужный палец в тьме. Во-вторых, это оперативно: современные системы распознают лицо буквально за мгновения ока. В-третьем пункте, это чувство футуризма — как будто в кинолентах про казино вулкан разведчиков.

Впрочем за этой на первый взгляд несложностью таится весь вселенная сложных методов и инженерных разработок. Позвольте нам разобраться, как именно работает идентификация по лицу в современных гаджетах, какие существуют технологии, насколько они защищены и что нас ожидает в будущем.

Сжатая повествование прогресса технологии

Распознавание лиц как методика присутствует уже более пятидесяти годов. Изначальные пробы машинного исследования облика были осуществлены еще в 1960-х годы в лабораториях США. Тогда компьютеры умели лишь выделять силуэты лица и измерять промежутки между глазами и ртом на монохромных снимках.

Первые коммерческие установки стали доступны в девяностых годах, но они были неидеальны: функционировали медленно и нередко ошибались. Только с развитием искусственных сетей и таких площадок, как вулкан россии, сильных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять собственные решения.

Основные этапы действия устройства распознавания

Процесс распознавания лица можно примерно разделить на несколько важных этапов:

1. Обнаружение лиц — камера определяет наличие людского лица в изображении.
2. Извлечение особенностей — механизм исследует контуры облика: очертания зрительных органов, носа, уст, положение бровей.
3. Построение модели — создаётся уникальный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с стандартом — сформированный шаблон сверяется с записанной при учёте биометрической данными владельца.
5. Принятие решения — если сходство достаточно существенное, смартфон деблокируется.

Всякий из указанных шагов требует специальных алгоритмов и оптимизаций для оперативной работы непосредственно на девайсе.

Железные компоненты: что прячется внутри

Обычная селфи камера.

Простейший несложный метод идентификации лица использует лишь лицевую видеокамеру мобильного устройства. Данный способ реализован во многочисленных бюджетных версиях Android-устройств.

Сильные стороны:

• Не нуждается в требует внешних сенсоров.
• Быстро работает при достаточном освещённости.

Недостатки:

• Легко одурачить изображением или роликом.
• Неправильно действует при слабом освещении или нестандартных точках зрения.

Инфракрасная фотокамера и пунктирный проектор

Более усовершенствованные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая методика является основой Face ID от Apple.

Как это работает:

• Точечный устройство проекции отображает на лицо юзера невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 точек).
• Инфракрасная камера регистрирует изменение формы данной сетки по поверхности физиономии.
• Формируется трехмерная глубинная карта глубины, которая почти невозможна для подделки стандартной фотографией или маской.

Выигрыши

• Надёжная функционирование даже в полной неосвещённости.
• Большая сопротивляемость к подделкам.
• Точность определения свыше 99%.

Дополнительные сенсорные устройства

В некоторых девайсах задействуются также экстра датчики: ToF (Time-of-Flight), которые фиксируют время распространения луча до цели и обратно; RGB-датчики дальности; специальные световые измерители расстояния для построения более аккуратной 3D-модели физиономии.

Эти технологии встречаются наиболее часто во передовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный разум в исполнении

Современные устройства опознания лиц невозможны без применения artificial intelligence и машинного обучения. Именно благодаря таким инновациям, как вулкан россии, аппарат способно распознавать владельца даже при метаморфозах облика: новая причёска, борода, линзы или косметика не становятся барьером для деблокировки.

Распознавание лиц

При первом этапе алгоритм необходимо мгновенно распознать ликовое изображение среди полного снимка с камеры. Для данной цели применяются каскадные классификаторы Хаара или более продвинутые конволюционные нейронные сети (CNN), которые “обучены” распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN способен распознавать облик даже при частичном перекрытии (например, шарфом или рукой).

Идентификация основных точек

После распознавания лица устройство, такая как вулкан россии, определяет расположение ключевых точек: кончики глаз, конец носа, границы губ и так далее. Обычно задействуется от 68 до 128 главных меток на лице.

Данное требуется для выравнивания картинки: если юзер удерживает мобильник под углом, или повернул головку, программа исправляет изображение до обычного угла для дальнейшего анализа.

Создание биометрии модели

Далее искусственная сеть строит сжатое цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Такой шаблон крайне сложно сфальсифицировать: он не удерживает непосредственно картинку юзера, а лишь исключительные характеристики его облика, что делает его оптимальным для таких платформ, как vulkan russia.

Сравнительный анализ и принятие заключения

В случае, когда юзер желает разлочить мобильник глазами, программа воспроизводит все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает определённый границу (обычно больше 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Привыкание к изменениям облика

Занимательная характеристика нынешних системы — способность самообучения. Если вы регулярно открываете смартфон с обновленной стрижкой или очками, программа постепенно обновляет базовый образец вашего лица для увеличения точности действия без снижения уровня безопасности.

Безопасность биометрических информации.

Множество пользователи опасаются хранить свои биометрические идентификационные данные на смартфоне из-за риска утечки данных или взлома гаджета. Определенные фирмы, вроде vulkan russia, предоставляют варианты для улучшения сохранности сведений юзеров.

• Локальное сохранение: Основная часть устройств записывает био-идентификационные образцы исключительно в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают гаджет и не доступны даже производителю.

• Шифрование: Все данные хранятся только в кодированном виде с использованием новейших криптографических алгоритмов AES256.

• Изоляция программ: Программы третьих девелоперов не обладают прямого доступа к биометрическим; они могут лишь требовать подтверждение подтверждения личности через системный API.

Следует отметить значимую подробность: если кто-то достанет доступ к вашему телефону физически (к примеру, во время сна), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство производители внедряют защиту от “слепого” разблокирования — в частности, требуют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают типы распознавания лиц на изображениях?

В настоящее время можно определить выделить три основных подхода к реализации этой операции:

Программируемое двухмерное идентификация

Применяется только фронтальная видеокамера без экстра детекторов глубины. Этот способ наблюдается чаще всего в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: несложность реализации; умеренная цена; оперативная функционирование при хорошем освещении.
Минусы: легко обмануть снимком; ненадежная функционирование ночью; слабая охрана.

Оборудование для 3D оцифровка

Задействует инфракрасную видеокамеру + проектор пикселей + сенсоры глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: большая надежность; невозможно исказить фото/видео; постоянная деятельность в любых условиях освещения.
Минусы: увеличение цены устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с ИИ-дополнением

Применяют комбинацию программных методов + аппаратно-техническую обработку + постобработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, подобные товары, например вулкан россии и Google Pixel Face Unlock новейших версий, объединяют фронтальную камеру c ИК сенсором движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями посторонних устройств.

Примеры применения различных техник

• iPhone линейки X/11/12/13/14 задействуют только аппаратное трёхмерное сканирование
• Xiaomi Mi8 Explorer Edition первый раз предложил эквивалент Face ID среди Android.
• Samsung Galaxy S10/S20 поддерживают как софтверное двухмерное распознавание по изображению селфи-камерой, так и датчик глазного ириса.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Проблемы охраны и ложные тревоги

Несмотря на поразительный прогресс техники за недавние лет, безупречных механизмов пока не существует:

1. Шанс обмана: Доступные мобильники легко открываются четкой снимком владельца или же роликом с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые идеальные механизмы могут перепутать между монозиготными близнецами либо родичами с очень аналогичной внешностью.
3. Изменения облика: Резкое снижение веса/увеличение массы тела, пластические операции или повреждения в некоторых случаях требуют обновления данных биометрии.
4. Условия записи: Яркая подсветка солнцем либо интенсивная затенение могут уменьшить точность идентификации признаков.

Ниже некоторые подсказок по безопасному эксплуатации:

• Для важных операций всегда используйте двухфакторную аутентификацию;
• Не активируйте возможность “Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
• Регулярно обновляйте прошивку прошивку мобильного устройства для обеспечения безопасности от новых видов атак;
• Включайте настройку “Требовать распахнутых глаз” везде, где она есть.

В каких местах дополнительно используется технология за исключением мобильных телефонов?

Пускай основная мысль этой публикации посвящена в частности портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:

• Контроль входа в офисах и жилых домах;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Виртуальные удостоверения личности нового образца;
• Установки видеоконтроля муниципальных сервисов;
• Автоматизация учёта явки учебных заведений/вузов;
• Аутентификация участников ПК/ноутбуков.

Например: В московском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — хватит пройти через барьер без карты или телефона! Аналогичные инициативы осуществляются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Каким образом меняется технология сегодня?

Любой годочек проявляются свежие идеи для усовершенствования стандарта функционирования систем идентификации лиц:

1. Увеличивается детализация датчиков — чем больше деталей фиксируется камерой/датчиками глубины, тем меньше риск ошибки;
2. Развиваются искусственные интеллекты — передовые конструкции вида MobileNetV3 обеспечивают возможность быстро обучаться дополнительным особенностям вида пользователя напрямую на гаджете без отправки данных в облако.
3. Улучшаются способы антиспуфинга — теперь смартфоны умеют отличать реальные живые облики от статичных фото/маскировок по незаметным движениям кожи.
4. Взаимодействие со умными устройствами — умные часы могут самостоятельно блокировать мобильный телефон, если владелец ушёл далеко.
5. Появляются комбинированные системы — в частности совмещающие голосовую опознание + лицо + дактилоскопический след.

Здесь, какие направления особенно актуальны сейчас:

1) Сокращение компонентов

Изготовители намереваются сократить размер прорези (“чёлки”) для датчики на дисплее за счёт внедрения компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Обработывание прямо на устройстве

Для увеличения приватности всё больше расчётов происходит на месте без пересылки информации во дополнительный облачный услугу.

3) Унификация регламентов

Google интенсивно пропагандирует стандарт BiometricPrompt API, чтобы такие платформы, вроде вулкан россия, и все Android-программы были совместимы с различными типами биометрии единообразно.

Что решить сегодня?

Если вам важна наивысшая безопасность информации, подбирайте флагманские аппараты с вмонтированным ИК-излучателем либо ToF-датчиком глубины.

• iPhone всех существующих новейших поколений
• Huawei Companion/P ряда
• Mi Pro
• Vivo X модели
• Оппо Найти X серии.

Если бюджет скромен – лучше выбирать традиционным методам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в вулкан россия, применять только как опциональную возможность комфорта.

Каким образом увеличить практичность использования возможности?

Есть пара лайфхаков для пользователей, кто уже пользуется разблокировку по лицу:

1. Периодически обновляйте свою фотографию-шаблон, если сильно изменяется внешний вид.
2. Не упускайте из виду чистить объектив фронтальной камеры – разводы могут уменьшить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате мобильник сам запускает фотоаппарат когда вы поднимаете его.
4. Во время регистрационного процесса старайтесь сохранять лицо прямо впереди камеры исключая резкого наклона головы.
5. Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от дисплея.

Перспективы прогресса технологии

В ближайшие времена можно предвкушать возникновения полностью бесконтактных способов опознания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + речь + шаги + движения рук!

Также возможно возникновение современных подходов защиты приватности – например, переменное модификация цифрового шаблона после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из очень захватывающих технологий нашего эпохи! Она предоставляет интеракцию со телефоном комфортнее чем до этого, и такие приложения, как vulkan russia, могут существенно повысить ваш юзерский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы осведомлены, как устроена эта методика изнутри, – сможете вдумчиво подбирать свой будущий девайс!