Как действует идентификация лицевых образов в мобильных устройствах

Зачем мы выбираем разблокировку по лицевому распознаванию

В недавние времена определение лиц является одной из самых популярных функций для разблокировки смартфонов. Еще пару годков назад большинство использующих довольствовались пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением таких технологий, как Вулкан Платинум, нам вполне лишь взглянуть на экран — и аппарат тут же опознает своего владельца.

Какая вещь обуславливает данную функцию очень нужной? Для начала, это комфортно: не нужно удерживать в памяти трудные пароли или отыскивать правильный палец в темноте. Во-вторых, это мгновенно: современные программы узнают лицо буквально за мгновения ока. В-третьем пункте, это ощущение футуризма — словно в кинолентах про вулкан платинум зеркало агентов.

Впрочем за данной на первый взгляд простотой таится целый вселенная комплексных методов и инженерных решений. Давайте понять, как конкретно работает идентификация по лицу в новейших смартфонах, какие существуют технологии, насколько они надёжны и что нас ждёт впереди.

Короткая история эволюции инноваций

Распознавание лиц как методика присутствует уже более пятидесяти лет. Первые попытки автоматического изучения облика были предприняты еще в 1960-х годах в лабораториях США. Тогда ЭВМ могли лишь выделять контуры черепа и вычислять дистанции между очами и ртом на черно-белых изображениях.

Первые бизнес платформы стали доступны в девяностых годах, но они были несовершенны: работали медленно и нередко ошибались. Только с развитием нейронных сетей и таких систем, как Vulkan Platinum, высокопроизводительных мобильных микросхем распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным распознаванием лица. За ним пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать свои разработки.

Ключевые этапы работы механизма определения

Процесс идентификации лица можно ориентировочно разделить на несколько ключевых этапов:

Обнаружение лиц — камера определяет присутствие человеческого образа в снимке.
Извлечение особенностей — система исследует черты облика: конфигурацию зрительных органов, обонятельного органа, губ, положение бровей.
Построение модели — создаётся неповторимый цифровой отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение со эталоном — полученный модель сравнивается с записанной при учёте биометрической данными владельца.
Принятие выбора — если совпадение достаточно существенное, смартфон разблокируется.

Любой из данных этапов запрашивает специальных методов и оптимизаций для оперативной работы прямо на устройстве.

Технические составляющие: что находится внутри

Типичная фронтальная камера.

Самый простой несложный вариант распознавания лица использует исключительно фронтальную камеру смартфона мобильного устройства. Подобный метод осуществлён во различных бюджетных моделях Android-девайсов.

Преимущества:

Необходимо нуждается в дополнительных сенсоров.
Быстро функционирует при достаточном освещении.

Минусы:

Легко ввести в заблуждение фотографией или видеозаписью.
Плохо действует при низком освещении или необычных углах обзора.

ИК камера и точечный проектор

Более усовершенствованные системы, такие как Vulkan Platinum, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология является основой Face ID от Apple.

Как это действует:

Точечный проектор показывает на облик юзера невидимую структуру из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 точек).
Инфракрасная устройство записывает деформацию этой решетки по плоскости лица.
Формируется трехмерная карта глубины глубинности, которая практически неосуществима для подделки стандартной фотографией или маскировкой.

Плюсы

Надёжная работа даже в полной неосвещённости.
Большая устойчивость к подделкам.
Точность идентификации более 99%.

Дополнительные сенсоры

В отдельных девайсах задействуются также экстра сенсорные устройства: ToF (Time-of-Flight), которые измеряют период движения луча до объекта и обратно; Трехцветные-датчики глубины; специальные световые дальномеры для построения более детализированной 3D-модели лица.

Эти технологии применяются в основном во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искусственный ум на исполнении

Текущие системы опознания лиц неосуществимы в отсутствие использования искусственного интеллекта и машинного обучения. Именно вследствие таким разработкам, как Vulkan Platinum, аппарат способно узнавать юзера даже при метаморфозах облика: новая стрижка, борода, очки или макияж не становятся помехой для открытия.

Распознавание лица

На начальном этапе система должна мгновенно обнаружить ликовое изображение внутри всего изображения камеры. Для этого применяются многоуровневые классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” находить лица людей среди множества других объектов.

Пример: алгоритм MTCNN может распознавать физиономию даже в случае неполном перекрытии (например, шалью или ладонью).

Идентификация важных моментов

После распознавания лица механизм, такая как Vulkan Platinum, определяет местоположение основных точек: уголки глаз, конец носа, границы губ и так далее. Как правило задействуется от 68 до 128 основных точек на лице.

Данное нужно для нормализации картинки: если юзер находится с мобильник под углом, или повернул головку, программа корректирует картинку до обычного угла для последующего изучения.

Создание биометрического модели

Далее нейронная сеть строит уплотненное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след внешности длиной от 128 до 512 флоатов.

Этот шаблон весьма сложно сфальсифицировать: он не сохраняет непосредственно изображение юзера, а лишь уникальные особенности его облика, что делает его совершенным для таких платформ, как Вулкан Казино Платинум.

Сопоставление и осуществление заключения

В случае, когда юзер намеревается разлочить смартфон взглядом, программа осуществляет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если схожесть превышает установленный уровень (обычно выше 99%), телефон, как и платформа Вулкан Казино Платинум, доступен; если нет — доступ запрещается.

Приспособление к метаморфозам внешности

Увлекательная особенность современных системы — способность самообучения. Если ты постоянно разблокируете смартфон с обновленной укладкой или оптикой, программа постепенно освежает основной образец вашего внешности для увеличения точности действия без ухудшения безопасности.

Безопасность биометрических данных.

Большинство юзеры опасаются держать свои биометрические идентификационные данные на смартфоне из-за угрозы потери данных или взлома устройства. Определенные компании, например Вулкан Казино Платинум, предлагают варианты для повышения сохранности данных юзеров.

Локальное сбережение: Основная часть аппаратов записывает биометрические шаблоны лишь внутри безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают аппарат и закрыты даже производителю.
Шифрование: Все сведения хранятся только в кодированном виде с использованием современных криптографических алгоритмов AES256.
Изоляция программ: Приложения сторонних разработчиков не обладают непосредственного доступа к биометрическим данным; они могут лишь запрашивать подтверждение верификации личности через системный API.

Стоит упомянуть существенную подробность: в случае, если кто-либо сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании внедряют систему защиты от “слепого” разблокирования — в частности, требуют раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории определения лиц?

Сегодня можно определить 3 основных способа к реализации этой функции:

Программируемое плоское идентификация

Используется только фронтальная камера без вспомогательных сенсоров глубины. Этот способ используется обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Плюсы: легкость осуществления; минимальная цена; скоростная деятельность при достаточном свете.
Минусы: просто ввести в заблуждение фотографией; ненадежная функционирование ночью; низкая защищенность.

Аппаратное объёмное оцифровка

Применяет инфракрасную камеру + проекционный модуль пикселей + датчики глубины (Face ID от Apple; подобные технологии у Huawei Mate).
Плюсы: высокая надёжность; невозможно подделать изображение/видеозапись; стабильная работа в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Смешанные способы с ИИ-дополнением

Используют комбинацию программируемых методов + аппаратную обработку + последующую обработку нейросетями для увеличения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, как Vulkan Platinum и Google Pixel Face Unlock последних версий, сочетают фронтальную камеру c ИК датчиком мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Примеры использования различных методов

iPhone линейки X/11/12/13/14 применяют только физическое трёхмерное сканирование в 3D
Xiaomi Mi8 Explorer Edition в первый раз предложил эквивалент Face ID в ряду Android.
Samsung Galaxy S10/S20 обеспечивают как программное двухмерное идентификацию по фото фронталкой, так и датчик глазного ириса.
Huawei Mate20 Pro применяет систему из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и неверные сигналы

Несмотря на замечательный прогресс технологий за последние лет, безупречных системы пока не наблюдается:

Вероятность подвоха: Бюджетные телефоны легко доступны качественной изображением пользователя либо видео с дисплея иного гаджета.
Идентичные двойняшки: Даже самые безупречные устройства могут спутать между однояйцевыми близнецами либо родичами с очень схожей внешностью.
Трансформации облика: Внезапное утрата веса/увеличение массы тела, косметические процедуры либо повреждения иногда необходимы для обновления данных биометрических данных.
Условия фотографирования: Интенсивная засветка солнечным светом или глубокая затенение могут снизить точность идентификации признаков.

Ниже некоторые советов по безопасному применению:

Для критически важных операций всегда внедряйте двухэтапную аутентификацию;
Не запускайте возможность “Разблокировка по лицу” на недорогих аппаратах без ИК-сенсоров;
Регулярно апгрейдите прошивку мобильного устройства для обеспечения безопасности от новых видов атак;
Включайте настройку “Требовать открытых глаз” везде, где она имеется.

Где ещё находится применение технологии за исключением мобильных телефонов?

Пускай предмет этой статьи касается в частности смартфонам и планшетам, следует отметить других сферах применения технологии:

Контроль доступа в деловых центрах и многоквартирных зданиях;
Платёжные устройства финансовых учреждений (“Face Pay”);
Виртуальные удостоверения личности нового поколения;
Установки видеоконтроля муниципальных подразделений;
Механизация учёта явки школ/вузов;
Аутентификация пользователей компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — хватит пройти через турникет без пластика или телефона! Аналогичные проекты развиваются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.

Каким образом трансформируется техпроцесс в нынешнее время?

Любой годик проявляются современные мысли для усовершенствования качества функционирования систем идентификации лиц:

Увеличивается детализация сенсорных устройств — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше шанс погрешности;
Улучшаются нейросети — современные конструкции модели MobileNetV3 обеспечивают возможность скоростно осваивать новым чертам внешности пользователя непосредственно на девайсе без отправки данных в облако.
Развиваются технологии антиспуфинга — теперь смартфоны способны различать настоящие анимированные лица от статичных снимков/маскировок по незаметным движениям кожи.
Интеграция со интеллектуальными приборами — умные часы могут автоматически блокировать телефон, если владелец ушёл далеко.
Возникают смешанные устройства — например объединяющие голосовую аутентификацию + лицо + пальцевой отпечаток.

Здесь, которые тренды очень востребованы сейчас:

1) Уменьшение деталей

Изготовители намереваются сократить размер отверстия (“чёлки”) под сенсоры на дисплее за счёт внедрения компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Обработка прямо на аппарате

Для улучшения приватности всё больше расчётов выполняется локально без передачи данных во сторонний облачный сервис.

3) Упорядочивание норм

Гугл интенсивно продвигает эталон BiometricPrompt API, для того чтобы подобные платформы, как Вулкан Платинум, и любые Android-приложения были совместимы с различными типами биометрии единообразно.

Какое выбрать сегодня?

В случае если тебе нужна максимальная сохранность данных, подбирайте передовые аппараты с интегрированным ИК-излучателем либо ToF-датчиком глубины.

iPhone всех актуальных поколений
Huawei Companion/P линейки
Mi Professional
Vivo X серии
Oppo Обнаружить Х серий.

Если бюджет ограничен – лучше отдавать предпочтение обычным способам защиты (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в Вулкан Платинум, применять только как дополнительную опцию удобства.

Каким способом улучшить комфорт функционирования возможности?

Есть несколько лайфхаков для тех, кто уже использует функцию распознавания лица:

Регулярно обновляйте свою фотографию-шаблон, если значительно трансформируется внешность.
Не пренебрегайте чистить линзу фронтальной камеры – разводы могут уменьшить точность!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам запускает камеру как только вы поднимаете его.
При регистрации пытайтесь удерживать лицо прямо напротив объектива исключая сильного наклона головы.
Применяйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует смартфон, если вы отворачиваетесь от дисплея.

Возможности прогресса техники

В скоро наступающие годы можно ожидать возникновения полностью дистанционных способов идентификации персоны сразу по нескольким биометрическим данным параметрам одновременно: физиономия + голос + манера ходьбы + жесты рук!

Также возможно развитие новых подходов охраны конфиденциальности – к примеру, динамическое корректировка диджитал шаблона после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее увлекательных техник нашего эпохи! Она предоставляет взаимодействие со мобильным устройством проще чем когда-либо прежде, и такие аппы, как Вулкан Казино Платинум, могут в разы улучшить ваш пользовательский опыт, но запрашивает внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, если вы знаете, как работает эта система внутри, – сможете осознаннее выбирать свой очередной устройство!