Каким способом функционирует определение лиц в смартфонах

Зачем мы останавливаемся на разблокирование по лицевому распознаванию

В недавние времена идентификация физиономий превратилось в одной из наиболее востребованных возможностей для деблокировки мобильных телефонов. Лишь несколько годов назад основная масса пользователей обходились PIN-кодами, секретными кодами или датчиками отпечатков пальцев. Но с появлением подобных технологий, как вулкан россия, нам вполне просто взглянуть на экран — и устройство тут же опознает своего владельца.

Что делает данную функцию очень нужной? Во-первых, это комфортно: не нужно удерживать в памяти замысловатые пароли или находить правильный палец в темноте. Во-вторых, это оперативно: современные системы идентифицируют лицо фактически за мгновение. В-третьем пункте, это чувство футуристичности — словно в фильмах про vulkan casino разведчиков.

Однако за данной кажущейся несложностью таится целый мир сложных методов и инженерных концепций. Попробуем исследовать, как именно работает распознавание лиц в новейших мобильных телефонах, какие применяются методы, насколько они безопасны и что нас предстоит.

Короткая история эволюции техники

Идентификация лиц как техника существует уже более пятидесяти годов. Начальные попытки автоматического изучения лиц были предприняты еще в 1960-х годы в исследовательских центрах США. Тогда ЭВМ могли лишь определять контуры черепа и измерять расстояния между глазами и устами на ахроматических изображениях.

Первые коммерческие системы появились в 1990-х годах, но они были несовершенны: действовали неспешно и часто ошибались. Только с эволюцией искусственных сетей и таких систем, как вулкан россии, мощных мобильных чипов распознавание лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с достоверным трёхмерным идентификацией лица. За ним пошли Android-изготовители: Samsung, Huawei, Xiaomi и прочие начали интегрировать собственные решения.

Главные этапы работы механизма идентификации

Процесс определения лица можно условно поделить на несколько основных этапов:

Распознавание лиц — аппарат выявляет наличие гуманного лица в кадре.
Извлечение характеристик — алгоритм исследует особенности облика: форму глаз, обонятельного органа, уст, расположение бровей.
Построение модели — создаётся неповторимый виртуальный отпечаток (faceprint) на основе определённых признаков.
Сравнение с образцом — созданный шаблон сопоставляется со зафиксированной при внесении биометрической сведениями владельца.
Принятие выбора — если сходство достаточно высокое, смартфон разблокируется.

Всякий из этих стадий нуждается в особых алгоритмов и усовершенствований для быстрой работы прямо на устройстве.

Железные составляющие: что находится внутри

Типичная передняя камера.

Самый простой способ распознавания физиономии применяет исключительно фронтальную камеру смартфона. Такой метод внедрён во многочисленных недорогих вариантах Android-девайсов.

Преимущества:

Не потребляет дополнительные сенсоров.
Быстро работает при качественном освещённости.

Минусы:

Просто ввести в заблуждение изображением или видео.
Плохо работает при низком освещённости или непривычных точках зрения.

ИК камера и пунктирный проектор

Более совершенные системы, такие как вулкан россии, применяют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология лежит в основе Face ID от Apple.

Каким способом это действует:

Точечный проекционный прибор показывает на физиономию пользователя невидимую решетку из тысяч инфракрасных точек (например, Face ID задействует около 30 000 меток).
ИК камера регистрирует деформацию данной сетки по поверхности лица.
Создаётся трёхмерная карта глубины глубинности, которая почти неподвластна для имитации типичной фото или маской.

Выигрыши

Надёжная работа даже в полной неосвещённости.
Большая сопротивляемость к подделкам.
Точность идентификации свыше 99%.

Добавочные сенсоры

В отдельных девайсах применяются также вспомогательные сенсорные устройства: ToF (Time-of-Flight), которые определяют время прохождения луча до цели и обратно; RGB-датчики дальности; специальные лазерные измерители расстояния для построения более точной 3D-модели физиономии.

Эти инновации применяются чаще всего во топовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные методы: искусственный интеллект в работе

Современные системы идентификации лиц невозможны в отсутствие эксплуатации искусственного интеллекта и машинного обучения. Именно вследствие таким инновациям, как вулкан россии, аппарат может идентифицировать владельца даже при метаморфозах облика: новая стрижка, растительность на лице, линзы или макияж не становятся барьером для открытия.

Распознавание лиц

На стартовом стадии программа должна мгновенно распознать образ лица внутри целого кадра камеры. Для этого применяются последовательные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые натренированы распознавать человеческие лица среди множества других объектов.

Пример: процесс MTCNN может распознавать физиономию даже при частичном перекрытии (например, платком или ладонью).

Выделение ключевых аспектов

После обнаружения лица механизм, такая как вулкан россии, определяет расположение ключевых точек: края глаз, конец носа, контуры губ и так далее. Как правило задействуется от 68 до 128 главных маркеров на лицевой области.

Это действие необходимо для выравнивания картинки: если человек держит смартфон под наклоном, или наклонил голову, программа „выпрямляет” картинку до обычного угла для дальнейшего анализа.

Формирование биометрического модели

Далее нейронная сеть строит уплотненное числовое представление („эмбеддинг”) облика пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 чисел с плавающей запятой.

Этот образец крайне затруднительно подделать: он не сохраняет само картинку юзера, а лишь уникальные черты его внешности, что делает его идеальным для таких платформ, как vulkan russia.

Сопоставление и вынесение выбора

Если пользователь намеревается открыть телефон глазами, программа воспроизводит все описанные описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если похожесть превышает определённый уровень (обычно превышает 99%), телефон, как и платформа vulkan russia, открывается; если нет — доступ запрещается.

Приспособление к трансформациям внешности

Интересная характеристика нынешних систем — возможность самостоятельного обучения. Если вы часто доступаете к смартфон с обновленной укладкой или очками, система постепенно обновляет базовый модель вашего лица для улучшения точности функционирования без ухудшения безопасности.

Защита биометрических данных.

Многие клиенты беспокоятся хранить свои биометрические идентификационные данные на мобильном устройстве из-за риска утечки данных или взлома устройства. Некоторые организации, такие как vulkan russia, предлагают варианты для увеличения сохранности информации клиентов.

Локальное хранение: Преимущественно устройств сохраняет био-идентификационные модели только внутрь защищенного микросхемы Secure Enclave (Apple) или TrustZone (Android). Эти данные никогда не покидают аппарат и недоступны в том числе изготовителю.
Шифрование: Все данные сохраняются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.
Изоляция приложений: Приложения третьих девелоперов не обладают прямого доступа к биометрическим; они могут лишь запрашивать подтверждение подтверждения личности через системный API.

Стоит упомянуть важную подробность: если кто-то достанет физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество компании внедряют защиту от автоматического разблокирования — например, требуют открыть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют типы идентификации лиц на изображениях?

Сегодня можно определить 3 ключевых подхода к выполнению этой функции:

Софтверное 2D распознавание

Применяется только передняя камера без экстра сенсоров дистанции. Подобный способ используется чаще всего в бюджетных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Достоинства: простота осуществления; минимальная затраты; оперативная деятельность при достаточном освещении.
Минусы: несложно обмануть фотографией; ненадежная работа ночью; низкая безопасность.

Техническое 3D оцифровка

Задействует ИК видеокамеру + проектор точек + датчики дистанции (Face ID от Apple; аналогичные технологии у Huawei Mate).
Преимущества: большая достоверность; нельзя подделать изображение/видеозапись; стабильная деятельность в любых условиях освещения.
Минусы: повышение стоимости устройства; возрастание толщины верхней рамки экрана („чёлка”)

Комбинированные подходы с интеграцией ИИ

Применяют комбинацию софтверных методов + аппаратную обработку + последующую обработку нейросетями для повышения устойчивости к атакам („anti-spoofing”). Например, такие товары, например вулкан россии и Google Pixel Face Unlock новейших версий, сочетают фронтальную камеру c ИК датчиком движения Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами посторонних устройств.

Иллюстрации применения различных техник

iPhone модели X/11/12/13/14 задействуют только физическое трёхмерное сканирование
Xiaomi Mi8 Explorer Edition первый раз предложил аналог Face ID среди Android.
Samsung Galaxy S10 модель/S20 поддерживают как софтверное плоское определение по снимку фронталкой, так и датчик ириса глаза.
Huawei Mate20 Pro применяет комплекс из ИК-подсветки + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и неверные сигналы

Несмотря на замечательный успехи технологий за недавние лет, идеальных систем пока не имеется:

Вероятность подвоха: Бюджетные мобильники просто открываются высококачественной снимком хозяина или же роликом с экрана другого устройства.
Идентичные близнецы: Даже самые идеальные устройства могут ошибиться между однояйцевыми близнецами либо родичами с очень похожей внешностью.
Трансформации внешности: Внезапное похудение/увеличение массы тела, косметические процедуры либо повреждения иногда требуют повторной регистрации биометрии.
Условия фотографирования: Интенсивная подсветка солнцем либо плотная затенение могут понизить верность идентификации признаков.

Здесь несколько советов по защищённому использованию:

Для критически важных операций всегда используйте двухфакторную аутентификацию;
Не запускайте возможность „Разблокировка по лицу” на дешёвых моделях без ИК-сенсоров;
Регулярно обновляйте прошивку прошивку смартфона для защиты от новых видов атак;
Включайте опцию „Требовать открытых глаз” везде, где она имеется.

В каких областях ещё применяется технология за исключением мобильных телефонов?

Несмотря на то, что основная мысль этой статьи сосредоточена на конкретно смартфонам и планшетам, стоит упомянуть о альтернативных областях использования технологии:

Мониторинг прохода в деловых центрах и резиденциях;
Платёжные терминалы банков („Face Pay”);
Виртуальные идентификационные документы последнего поколения;
Системы видеомониторинга городских сервисов;
Автоматизирование регистрации явки образовательных учреждений/институтов;
Вход пользователей ПК/ноутбуков.

Например: В столичном метро уже тестируется система платежа проезда по фейсу („Face Pay”) — достаточно пройти через турникет без пластика или телефона! Аналогичные инициативы осуществляются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как трансформируется технический процесс в нынешнее время?

Всякий годик проявляются свежие концепции для повышения стандарта функционирования систем идентификации лиц:

Увеличивается чёткость датчиков — чем больше информации фиксируется видеокамерой/датчиками глубины, тем меньше шанс погрешности;
Улучшаются искусственные интеллекты — новейшие архитектуры типа MobileNetV3 дают возможность скоростно осваивать новым характеристикам вида пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
Развиваются способы антиспуфинга — теперь телефоны умеют отличать реальные движущиеся лица от неподвижных фото/масок по незаметным микродвижениям.
Интеграция со умными устройствами — смарт-часы могут автоматически блокировать мобильный телефон, если обладатель ушёл далеко.
Проявляются комбинированные системы — к примеру объединяющие аудио идентификацию + лицо + отпечаток пальца.

Итак, какие тренды в особенности востребованы сейчас:

1) Миниатюризация элементов

Компании стараются минимизировать величину прорези („чёлки”) для сенсоры на дисплее за счёт интеграции компактных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на аппарате

Для улучшения конфиденциальности всё больше обработки данных осуществляется на месте без пересылки информации во дополнительный облачный сервис.

3) Унификация стандартов

Гугл интенсивно продвигает норму BiometricPrompt API, для того чтобы такие платформы, вроде вулкан россия, и все Android-программы могли работать с любыми видами биометрии стандартизированно.

Какое подобрать на сегодня?

Когда вам нужна предельная защита данных, подбирайте передовые модели с интегрированным ИК-излучателем или ToF-сенсором глубины.

iPhone всех последних версий
Huawei Mate/P линейки
Xiaomi Expert
Vivo X серии
Oppo Обнаружить Х серий.

Если средства скромен – лучше предпочесть обычным средствам защиты (PIN-код/сканер отпечатка), а возможность „разблокировка по лицу”, такую как в вулкан россия, использовать только как дополнительную опцию комфорта.

Каким образом увеличить удобство использования возможности?

Есть пара лайфхаков для людей, кто уже пользуется разблокировку через лицо:

Периодически обновляйте свою фото-шаблон, если сильно трансформируется облик.
Не забывайте чистить объектив фронтальной камеры – загрязнения могут уменьшить точность!
Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам запускает камеру как только вы поднимаете его.
Во время регистрационного процесса пытайтесь держать лицо ровно напротив камеры без сильного наклона головы.
Используйте функцию “Attention Aware” (“Реакция на внимание”) – она блокирует телефон, если вы отвернулись от экрана.

Перспективы прогресса технологии

В ближайшие периоды можно ожидать развития полностью бесконтактных способов опознания персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: физиономия + звучание + шаги + манипуляции руками!

Также вероятно появление современных методов защиты приватности – скажем, изменяющееся модификация электронного шаблона после каждой результативной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из наиболее увлекательных техник нашего периода! Она обеспечивает интеракцию со мобильным устройством проще чем когда-либо прежде, и такие программы, как vulkan russia, могут существенно улучшить ваш юзерский опыт, но требует осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы понимаете, как функционирует эта технология внутри, – сумеете более осмысленно выбирать свой будущий девайс!