Каким образом действует распознавание лиц в мобильных устройствах
Каким образом действует распознавание лиц в мобильных устройствах
Для чего мы предпочитаем разблокирование по фейсу
В прошлые годы идентификация лиц превратилось в одной из самых распространённых возможностей для деблокировки умных телефонов. Лишь несколько годов назад большинство юзеров обходились PIN-кодами, ключами доступа или сканерами отпечатков пальцев. Но с появлением таких технологий, как admiral x, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.
Что обуславливает эту конкретную возможность такой востребованной? Для начала, это удобно: не нужно запоминать трудные пароли или отыскивать правильный палец в тьме. Кроме того, это оперативно: современные программы узнают лицо фактически за мгновения ока. В-третьих, это ощущение будущего — как будто в кинолентах про адмирал х агентов.
Тем не менее за этой видимой простотой таится весь мир трудных техник и инженерных концепций. Попробуем исследовать, как именно функционирует идентификация по лицу в новейших смартфонах, какие существуют способы, насколько они надёжны и что нас ждёт впереди.
Короткая хроника эволюции технологии
Распознавание лиц как методика присутствует уже более пятидесяти лет. Первые пробы автоматического исследования облика были сделаны еще в 1960-х годах в научных учреждениях США. Тогда компьютеры могли лишь обозначать очертания черепа и вычислять дистанции между глазами и губами на монохромных снимках.
Начальные торговые системы возникли в 90-х, но они были несовершенны: работали медленно и нередко ошибались. Только с эволюцией нейронных сетей и таких площадок, как адмирал х, мощных мобильных чипов идентификация лиц стало по-настоящему общедоступным явлением.
В две тысячи семнадцатом году Apple презентовала iPhone X с системой Face ID — это был первый популярный смартфон с достоверным трёхмерным распознаванием лица. За ним последовали Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные решения.
Основные стадии действия устройства распознавания
Процесс распознавания лица можно ориентировочно сегментировать на несколько важных этапов:
- Идентификация лиц — устройство выявляет присутствие гуманного образа в снимке.
- Определение особенностей — алгоритм изучает черты лица: конфигурацию зрительных органов, обонятельного органа, губ, позицию бровей.
- Построение модели — создаётся неповторимый электронный отпечаток (faceprint) на основе выделенных признаков.
- Сравнение с эталоном — сформированный образец сверяется с зафиксированной при внесении биометрической данными владельца.
- Принятие выбора — если совпадение достаточно значительное, смартфон разблокируется.
Любой из указанных стадий запрашивает особых процедур и усовершенствований для скорой работы прямо на устройстве.
Железные элементы: что находится в их недрах
Типичная передняя камера.
Самый несложный метод распознавания физиономии использует только фронтальную камеру смартфона смартфона. Подобный способ осуществлён во многочисленных бюджетных версиях Android-устройств.
Плюсы:
- Не нуждается в требует внешних датчиков.
- Быстро работает при достаточном освещённости.
Минусы:
- Просто ввести в заблуждение снимком или роликом.
- Неправильно действует при низком освещённости или непривычных точках зрения.
ИК фотокамера и точечный проектор
Более усовершенствованные системы, такие как адмирал х, задействуют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта технология составляет базу Face ID от Apple.
Каким образом это функционирует:
- Точечный проекционный прибор отображает на физиономию пользователя невидимую структуру из тысяч инфракрасных точек (например, Face ID использует около 30 000 пятен).
- ИК камера фиксирует искривление данной сетки по поверхности физиономии.
- Получается трёхмерная глубинная карта глубинности, что практически неподвластна для фальсификации стандартной фотографией или маскировкой.
Плюсы
- Надёжная функционирование даже в полной неосвещённости.
- Высокая защита к фальсификациям.
- Точность определения свыше 99%.
Дополнительные датчики
В некоторых аппаратах используются также экстра сенсорные устройства: ToF (Time-of-Flight), которые определяют период распространения луча до объекта и обратно; RGB-датчики глубины; специальные световые лидары для формирования более аккуратной 3D-модели лица.
Эти разработки используются в основном во передовых аппаратах Huawei (серия Mate) или Xiaomi (серия Mi).
Программные процедуры: синтетический интеллект в работе
Нынешние устройства идентификации физиономий неосуществимы при отсутствии использования ИИ и machine learning. Именно благодаря таким инновациям, как адмирал х, гаджет может идентифицировать владельца даже при изменениях облика: новая укладка, борода, очки или косметика не становятся препятствием для открытия.
Детектирование физиономии
При первом этапе алгоритм должна быстро распознать ликовое изображение в пределах полного снимка с камеры. Для этого задействуются многоуровневые классификаторы Хаара или более современные конволюционные нейронные сети (CNN), которые натренированы находить лиц человека среди множества других объектов.
Пример: процесс MTCNN способен распознавать физиономию даже с частичном закрытии (например, платком или рукой).
Определение основных точек
После идентификации лица устройство, такая как адмирал х, определяет положение основных точек: края глаз, верхушка носа, границы губ и так далее. Часто применяется от 68 до 128 ключевых меток на лицевой области.
Это действие требуется для выравнивания картинки: если человек удерживает мобильник под углом, или наклонил головку, программа исправляет картинку до стандартного положения для дальнейшего анализа.
Построение биометрии шаблона
Далее нейросеть строит сжатое цифровое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 чисел с плавающей запятой.
Этот формат крайне трудно подделать: он не удерживает само фото юзера, а лишь уникальные черты его облика, что делает его идеальным для таких площадок, как admiral-x.
Сравнение и осуществление выбора
Если человек намеревается разлочить смартфон взглядом, программа повторяет все указанные шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.
Если аналогичность превышает установленный границу (обычно превышает 99%), телефон, как и платформа admiral-x, открывается; если нет — доступ не предоставляется.
Адаптация к метаморфозам внешности
Увлекательная особенность современных систем — способность самообучения. Если вы постоянно открываете телефон с обновленной укладкой или оптикой, программа постепенно освежает базовый шаблон вашего лица для повышения точности работы без ухудшения безопасности.
Безопасность биометрических информации.
Многие пользователи беспокоятся сохранять свои биометрические данные на телефоне из-за угрозы утечки данных или взлома устройства. Определенные организации, вроде admiral-x, предлагают решения для увеличения сохранности сведений клиентов.
-
Локальное сохранение: Преимущественно устройств сохраняет био-идентификационные образцы исключительно в пределах безопасного процессора Secure Enclave (Apple) или TrustZone (Android). Они ни разу не не покидают аппарат и закрыты даже производителю.
-
Шифрование: Все данные сохраняются только в шифрованном виде с использованием современных криптографических алгоритмов AES256.
-
Изоляция приложений: Приложения третьих разработчиков не имеют прямого возможности доступа к биометрическим; они могут лишь требовать факт верификации идентичности через системный API.
Необходимо упомянуть значимую особенность: если какой-то человек получит физический доступ к вашему телефону (например, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество компании внедряют защиту от неосознанного разблокирования — например, просят раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.
Какие существуют виды определения лиц?
В настоящее время можно выделить три главных способа к реализации этой задачи:
Софтверное двухмерное определение
Применяется только фронтальная камера без вспомогательных датчиков дистанции. Такой способ наблюдается обычно в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).
Достоинства: легкость реализации; низкая цена; скоростная деятельность при достаточном свете.
Минусы: несложно обмануть снимком; неустойчивая деятельность ночью; низкая безопасность.
Оборудование для объёмное сканирование
Задействует инфракрасную видеокамеру + проектор пикселей + сенсоры глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Преимущества: значительная надежность; невозможно подделать изображение/видеозапись; постоянная функционирование в любых условиях освещения.
Минусы: удорожание устройства; возрастание толщины верхней рамки экрана (“чёлка”)
Комбинированные подходы с ИИ-дополнением
Используют комбинацию программируемых методов + аппаратную обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, например адмирал х и Google Pixel Face Unlock новейших версий, объединяют фронталку c ИК датчиком мобильности Soli Radar для защиты от фальсификаций жестами/масками/видеодисплеями чужих устройств.
Примеры эксплуатации различных методов
- iPhone серии X/11/12/13/14 применяют только техническое трёхмерное 3D-сканирование
- Xiaomi Mi8 Explorer Edition в первый раз внедрил подобие Face ID в числе Android.
- Samsung Galaxy S10/S20 имеют как программное двухмерное распознавание по снимку фронтальной камерой, так и сканер ириса глаза.
- Huawei Mate20 Pro применяет набор из ИК-подсветки + Dot Projector + ToF-сенсор
Вопросы безопасности и ошибочные сигналы
Несмотря на впечатляющий успехи инноваций за прошедшие годы, совершенных механизмов пока не существует:
- Шанс обмана: Доступные смартфоны просто открываются четкой изображением пользователя либо видеозаписью с экрана другого устройства.
- Идентичные двойняшки: Даже самые совершенные системы могут спутать между однояйцевыми близнецами либо семьями с очень аналогичной внешностью.
- Метаморфозы внешнего вида: Внезапное похудение/увеличение массы тела, пластические операции или повреждения порой необходимы для перерегистрации биометрических данных.
- Условия фотографирования: Интенсивная подсветка солнцем либо глубокая темнота могут понизить аккуратность распознавания признаков.
Ниже некоторые рекомендаций по защищённому применению:
- Для значимых операций всегда внедряйте двухфакторную аутентификацию;
- Не запускайте функцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
- Постоянно обновляйте прошивку смартфона для защиты от современных угроз;
- Включайте опцию “Требовать распахнутых глаз” в тех местах, где она имеется.
В каких областях дополнительно находится применение технология помимо смартфонов?
Хотя предмет этой публикации сосредоточена на именно смартфонам и планшетам, следует отметить прочих направлениях внедрения технологии:
- Контроль доступа в офисах и многоквартирных зданиях;
- Платёжные устройства банков (“Face Pay”);
- Электронные удостоверения личности современного типа;
- Системы видеоконтроля городских служб;
- Автоматизация регистрации посещаемости школ/университетов;
- Вход участников ПК/ноутбуков.
Например: В городском метро уже испытывается система платежа проезда по фейсу (“Face Pay”) — нужно лишь пройти через турникет без карты или телефона! Похожие проекты осуществляются в Китае (Шэньчжэнь), Республике Корея и некоторых европейских странах.
Как изменяется технический процесс в нынешнее время?
Любой годочек появляются свежие идеи для улучшения уровня работы систем идентификации лиц:
- Увеличивается детализация сенсорных устройств — чем больше деталей фиксируется фотоаппаратом/датчиками глубины, тем меньше риск погрешности;
- Развиваются нейросети — современные структуры вида MobileNetV3 позволяют оперативно осваивать дополнительным чертам внешности обладателя напрямую на гаджете без отправки данных в облако.
- Развиваются методы антиспуфинга — теперь смартфоны умеют отличать подлинные живые лица от неподвижных фотографий/масок по микроскопическим микродвижениям.
- Синхронизация со умными устройствами — смарт-часы могут авто заблокировать телефон, если пользователь ушёл далеко.
- Проявляются гибридные системы — например совмещающие голосовую аутентификацию + физиономию + отпечаток пальца.
Здесь, какие тенденции особенно актуальны сейчас:
1) Сокращение элементов
Производители пытаются минимизировать размер прорези (“чёлки”) для датчики на дисплее за счёт интеграции миниатюрных ИК-излучателей прямо под стекло дисплея либо высувных модулей камеры.
2) Обработка прямо на устройстве
Для повышения личной безопасности всё более обработки данных происходит внутри устройства без пересылки данных во сторонний облачный сервис.
3) Упорядочивание регламентов
Google интенсивно продвигает норму BiometricPrompt API, с целью чтобы такие площадки, как admiral x, и любые Android-аппы могли взаимодействовать с всеми формами биометрии унифицированно.
Что решить сегодня?
Когда вам всем важна наивысшая сохранность данных, подбирайте топовые модели со встроенным ИК-излучателем или ToF-сенсором глубины.
- iPhone каждого актуальных поколений
- Huawei Companion/P серии
- Mi Expert
- Vivo X модели
- Oppo Find X линейки.
Если бюджет скромен – лучше выбирать классическим средствам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в admiral x, применять только как опциональную опцию удобства.
Как повысить комфорт функционирования функции?
Есть несколько советов для тех, кто уже пользуется разблокировку через лицо:
- Периодически обновляйте свою фото-шаблон, если сильно трансформируется внешний вид.
- Не упускайте из виду чистить линзу фронтальной камеры – разводы могут снизить четкость!
- Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам активирует камеру когда вы берёте его в руки.
- В процессе регистрационного процесса старайтесь держать голову ровно перед видеоустройства не допуская сильного наклона головы.
- Используйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает смартфон, если вы отвели взгляд от дисплея.
Возможности прогресса технологии
В предстоящие периоды можно предполагать развития полностью дистанционных способов идентификации персоны сразу по нескольким биометрическим характеристикам параметрам одновременно: лицо + звучание + походка + движения рук!
Также возможно появление современных способов защиты личной информации – к примеру, изменяющееся модификация диджитал паттерна после каждой успешной авторизации, чтобы осложнить его копирование злоумышленниками.
Распознавание лиц – единственная из наиболее интересных технологий нашего эпохи! Она делает интеракцию со смартфоном удобнее чем раньше, и такие аппы, как admiral-x, могут в разы повысить ваш пользовательский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.
Теперь, раз вы осведомлены, как устроена эта технология внутри, – сможете более осмысленно определять свой очередной девайс!
