Каким образом работает распознавание лицевых образов в смартфонах

Для чего мы останавливаемся на разблокирование по лицу

В прошлые времена идентификация лиц превратилось в одной из наиболее востребованных функций для открытия умных телефонов. Всего пару лет ранее основная часть юзеров удовлетворялись PIN-кодами, паролями или датчиками отпечатков пальцев. Но при появлением таких технологий, например Spinto, нам достаточно лишь взглянуть на экран — и устройство тут же узнает своего владельца.

Какая вещь превращает эту конкретную возможность такой востребованной? Прежде всего, это удобно: не нужно запоминать трудные пароли или находить правильный палец в тьме. Во-вторых, это оперативно: современные алгоритмы идентифицируют лицо фактически за мгновения ока. В-третью очередь, это ощущение будущего — будто в кинофильмах про spinto casino разведчиков.

Впрочем за такой кажущейся легкостью таится полный вселенная комплексных методов и инженерных концепций. Позвольте нам понять, как именно функционирует фейсканирование в новейших смартфонах, какие существуют методы, насколько они надёжны и что нас предстоит.

Короткая повествование развития инноваций

Идентификация лиц как техника существует уже более 50 лет. Первые пробы машинного исследования облика были сделаны еще в 1960-х годы в лабораториях США. Тогда ЭВМ могли лишь определять контуры головы и измерять промежутки между глазами и устами на ахроматических изображениях.

Первые торговые установки стали доступны в девяностых годах, но они были далеки от совершенства: действовали неспешно и часто давали сбои. Только с прогрессом искусственных сетей и таких платформ, как Спинто, мощных мобильных микросхем определение лиц стало по-настоящему общедоступным явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и прочие стали внедрять собственные разработки.

Главные этапы функционирования механизма распознавания

Процесс распознавания лица можно ориентировочно поделить на несколько ключевых этапов:

1. Распознавание лиц — камера распознает наличие людского образа в кадре.
2. Извлечение признаков — механизм изучает черты лица: очертания глаз, носа, уст, позицию бровей.
3. Построение структуры — создаётся особенный виртуальный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со образцом — сформированный модель сверяется со зафиксированной при внесении биометрической данными владельца.
5. Принятие решения — если совпадение достаточно высокое, смартфон открывается.

Каждый из этих шагов требует специальных алгоритмов и оптимизаций для быстрой работы прямо на устройстве.

Железные компоненты: что скрыто в их недрах

Обычная передняя камера.

Самый простой простой метод определения облика использует исключительно переднюю видеокамеру мобильного устройства. Такой метод реализован во многих бюджетных версиях Android-устройств.

Преимущества:

• Необходимо потребляет дополнительные сенсоров.
• Быстро действует при качественном свете.

Отрицательные стороны:

• Несложно обмануть фотографией или видео.
• Неправильно работает при плохом освещении или необычных точках зрения.

ИК фотокамера и точечный проектор

Более продвинутые системы, такие как Спинто, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта техпроцесс является основой Face ID от Apple.

Каким способом это действует:

• Точечный устройство проекции показывает на физиономию использующего невидимую сетку из тысяч инфракрасных меток (например, Face ID задействует около 30 000 пятен).
• Инфракрасная устройство фиксирует искривление этой решетки по плоскости лица.
• Получается трёхмерная карта глубины, что почти неосуществима для фальсификации обычной фотографией или маской.

Достоинства

• Надёжная работа даже в полной темноте.
• Большая сопротивляемость к фальсификациям.
• Точность идентификации выше 99%.

Добавочные сенсорные устройства

В некоторых устройствах применяются также вспомогательные сенсоры: ToF (Time-of-Flight), которые фиксируют время движения света до объекта и обратно; RGB-датчики дальности; специальные световые лидары для построения более аккуратной 3D-модели лица.

Эти инновации применяются наиболее часто во топовых устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные процедуры: искуственный ум в исполнении

Современные системы опознания физиономий неосуществимы в отсутствие применения ИИ и машинного обучения. Именно из-за таким технологиям, как Спинто, устройство в состоянии идентифицировать юзера даже при изменениях облика: новая укладка, борода, оптика или косметика не становятся препятствием для открытия.

Распознавание лиц

На стартовом шаге программа необходимо оперативно распознать лицо внутри целого изображения камеры. Для этой задачи задействуются многоуровневые классификаторы Хаара или более продвинутые сверточные нейронные сети (CNN), которые натренированы находить лица людей среди множества других объектов.

Пример: алгоритм MTCNN в состоянии обнаруживать облик даже с частичном закрытии (например, платком или рукой).

Определение основных аспектов

После идентификации лица механизм, такая как Спинто, вычисляет местоположение главных точек: края глаз, конец носа, края губ и так далее. Как правило применяется от 68 до 128 ключевых меток на лице.

Это действие нужно для нормализации визуала: если юзер держит телефон под углом, или наклонил головку, программа исправляет картинку до нормального состояния для дальнейшего анализа.

Создание биометрического идентификатора модели

Далее искусственная сеть строит уплотненное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой образ лица длиной от 128 до 512 вещественных чисел.

Этот формат крайне сложно сфальсифицировать: он не сохраняет непосредственно изображение юзера, а лишь особенные особенности его внешности, что делает его идеальным для таких систем, как Спинто казино.

Сопоставление и осуществление выбора

В случае, когда человек намеревается разблокировать телефон взглядом, механизм воспроизводит все описанные выше шаги заново и сравнивает полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный границу (обычно выше 99%), телефон, как и платформа Спинто казино, доступен; если нет — доступ блокируется.

Привыкание к изменениям внешнего вида

Интересная характеристика актуальных системы — способность самостоятельного обучения. Если ты часто открываете смартфон с обновленной укладкой или оптикой, программа постепенно обновляет эталонный модель вашего облика для улучшения точности функционирования без ухудшения безопасности.

Безопасность биометрических данных.

Множество клиенты боятся сохранять свои биометрические идентификационные данные на мобильном устройстве из-за угрозы утечки информации или хакерской атаки. Некоторые компании, вроде Спинто казино, предлагают методы для улучшения безопасности информации клиентов.

• Локальное сбережение: Основная часть девайсов хранит биометричные модели только в пределах защищенного чипа Secure Enclave (Apple) или TrustZone (Android). Они никогда не покидают гаджет и не доступны в том числе производителю.

• Шифрование: Все данные сохраняются только в кодированном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция приложений: Программы третьих девелоперов не обладают прямого возможности доступа к биометрическим; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Следует подчеркнуть важную деталь: если какой-то человек получит физический доступ к вашему телефону (к примеру, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство компании внедряют систему защиты от неосознанного разблокирования — в частности, просят открыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют бывают категории определения лиц на изображениях?

Сегодня можно выделить 3 главных подхода к осуществлению этой задачи:

Программное плоское определение

Используется только фронтальная камера без вспомогательных датчиков глубины. Такой подход используется обычно в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность реализации; минимальная цена; оперативная функционирование при достаточном свете.
Минусы: несложно одурачить фотографией; неустойчивая функционирование ночью; слабая безопасность.

Аппаратное трёхмерное оцифровка

Задействует ИК видеокамеру + проектор пикселей + сенсоры глубины (Face ID от Apple; аналогичные технологии у Huawei Mate).
Плюсы: большая надежность; нельзя подделать фото/видео; устойчивая функционирование при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Комбинированные способы с интеграцией ИИ

Применяют комбинацию программируемых методов + техническую обработку + последующую обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, подобные изделия, например Спинто и Google Pixel Face Unlock новейших версий, объединяют фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Иллюстрации эксплуатации разных методов

• iPhone серии X/11/12/13/14 применяют только аппаратное трёхмерное сканирование в 3D
• Xiaomi Mi8 Explorer Edition первый раз внедрил эквивалент Face ID в числе Android.
• Samsung Galaxy S10 версия/S20 поддерживают как программное плоское распознавание по изображению селфи-камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro использует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Трудности защиты и ложные тревоги

Несмотря на замечательный развитие инноваций за прошедшие годы, совершенных механизмов пока не имеется:

1. Вероятность подвоха: Бюджетные мобильники без труда открываются качественной изображением пользователя или же видеозаписью с дисплея иного гаджета.
2. Идентичные близняшки: Даже самые совершенные системы могут спутать между однояйцевыми близнецами либо родичами с очень аналогичной внешностью.
3. Метаморфозы внешности: Стремительное снижение веса/набор веса, косметические процедуры либо повреждения в некоторых случаях требуют повторной регистрации биометрических данных.
4. Условия фотографирования: Сильная подсветка солнцем либо интенсивная тень могут уменьшить аккуратность идентификации признаков.

Вот некоторые подсказок по защищённому использованию:

• Для важных операций всегда применяйте двухфакторную аутентификацию;
• Не активируйте опцию “Разблокировка по лицу” на дешёвых аппаратах без ИК-сенсоров;
• Регулярно обновляйте прошивку прошивку смартфона для защиты от новых видов атак;
• Включайте опцию “Требовать раскрытых глаз” везде, где она имеется.

В каких местах ещё применяется технология за исключением мобильных телефонов?

Пускай основная мысль данной публикации сосредоточена на в частности мобильным устройствам, стоит упомянуть о альтернативных областях использования технологии:

• Управление доступа в деловых центрах и многоквартирных зданиях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Виртуальные паспорта последнего типа;
• Комплексы видеоконтроля городских сервисов;
• Автоматизирование отслеживания явки школ/вузов;
• Вход участников персональных компьютеров/ноутбуков.

Например: В городском метро уже проверяется система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через барьер без пластика или телефона! Аналогичные проекты развиваются в Китае (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как меняется технология в наше время?

Любой годочек проявляются свежие концепции для улучшения стандарта работы систем идентификации лиц:

1. Увеличивается детализация сенсоров — чем больше информации фиксируется видеокамерой/глубинными сенсорами, тем меньше вероятность погрешности;
2. Развиваются искусственные интеллекты — современные архитектуры типа MobileNetV3 дают возможность скоростно адаптироваться к свежим особенностям облика пользователя прямо на устройстве без отправки данных в облако.
3. Совершенствуются способы антиспуфинга — теперь телефоны умеют различать реальные живые облики от фиксированных снимков/маскировок по микроскопическим микродвижениям.
4. Синхронизация со интеллектуальными приборами — умные часы могут самостоятельно заблокировать смартфон, если владелец удалился на значительное расстояние.
5. Возникают гибридные механизмы — в частности совмещающие аудио идентификацию + облик + отпечаток пальца.

Итак, какие направления особенно востребованы сейчас:

1) Уменьшение элементов

Производители пытаются сократить размер прорези (“чёлки”) под сенсоры на дисплее за счёт встраивания компактных ИК-излучателей прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Переработка прямо на девайсе

Для улучшения личной безопасности всё больше обработки данных происходит локально без пересылки данных во сторонний облачный сервис.

3) Стандартизация норм

Гугл энергично пропагандирует норму BiometricPrompt API, с целью чтобы подобные системы, например как Spinto, и все Android-программы были совместимы с любыми видами биометрии стандартизированно.

Что решить на сегодня?

Когда тебе необходима максимальная сохранность информации, выбирайте топовые модели с вмонтированным ИК-излучателем или ToF-датчиком глубины.

• iPhone всех новейших моделей
• Huawei Mate/Series P ряда
• Mi Expert
• Vivo X модели
• Oppo Обнаружить Икс серии.

Если средства ограничен – лучше отдавать предпочтение обычным средствам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в Spinto, применять только как опциональную опцию удобства.

Каким образом увеличить комфорт работы возможности?

Есть несколько советов для тех, кто уже использует разблокировку по лицу:

1. Периодически обновляйте свою изображение-шаблон, если значительно меняется облик.
2. Не пренебрегайте чистить объектив фронтальной камеры – пятна могут снизить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – в результате смартфон сам запускает камеру когда вы берёте его в руки.
4. При регистрационного процесса пытайтесь удерживать голову прямо впереди видеоустройства без значительного наклона головы.
5. Применяйте опцию “Attention Aware” (“Реакция на внимание”) – она запирает смартфон, если вы отвернулись от дисплея.

Будущее прогресса инноваций

В предстоящие периоды можно предвкушать возникновения полностью бесконтактных способов распознавания человека сразу по нескольким биометрическим параметрам одновременно: облик + звучание + походка + манипуляции руками!

Также возможно возникновение современных способов обеспечения конфиденциальности – скажем, изменяющееся изменение электронного образца после каждой успешной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – единственная из самых захватывающих технологий нашего времени! Она обеспечивает взаимодействие со мобильным устройством проще чем когда-либо прежде, и такие программы, как Спинто казино, могут значительно оптимизировать ваш пользовательский опыт, но запрашивает осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, раз вы осведомлены, как устроена эта технология изнутри, – будете в состоянии вдумчиво выбирать свой будущий устройство!