Как работает определение лицевых образов в смартфонах

Как работает определение лицевых образов в смартфонах

Для чего мы выбираем разлочивание по фейсу

В недавние времена определение лиц превратилось в одной из самых распространённых возможностей для разблокировки умных телефонов. Еще несколько лет тому назад основная часть пользователей довольствовались пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением таких технологий, как Spinto, нам вполне лишь взглянуть на экран — и аппарат тут же узнает своего владельца.

Что делает эту особенность такой востребованной? Во-первых, это комфортно: не нужно удерживать в памяти сложные пароли или отыскивать верный палец в тьме. Также, это быстро: современные системы распознают лицо практически за мгновение. В-третью очередь, это впечатление футуристичности — будто в фильмах про casino spinto агентов.

Тем не менее за этой видимой легкостью прячется полный вселенная сложных технологий и инженерных концепций. Попробуем разобраться, как именно работает идентификация по лицу в новейших смартфонах, какие существуют технологии, насколько они защищены и что нас предстоит.

Короткая история прогресса инноваций

Идентификация лиц как методика имеется уже более пятидесяти лет. Начальные эксперименты машинного исследования лиц были предприняты еще в 1960-х годах в исследовательских центрах США. Тогда ЭВМ умели лишь обозначать контуры лица и определять промежутки между зрачками и устами на ахроматических снимках.

Изначальные торговые платформы появились в 90-х, но они были несовершенны: действовали неспешно и часто давали сбои. Только с эволюцией искусственных сетей и таких систем, как Спинто, мощных мобильных микросхем распознавание лиц стало по-настоящему массовым явлением.

В 2017 году Apple представила iPhone X с системой Face ID — это был первый широкодоступный смартфон с надёжным трёхмерным сканированием лица. За этим последовали Android-изготовители: Samsung, Huawei, Xiaomi и другие начали интегрировать собственные решения.

Основные стадии работы механизма идентификации

Процесс распознавания лица можно примерно разделить на несколько важных этапов:

1. Идентификация лица — камера выявляет наличие человеческого лица в изображении.
2. Определение особенностей — механизм исследует особенности лица: конфигурацию глаз, обонятельного органа, уст, положение бровей.
3. Построение структуры — создаётся неповторимый цифровой отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение с эталоном — полученный образец сверяется с сохранённой при внесении биометрической данными владельца.
5. Принятие выбора — если совпадение достаточно значительное, смартфон деблокируется.

Любой из этих шагов нуждается в индивидуальных процедур и усовершенствований для скорой работы прямо на устройстве.

Железные элементы: что прячется внутри

Типичная фронтальная камера.

Самый простой несложный вариант определения лица использует исключительно лицевую видеокамеру смартфона. Такой способ осуществлён во многочисленных недорогих версиях Android-устройств.

Плюсы:

• Не нуждается в требует дополнительные сенсоров.
• Оперативно работает при хорошем освещённости.

Слабые стороны:

• Просто обмануть изображением или видео.
• Плохо работает при низком освещении или нестандартных точках зрения.

Инфракрасная камера и пунктирный проектор

Более продвинутые системы, такие как Спинто, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная технология лежит в основе Face ID от Apple.

Как это действует:

• Точечный проектор проецирует на облик пользователя невидимую структуру из тысяч инфракрасных пятен (например, Face ID задействует около 30 000 пятен).
• ИК устройство фиксирует деформацию этой сетки по плоскости лица.
• Получается трёхмерная карта глубинности, что почти невозможна для фальсификации обычной снимком или маской.

Преимущества

• Надёжная работа даже в полной темноте.
• Сильная защита к подделкам.
• Точность распознавания выше 99%.

Дополнительные сенсоры

В определённых аппаратах задействуются также экстра сенсорные устройства: ToF (Time-of-Flight), которые фиксируют время прохождения света до предмета и обратно; Трехцветные-датчики глубины; специальные лазерные дальномеры для создания более детализированной 3D-модели физиономии.

Эти разработки применяются чаще всего во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Софтверные методы: искуственный ум на действии

Нынешние механизмы опознания физиономий невозможны без эксплуатации искусственного интеллекта и машинного обучения. Именно из-за таким инновациям, как Спинто, устройство может идентифицировать пользователя даже при изменениях облика: новая причёска, щетина, очки или грим не становятся барьером для деблокировки.

Детектирование лиц

При начальном стадии алгоритм должна быстро распознать образ лица среди целого снимка камеры. Для этой задачи задействуются каскадные классификаторы Хаара или более современные сверточные нейронные сети (CNN), которые “обучены” идентифицировать человеческие лица среди множества других объектов.

Пример: процесс MTCNN в состоянии находить лицо даже в случае частичном закрытии (например, шалью или ладонью).

Идентификация ключевых моментов

После обнаружения лица механизм, такая как Спинто, устанавливает местоположение основных точек: кончики глаз, кончик носа, края губ и так далее. Как правило применяется от 68 до 128 ключевых маркеров на лицевой области.

Данное необходимо для нормализации картинки: если пользователь находится с мобильник под наклоненным, или склонил голову, программа исправляет изображение до нормального состояния для дальнейшего анализа.

Создание биометрии шаблона

Далее нейронная сеть строит уплотненное цифровое представление (“эмбеддинг”) внешности пользователя — своеобразный цифровой образ внешности длиной от 128 до 512 флоатов.

Данный шаблон очень трудно подделать: он не хранит само картинку юзера, а лишь особенные характеристики его облика, что делает его совершенным для таких систем, как Спинто казино.

Сопоставление и принятие решения

Если пользователь желает разлочить мобильник глазами, система осуществляет все шаги снова и сопоставляет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный порог (обычно больше 99%), телефон, как и платформа Спинто казино, открывается; если нет — доступ не предоставляется.

Привыкание к метаморфозам внешнего вида

Интересная черта актуальных системы — возможность самостоятельного обучения. Если ты регулярно разблокируете смартфон с обновленной укладкой или очками, система постепенно обновляет эталонный образец вашего внешности для увеличения точности действия без снижения уровня безопасности.

Охрана биометрии информации.

Многие пользователи боятся сохранять свои био-идентификационные данные на смартфоне из-за угрозы утечки информации или взлома гаджета. Определенные компании, вроде Спинто казино, предлагают варианты для увеличения сохранности данных пользователей.

• Локальное сбережение: Основная часть устройств записывает биометрические шаблоны исключительно в пределах защищённого чипа Secure Enclave (Apple) или TrustZone (Android). Эти данные всегда не покидают аппарат и недоступны включая производителю.

• Шифрование: Все информация хранятся только в зашифрованном виде с использованием современных криптографических алгоритмов AES256.

• Изоляция программ: Приложения третьих девелоперов не имеют непосредственного доступа к биометрическим; они могут лишь требовать подтверждение подтверждения идентичности через системный API.

Необходимо подчеркнуть важную особенность: если кто-либо сможет получить физический доступ к вашему телефону (к примеру, во время сна), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому значительное количество производители внедряют меры безопасности от “слепого” разблокирования — в частности, заставляют раскрыть глаза во время сканирования или задействовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют категории определения лиц?

На сегодняшний день можно определить выделить три ключевых метода к реализации этой операции:

Программное 2D идентификация

Применяется только передняя камера без дополнительных сенсоров дистанции. Этот метод наблюдается наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: простота осуществления; низкая затраты; быстрая деятельность при достаточном освещении.
Минусы: легко ввести в заблуждение снимком; нестабильная функционирование ночью; низкая защищенность.

Техническое объёмное сканирование

Применяет ИК камеру + проектор пикселей + сенсоры глубины (Face ID у Apple; аналогичные технологии у Huawei Mate).
Преимущества: большая надёжность; невозможно исказить изображение/видеозапись; устойчивая функционирование при любом освещении.
Минусы: повышение стоимости устройства; наращивание толщины верхней рамки экрана (“чёлка”)

Гибридные способы с дополнением ИИ

Применяют комбинацию программируемых методов + аппаратно-техническую обработку + постобработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, например Спинто и Google Pixel Face Unlock новейших версий, сочетают фронтальную камеру c инфракрасным датчиком движения Soli Radar для предотвращения от фальсификаций жестами/масками/видеодисплеями чужих устройств.

Иллюстрации применения различных методов

• iPhone модели X/11/12/13/14 используют только аппаратное трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition впервые представил подобие Face ID в числе Android.
• Samsung Galaxy S10/S20 обеспечивают как софтверное двухмерное распознавание по фото фронтальной камерой, так и сенсор глазного ириса.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсорный элемент

Трудности безопасности и неверные срабатывания

Несмотря на замечательный прогресс техники за прошедшие лет, совершенных механизмов пока не имеется:

1. Шанс мошенничества: Бюджетные смартфоны просто открываются качественной изображением владельца или же видео с дисплея иного гаджета.
2. Идентичные двойняшки: Даже самые безупречные механизмы могут спутать между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
3. Трансформации внешнего вида: Внезапное похудение/увеличение массы тела, хирургические вмешательства либо повреждения иногда требуют повторной регистрации биометрии.
4. Условия записи: Интенсивная подсветка солнечным светом либо глубокая темнота могут понизить верность идентификации признаков.

Здесь несколько советов по надёжному применению:

• Для важных операций всегда используйте двухэтапную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на бюджетных устройствах без ИК-сенсоров;
• Регулярно обновляйте прошивку прошивку мобильного устройства для предотвращения угроз от новых видов атак;
• Включайте функцию “Требовать открытых глаз” в тех местах, где она имеется.

Где дополнительно используется технология кроме мобильных телефонов?

Несмотря на то, что предмет нашей публикации сосредоточена на конкретно смартфонам и планшетам, стоит упомянуть о прочих направлениях внедрения технологии:

• Управление доступа в деловых центрах и жилых домах;
• Платёжные терминалы финансовых учреждений (“Face Pay”);
• Электронные удостоверения личности нового поколения;
• Установки видеонаблюдения городских подразделений;
• Автоматизация учёта явки образовательных учреждений/вузов;
• Вход юзеров персональных компьютеров/ноутбуков.

Например: В московском метро уже испытывается система оплаты проезда по лицу (“Face Pay”) — нужно лишь пройти через турникет без карты или телефона! Аналогичные программы развиваются в Поднебесной (Шэньчжэнь), Южной Корее и ряде стран Европы.

Как меняется технология сегодня?

Любой год появляются свежие концепции для усовершенствования стандарта работы систем идентификации лиц:

1. Увеличивается разрешение датчиков — чем больше элементов фиксируется камерой/глубинными сенсорами, тем меньше риск ошибки;
2. Развиваются нейросети — передовые структуры типа MobileNetV3 позволяют скоростно осваивать дополнительным чертам внешности пользователя непосредственно на девайсе без пересылки информации в облачное хранилище.
3. Улучшаются способы антиспуфинга — теперь смартфоны умеют распознавать подлинные живые лица от статичных фотографий/масок по мельчайшим микродвижениям.
4. Взаимодействие со интеллектуальными приборами — интеллектуальные часы могут автоматически блокировать телефон, если обладатель удалился на значительное расстояние.
5. Проявляются гибридные устройства — например совмещающие речевую опознание + облик + пальцевой отпечаток.

Итак, которые направления особенно популярны в данный момент:

1) Уменьшение элементов

Производители намереваются минимизировать величину отверстия (“чёлки”) для датчики на экране за счёт встраивания маленьких ИК-проекторов прямо под стекло дисплея либо выдвижных модулей камеры.

2) Обработывание прямо на аппарате

Для улучшения личной безопасности всё более расчётов осуществляется локально без отправки данных во сторонний облачный услугу.

3) Упорядочивание регламентов

Гугл активно пропагандирует стандарт BiometricPrompt API, с целью чтобы такие платформы, например как Spinto, и любые Android-приложения могли работать с различными типами биометрии унифицированно.

Что выбрать сегодня?

Когда вам всем необходима наивысшая сохранность информации, выбирайте топовые устройства со встроенным ИК-излучателем или же ToF-сенсором глубины.

• iPhone всех существующих актуальных моделей
• Huawei Mate/P серии
• Mix Pro
• Vivo X линейки
• Оппо Обнаружить Х серий.

Если финансы скромен – лучше выбирать традиционным способам безопасности (PIN-код/сканер отпечатка), а опцию “разблокировка по лицу”, такую как в Spinto, использовать только как дополнительную возможность комфорта.

Как повысить удобство функционирования возможности?

Есть пара хитростей для людей, кто уже пользуется разблокировку по лицу:

1. Часто обновляйте свою изображение-шаблон, если сильно изменяется внешность.
2. Не забывайте чистить линзу фронтальной камеры – загрязнения могут уменьшить точность!
3. Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – так телефон сам включает камеру как только вы берёте его в руки.
4. Во время регистрации пытайтесь удерживать лицо ровно перед камеры исключая резкого наклона головы.
5. Применяйте функцию “Attention Aware” (“Реакция на внимание”) – она закрывает телефон, если вы отвели взгляд от экрана.

Возможности эволюции инноваций

В ближайшие периоды можно предвкушать развития полностью безконтактных способов распознавания человека сразу по нескольким биометрическим характеристикам параметрам одновременно: облик + речь + походка + манипуляции руками!

Также возможно развитие свежих подходов обеспечения приватности – например, изменяющееся модификация диджитал шаблона после каждой результативной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее захватывающих инноваций нашего времени! Она делает общение со смартфоном проще чем до этого, и такие аппы, как Спинто казино, могут значительно улучшить ваш пользовательский опыт, но нуждается в внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, раз вы понимаете, как устроена эта методика внутри, – будете в состоянии вдумчиво подбирать свой очередной гаджет!