Каким образом действует определение лиц в смартфонах

Почему мы выбираем разблокирование по лицевому распознаванию

В недавние годы определение физиономий превратилось в одной из самых популярных функций для разблокировки мобильных телефонов. Всего некоторые годов назад большинство использующих довольствовались пин-кодами, секретными кодами или сканерами отпечатков пальцев. Но с появлением таких технологий, например Вулкан 24, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Что обуславливает эту особенность такой востребованной? Во-первых, это удобно: не нужно запоминать трудные пароли или находить верный палец в мраке. Кроме того, это оперативно: современные программы идентифицируют лицо фактически за мгновение. В-третьих, это чувство будущего — как будто в фильмах про вулкан 24 разведчиков.

Тем не менее за этой на первый взгляд простотой прячется весь мир трудных технологий и инженерных концепций. Попробуем разобраться, как конкретно функционирует распознавание лиц в актуальных смартфонах, какие применяются методы, насколько они защищены и что нас ожидает в будущем.

Сжатая повествование прогресса технологии

Идентификация лиц как методика присутствует уже более 50 лет. Начальные попытки автоматизированного анализа облика были предприняты еще в 1960-х годах в научных учреждениях США. Тогда вычислительные машины умели лишь определять силуэты головы и измерять расстояния между зрачками и ртом на ахроматических снимках.

Изначальные коммерческие системы стали доступны в девяностых годах, но они были неидеальны: действовали неспешно и часто давали сбои. Только с развитием синтетических сетей и таких площадок, как Вулкан 24 Казино, высокопроизводительных мобильных микросхем идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple презентовала iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным сканированием лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали внедрять личные решения.

Основные этапы функционирования системы идентификации

Процесс идентификации лица можно примерно разделить на несколько важных этапов:

Обнаружение лиц — аппарат определяет наличие гуманного лица в снимке.
Выделение особенностей — алгоритм изучает контуры облика: конфигурацию зрительных органов, носа, уст, положение бровей.
Построение структуры — создаётся неповторимый виртуальный отпечаток (faceprint) на основе идентифицированных признаков.
Сравнение с эталоном — сформированный модель сопоставляется с записанной при учёте биометрической информацией владельца.
Принятие решения — если сходство достаточно существенное, смартфон разблокируется.

Любой из указанных стадий нуждается в специальных процедур и усовершенствований для быстрой работы непосредственно на девайсе.

Технические элементы: что прячется внутри них

Типичная фронтальная камера.

Наиболее легкий способ распознавания лица использует исключительно фронтальную камеру смартфона. Подобный способ осуществлён во многочисленных недорогих вариантах Android-устройств.

Плюсы:

Необходимо требует дополнительные сенсоров.
Оперативно действует при достаточном освещении.

Недостатки:

Несложно обмануть фотографией или видео.
Неправильно функционирует при плохом освещении или необычных точках зрения.

Инфракрасная камера и точечный проекционный аппарат

Более усовершенствованные системы, такие как Вулкан 24 Казино, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Эта самая технология является основой Face ID от Apple.

Каким образом это работает:

Точечный проектор проецирует на физиономию юзера невидимую структуру из тысяч инфракрасных точек (например, Face ID использует около 30 000 точек).
Инфракрасная камера регистрирует деформацию этой решетки по плоскости лица.
Формируется 3D глубинная карта глубинности, которая практически неподвластна для имитации стандартной фото или маскировкой.

Преимущества

Надёжная работа даже в полной тьме.
Большая устойчивость к подделкам.
Точность идентификации выше 99%.

Дополнительные сенсоры

В отдельных устройствах применяются также экстра сенсоры: ToF (Time-of-Flight), которые определяют период прохождения луча до объекта и обратно; RGB-датчики дальности; специальные световые лидары для построения более детализированной 3D-модели лица.

Эти инновации встречаются в основном во флагманских устройствах Huawei (серия Mate) или Xiaomi (серия Mi).

Компьютерные алгоритмы: синтетический разум в исполнении

Текущие устройства идентификации лиц невозможны без использования ИИ и machine learning. Именно благодаря таким разработкам, как Вулкан 24 Казино, гаджет может распознавать владельца даже при изменениях облика: новая причёска, щетина, оптика или макияж не становятся препятствием для открытия.

Обнаружение лиц

В стартовом этапе программа должна быстро распознать ликовое изображение внутри полного изображения с камеры. Для данной цели применяются каскадные классификаторы Хаара или более новейшие сверточные нейронные сети (CNN), которые подготовлены идентифицировать лиц человека среди множества других объектов.

Пример: алгоритм MTCNN способен распознавать физиономию даже с частичном перекрытии (например, платком или ладонью).

Идентификация важных аспектов

После идентификации лица механизм, такая как Вулкан 24 Казино, устанавливает положение главных точек: края глаз, кончик носа, края губ и так далее. Часто используется от 68 до 128 основных точек на лицевой поверхности.

Это требуется для стабилизации картинки: если пользователь находится с смартфон под наклоненным, или повернул головку, программа “выпрямляет” картинку до стандартного положения для последующего изучения.

Построение биометрического модели

Далее нейросеть строит компактное числовое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой след лица длиной от 128 до 512 чисел с плавающей запятой.

Этот формат крайне сложно подделать: он не удерживает непосредственно фото пользователя, а лишь уникальные особенности его внешности, что делает его идеальным для таких площадок, как Vulkan24.

Сравнительный анализ и вынесение выбора

В случае, когда пользователь желает разблокировать мобильник глазами, программа осуществляет все указанные шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный уровень (обычно превышает 99%), телефон, как и платформа Vulkan24, разблокируется; если нет — доступ запрещается.

Приспособление к трансформациям облика

Увлекательная характеристика современных системы — способность самостоятельного обучения. Если вы часто открываете смартфон с свежей прической или оптикой, система постепенно обновляет эталонный шаблон вашего облика для повышения точности работы без снижения уровня безопасности.

Безопасность биометрических информации.

Множество пользователи опасаются держать свои биометрические идентификационные данные на телефоне из-за риска утечки информации или взлома гаджета. Иные компании, такие как Vulkan24, предлагают решения для улучшения безопасности сведений юзеров.

Локальное сохранение: Основная часть устройств записывает био-идентификационные модели исключительно внутрь защищённого микросхемы Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из гаджет и закрыты в том числе изготовителю.
Шифрование: Все информация сохраняются только в кодированном виде с использованием новейших криптографических алгоритмов AES256.
Изоляция программ: Программы третьих разработчиков не обладают непосредственного возможности доступа к биометрическим данным; они могут лишь запрашивать факт подтверждения идентичности через системный API.

Необходимо отметить существенную деталь: если кто-то сможет получить физический доступ к вашему телефону (например, пока вы спите), теоретически возможно разблокировать устройство поднеся его к вашему лицу. Поэтому большинство изготовители внедряют защиту от неосознанного разблокирования — к примеру, просят разомкнуть глаза во время сканирования или применять дополнительное подтверждение после длительного простоя устройства.

Какие именно имеются типы распознавания лиц?

На сегодняшний день можно определить 3 ключевых метода к выполнению этой функции:

Программное 2D определение

Применяется только передняя видеокамера без вспомогательных датчиков дистанции. Подобный подход наблюдается чаще всего в доступных моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: легкость осуществления; умеренная цена; оперативная работа при качественном освещении.
Минусы: просто ввести в заблуждение фотографией; нестабильная работа ночью; недостаточная охрана.

Аппаратное объёмное сканирование

Использует инфракрасную камеру + проектор точек + сенсоры глубины (Face ID у Apple; аналогичные решения у Huawei Mate).
Достоинства: значительная достоверность; нельзя подделать изображение/видеозапись; стабильная работа при любом освещении.
Минусы: увеличение цены устройства; увеличение толщины верхней рамки экрана (“чёлка”)

Смешанные способы с дополнением ИИ

Используют комбинацию программируемых методов + аппаратно-техническую обработку + дополнительную обработку нейросетями для повышения устойчивости к атакам (“anti-spoofing”). Например, такие товары, как Вулкан 24 Казино и Google Pixel Face Unlock последних поколений, сочетают фронтальную камеру c инфракрасным сенсором движения Soli Radar для защиты от фальсификаций жестами/масками/видеоэкранами чужих устройств.

Образцы применения различных техник

iPhone линейки X/11/12/13/14 используют только аппаратное трёхмерное 3D-сканирование
Xiaomi Mi8 Explorer Edition впервые представил аналог Face ID в ряду Android.
Samsung Galaxy S10/S20 имеют как софтверное двухмерное определение по фото фронталкой, так и сенсор ириса глаза.
Huawei Mate20 Pro задействует набор из ИК-освещения + Dot Projector + ToF-сенсор

Вопросы защиты и неверные тревоги

Несмотря на поразительный успехи техники за прошедшие годы, совершенных механизмов пока не имеется:

Вероятность мошенничества: Бюджетные мобильники легко открываются четкой фотографией хозяина или же роликом с дисплея иного гаджета.
Идентичные близняшки: Даже самые безупречные механизмы могут ошибиться между монозиготными близнецами либо родственниками с очень аналогичной внешностью.
Метаморфозы внешности: Внезапное утрата веса/увеличение массы тела, косметические процедуры либо повреждения в некоторых случаях необходимы для повторной регистрации биометрии.
Условия записи: Интенсивная засветка солнцем или плотная затенение могут уменьшить точность распознавания признаков.

Здесь некоторые подсказок по надёжному применению:

Для значимых операций всегда внедряйте дополнительную аутентификацию;
Не включайте опцию “Разблокировка по лицу” на недорогих моделях без ИК-сенсоров;
Регулярно обновляйте программное обеспечение смартфона для предотвращения угроз от новых видов атак;
Включайте функцию “Требовать открытых глаз” везде, где она доступна.

В каких местах также находится применение технология за исключением смартфонов?

Пускай предмет данной публикации посвящена конкретно портативным гаджетам, стоит упомянуть о альтернативных областях использования технологии:

Мониторинг прохода в офисах и многоквартирных зданиях;
Платёжные терминалы финансовых учреждений (“Face Pay”);
Виртуальные паспорта нового образца;
Системы видеонаблюдения городских служб;
Механизация отслеживания посещаемости образовательных учреждений/университетов;
Аутентификация юзеров персональных компьютеров/ноутбуков.

Например: В городском метро уже испытывается система оплаты проезда по фейсу (“Face Pay”) — достаточно пройти через турникет без карты или телефона! Схожие программы реализуются в Китае (Шэньчжэнь), Южной Корее и ряде стран Европы.

Каким способом меняется техпроцесс в нынешнее время?

Любой годочек возникают новые идеи для улучшения уровня работы систем распознавания лиц:

Увеличивается чёткость сенсоров — чем больше элементов фиксируется фотоаппаратом/датчиками глубины, тем меньше шанс неточности;
Развиваются нейросети — передовые структуры модели MobileNetV3 обеспечивают возможность оперативно осваивать свежим характеристикам внешности пользователя прямо на устройстве без отправки данных в облако.
Развиваются методы антиспуфинга — теперь телефоны способны различать реальные движущиеся лица от статичных фотографий/масок по незаметным движениям кожи.
Синхронизация со умными устройствами — умные часы могут авто заблокировать смартфон, если обладатель ушёл далеко.
Возникают комбинированные устройства — например объединяющие голосовую опознание + физиономию + дактилоскопический след.

Итак, те направления очень востребованы на сегодняшний день:

1) Уменьшение элементов

Производители пытаются сократить размер прорези (“чёлки”) для датчики на экране за счёт встраивания миниатюрных ИК-проекторов прямо под поверхность дисплея либо выдвижных модулей камеры.

2) Обработка прямо на устройстве

Для улучшения личной безопасности всё больше обработки данных осуществляется внутри устройства без пересылки информации во внешний облачный сервис.

3) Унификация норм

Google активно пропагандирует норму BiometricPrompt API, для того чтобы такие платформы, например как Вулкан 24, и все Android-приложения были совместимы с различными типами биометрии единообразно.

Какое выбрать на сегодня?

Если тебе нужна предельная сохранность информации, остановите выбор на передовые аппараты со встроенным ИК-излучателем или ToF-датчиком глубины.

iPhone каждого последних моделей
Huawei Partner/P ряда
Mi Expert
Vivo X серии
Оппо Обнаружить Х линейки.

Если бюджет скромен – лучше отдавать предпочтение классическим средствам безопасности (PIN-код/сканер пальца), а возможность “разблокировка по лицу”, такую как в Вулкан 24, задействовать только как второстепенную возможность удобства.

Каким образом улучшить практичность использования функции?

Есть некоторые лайфхаков для людей, кто уже пользуется разблокировку через лицо:

Регулярно меняйте свою фото-шаблон, если сильно меняется внешний вид.
Не пренебрегайте протирать объектив фронтальной камеры – пятна могут снизить точность!
Включайте функцию “Raise to Wake” (“Поднять чтобы проснуться”) – вследствие чего смартфон сам запускает фотоаппарат как только вы поднимаете его.
В процессе регистрации пытайтесь держать лицевую часть неподвижно впереди объектива без резкого наклона головы.
Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она запирает мобильное устройство, если вы отвернулись от экрана.

Перспективы эволюции технологии

В ближайшие периоды можно ожидать развития полностью бесконтактных способов опознания человека сразу по нескольким биометрическим данным параметрам одновременно: физиономия + речь + манера ходьбы + манипуляции руками!

Также предполагается возникновение современных методов защиты личной информации – скажем, динамическое модификация электронного шаблона после каждой удачной авторизации, чтобы затруднить его копирование злоумышленниками.

Идентификация лиц – одна из наиболее интересных технологий нашего периода! Она делает взаимодействие со смартфоном удобнее чем когда-либо прежде, и такие приложения, как Vulkan24, могут существенно оптимизировать ваш юзерский опыт, но нуждается в осознанного отношения к вопросам безопасности личных данных и грамотного выбора подходящей модели устройства под ваши задачи.

Теперь, когда вы осведомлены, как устроена эта система внутри, – сумеете осознаннее выбирать свой следующий девайс!