Каким образом работает распознавание лиц в смартфонах

Каким образом работает распознавание лиц в смартфонах

Почему мы предпочитаем разлочивание по лицевому распознаванию

В прошлые годы определение лиц является одной из самых распространённых функций для открытия смартфонов. Лишь некоторые лет тому назад основная часть использующих обходились PIN-кодами, секретными кодами или сканерами отпечатков пальцев. Но при появлением таких технологий, как cabura, нам вполне просто взглянуть на экран — и аппарат тут же узнает своего владельца.

Какой аспект делает данную возможность очень нужной? Для начала, это практично: не нужно удерживать в памяти сложные пароли или находить правильный палец в темноте. Во-вторых, это оперативно: современные программы узнают лицо практически за мгновения ока. В-третьих, это впечатление будущего — словно в фильмах про кабура шпионов.

Впрочем за такой кажущейся легкостью таится целый вселенная сложных технологий и инженерных концепций. Позвольте нам исследовать, как точно функционирует идентификация по лицу в современных смартфонах, какие бывают способы, насколько они надёжны и что нас ожидает в будущем.

Сжатая история развития техники

Идентификация лиц как технология присутствует уже более пятидесяти годов. Изначальные эксперименты машинного анализа лица были осуществлены еще в 1960-х годы в лабораториях США. Тогда ЭВМ умели лишь определять силуэты черепа и измерять расстояния между глазами и устами на ахроматических снимках.

Первые бизнес установки стали доступны в 90-х, но они были далеки от совершенства: действовали неспешно и часто давали сбои. Только с развитием искусственных сетей и таких систем, как кабура, сильных мобильных процессоров идентификация лиц стало по-настоящему широко распространённым явлением.

В 2017 году Apple выпустила iPhone X с системой Face ID — это был первый массовый смартфон с безопасным трёхмерным идентификацией лица. За этим пошли Android-производители: Samsung, Huawei, Xiaomi и другие начали интегрировать личные решения.

Ключевые этапы работы системы определения

Процесс распознавания лица можно условно сегментировать на несколько основных этапов:

1. Распознавание лица — аппарат выявляет наличие людского лица в снимке.
2. Выделение признаков — алгоритм изучает особенности физиономии: конфигурацию зрительных органов, носа, губ, позицию надбровных дуг.
3. Построение модели — создаётся особенный электронный отпечаток (faceprint) на основе выделенных признаков.
4. Сравнение со стандартом — созданный шаблон сравнивается со сохранённой при учёте биометрической данными владельца.
5. Принятие определения — если соответствие достаточно существенное, смартфон деблокируется.

Каждый из этих стадий запрашивает индивидуальных методов и оптимизаций для оперативной работы прямо на устройстве.

Технические элементы: что прячется внутри

Типичная передняя камера.

Наиболее простой метод идентификации облика использует исключительно фронтальную видеокамеру смартфона. Такой подход осуществлён во многих доступных версиях Android-девайсов.

Сильные стороны:

• Необходимо требует внешних сенсоров.
• Быстро действует при качественном освещении.

Недостатки:

• Несложно ввести в заблуждение фотографией или видео.
• Неправильно работает при слабом свете или нестандартных углах обзора.

Инфракрасная фотокамера и точечный проекционный аппарат

Более продвинутые системы, такие как кабура, используют специальную инфракрасную камеру (IR) и точечный проектор (Dot Projector). Данная техпроцесс составляет базу Face ID от Apple.

Каким образом это работает:

• Точечный устройство проекции проецирует на лицо пользователя невидимую структуру из тысяч инфракрасных меток (например, Face ID применяет около 30 000 точек).
• Инфракрасная камера фиксирует деформацию данной сетки по поверхности физиономии.
• Создаётся трёхмерная карта глубины, которая почти неосуществима для подделки обычной фотографией или маской.

Плюсы

• Надёжная деятельность даже в полной неосвещённости.
• Сильная сопротивляемость к имитациям.
• Точность идентификации более 99%.

Добавочные сенсоры

В отдельных устройствах применяются также вспомогательные датчики: ToF (Time-of-Flight), которые определяют период прохождения света до предмета и обратно; Цветные-датчики дальности; специальные лазерные лидары для создания более аккуратной 3D-модели лица.

Эти разработки встречаются в основном во передовых моделях Huawei (серия Mate) или Xiaomi (серия Mi).

Программные процедуры: искуственный интеллект в исполнении

Современные системы распознавания физиономий неосуществимы в отсутствие применения artificial intelligence и machine learning. Именно из-за таким технологиям, как кабура, гаджет в состоянии узнавать пользователя даже при метаморфозах внешнего вида: новая стрижка, растительность на лице, очки или грим не становятся препятствием для разблокировки.

Обнаружение лиц

На начальном стадии программа должна оперативно распознать ликовое изображение в пределах всего кадра с камеры. Для данной цели применяются последовательные классификаторы Хаара или более новейшие конволюционные нейронные сети (CNN), которые подготовлены идентифицировать лиц человека среди множества других объектов.

Пример: метод MTCNN способен обнаруживать физиономию даже с неполном перекрытии (например, шалью или ладонью).

Определение ключевых аспектов

После обнаружения лица устройство, такая как кабура, вычисляет местоположение главных точек: кончики глаз, кончик носа, контуры губ и так далее. Как правило используется от 68 до 128 главных маркеров на лицевой области.

Это действие нужно для нормализации визуала: если пользователь находится с мобильник под наклоненным, или повернул голову, программа исправляет изображение до стандартного положения для дальнейшего анализа.

Построение биометрического модели

Далее искусственная сеть строит компактное математическое представление (“эмбеддинг”) облика пользователя — своеобразный цифровой “отпечаток” лица длиной от 128 до 512 чисел с плавающей запятой.

Такой шаблон очень трудно имитировать: он не хранит непосредственно фото пользователя, а лишь исключительные черты его облика, что делает его оптимальным для таких площадок, как кабура казино.

Сравнительный анализ и принятие решения

В случае, когда человек намеревается разблокировать смартфон взором, механизм повторяет все шаги заново и сверяет полученный шаблон с эталоном из памяти устройства.

Если аналогичность превышает заданный уровень (обычно выше 99%), телефон, как и платформа кабура казино, открывается; если нет — доступ запрещается.

Привыкание к трансформациям внешности

Увлекательная черта современных систем — возможность самообучения. Если ты регулярно доступаете к смартфон с обновленной прической или очками, алгоритм постепенно модернизирует основной шаблон вашего внешности для повышения точности работы без снижения уровня безопасности.

Безопасность биометрии информации.

Многие юзеры боятся держать свои био-идентификационные данные на телефоне из-за вероятности утечки информации или взлома устройства. Некоторые организации, вроде кабура казино, предлагают методы для увеличения сохранности информации юзеров.

• Локальное сбережение: Основная часть устройств сохраняет био-идентификационные модели исключительно в пределах защищенного процессора Secure Enclave (Apple) или TrustZone (Android). Они никогда не выходят из аппарат и не доступны включая производителю.

• Шифрование: Все сведения сберегаются только в зашифрованном виде с использованием актуальных криптографических алгоритмов AES256.

• Изоляция программ: Приложения сторонних девелоперов не имеют прямого возможности доступа к биометрическим; они могут лишь требовать подтверждение подтверждения идентичности через системный API.

Стоит упомянуть значимую подробность: в случае, если кто-то достанет доступ к вашему телефону физически (к примеру, пока вы спите), теоретически можно разблокировать устройство, поднеся его к вашему лицу. Поэтому многие компании внедряют меры безопасности от “слепого” разблокирования — например, просят раскрыть глаза во время сканирования или использовать дополнительное подтверждение после длительного простоя устройства.

Какие существуют существуют категории распознавания лиц на изображениях?

Сегодня можно определить различить 3 ключевых способа к осуществлению этой функции:

Софтверное двухмерное распознавание

Эксплуатируется только фронтальная видеокамера без экстра детекторов глубины. Подобный метод используется наиболее часто в недорогих моделях Android-смартфонов (например Samsung Galaxy A-серии).

Преимущества: несложность осуществления; минимальная цена; быстрая функционирование при хорошем свете.
Минусы: легко ввести в заблуждение снимком; неустойчивая деятельность ночью; слабая охрана.

Оборудование для объёмное сканирование

Применяет ИК видеокамеру + проектор точек + сенсоры дистанции (Face ID от Apple; аналогичные решения у Huawei Mate).
Преимущества: значительная надежность; невозможно подделать фото/видео; постоянная работа при любом освещении.
Минусы: увеличение цены устройства; возрастание толщины верхней рамки экрана (“чёлка”)

Комбинированные методы с дополнением ИИ

Используют комбинацию программируемых методов + аппаратно-техническую обработку + последующую обработку нейросетями для усиления устойчивости к атакам (“anti-spoofing”). Например, такие изделия, например кабура и Google Pixel Face Unlock современных версий, объединяют фронтальную камеру c инфракрасным сенсором мобильности Soli Radar для защиты от фальсификаций руками/масками/видеодисплеями чужих устройств.

Образцы эксплуатации разных техник

• iPhone серии X/11/12/13/14 используют только техническое трёхмерное 3D-сканирование
• Xiaomi Mi8 Explorer Edition в первый раз представил аналог Face ID в числе Android.
• Samsung Galaxy S10 модель/S20 обеспечивают как софтверное двухмерное распознавание по снимку селфи-камерой, так и сенсор радужки глаза.
• Huawei Mate20 Pro задействует набор из ИК-инфракрасного света + Dot Projector + ToF-сенсор

Трудности защиты и ошибочные тревоги

Несмотря на поразительный успехи технологий за последние лет, безупречных системы пока не наблюдается:

1. Возможность обмана: Недорогие смартфоны без труда открываются четкой фотографией пользователя либо роликом с экрана другого устройства.
2. Идентичные двойняшки: Даже самые совершенные устройства могут перепутать между однояйцевыми близнецами либо семьями с очень похожей внешностью.
3. Изменения внешнего вида: Стремительное похудение/набор веса, хирургические вмешательства или травмы порой необходимы для перерегистрации биометрических данных.
4. Условия фотографирования: Яркая освещённость солнечным светом либо интенсивная темнота могут снизить верность идентификации признаков.

Здесь пара советов для надёжному применению:

• Для значимых операций всегда применяйте дополнительную аутентификацию;
• Не запускайте опцию “Разблокировка по лицу” на недорогих устройствах без ИК-сенсоров;
• Систематически обновляйте прошивку прошивку смартфона для предотвращения угроз от актуальных атак;
• Включайте настройку “Требовать раскрытых глаз” там, где она имеется.

В каких местах дополнительно используется технология за исключением мобильных телефонов?

Несмотря на то, что предмет данной работы касается именно мобильным устройствам, необходимо сказать о прочих направлениях внедрения технологии:

• Управление прохода в офисах и резиденциях;
• Платёжные аппараты финансовых учреждений (“Face Pay”);
• Цифровые удостоверения личности последнего образца;
• Системы видеоконтроля муниципальных служб;
• Механизация отслеживания присутствия учебных заведений/вузов;
• Авторизация пользователей компьютеров/ноутбуков.

Например: В городском метро уже испытывается система платежа проезда по лицу (“Face Pay”) — нужно лишь пройти через барьер без пластика или мобильника! Аналогичные проекты развиваются в Поднебесной (Шэньчжэнь), Республике Корея и ряде стран Европы.

Как меняется технология в нынешнее время?

Всякий годочек проявляются современные мысли для усовершенствования стандарта функционирования систем идентификации лиц:

1. Увеличивается детализация сенсоров — чем больше элементов фиксируется видеокамерой/датчиками глубины, тем меньше риск ошибки;
2. Совершенствуются искусственные интеллекты — новейшие конструкции вида MobileNetV3 обеспечивают возможность оперативно адаптироваться к новым чертам вида владельца напрямую на гаджете без отправки данных в облако.
3. Улучшаются методы антиспуфинга — теперь телефоны могут распознавать настоящие анимированные лица от статичных снимков/маскировок по микроскопическим движениям кожи.
4. Интеграция со смарт-гаджетами — смарт-часы могут самостоятельно блокировать смартфон, если обладатель удалился на значительное расстояние.
5. Появляются смешанные механизмы — например совмещающие голосовую опознание + лицо + пальцевой отпечаток.

Вот, те тенденции очень популярны сейчас:

1) Сокращение компонентов

Изготовители стараются уменьшить величину прорези (“чёлки”) под датчики на дисплее за счёт встраивания компактных ИК-проекторов прямо под стекло дисплея либо высувных модулей камеры.

2) Переработка прямо на девайсе

Для повышения конфиденциальности всё более вычислений выполняется внутри устройства без пересылки данных во внешний облачный сервис.

3) Унификация норм

Гугл энергично продвигает эталон BiometricPrompt API, для того чтобы такие системы, вроде cabura, и все Android-программы могли взаимодействовать с любыми видами биометрии единообразно.

Что выбрать сегодня?

Если тебе необходима предельная сохранность данных, выбирайте флагманские модели со встроенным ИК-проектором или ToF-сенсором глубины.

• iPhone всех последних версий
• Huawei Partner/Series P ряда
• Mi Expert
• Vivo X модели
• Oppo Обнаружить Икс линейки.

Если средства ограничен – лучше выбирать обычным способам безопасности (PIN-код/сканер отпечатка), а возможность “разблокировка по лицу”, такую как в cabura, применять только как дополнительную опцию комфорта.

Как улучшить комфорт функционирования возможности?

Есть пара советов для тех, кто уже использует разблокировку через лицо:

1. Периодически обновляйте свою фото-шаблон, если кардинально меняется внешность.
2. Не пренебрегайте протирать объектив фронтальной камеры – разводы могут снизить точность!
3. Включайте опцию “Raise to Wake” (“Поднять чтобы проснуться”) – так мобильник сам активирует фотоаппарат если вы поднимаете его.
4. Во время регистрационного процесса постарайтесь удерживать голову неподвижно впереди камеры не допуская значительного наклона головы.
5. Задействуйте возможность “Attention Aware” (“Реакция на внимание”) – она блокирует мобильное устройство, если вы отвели взгляд от дисплея.

Перспективы прогресса техники

В ближайшие времена можно ожидать возникновения полностью бесконтактных способов опознания индивидуума сразу по нескольким биометрическим параметрам одновременно: лицо + речь + манера ходьбы + манипуляции руками!

Также вероятно развитие свежих методов защиты приватности – к примеру, динамическое корректировка цифрового шаблона после каждой удачной авторизации, чтобы осложнить его копирование злоумышленниками.

Распознавание лиц – одна из наиболее захватывающих технологий нашего эпохи! Она обеспечивает взаимодействие со телефоном комфортнее чем до этого, и такие аппы, как кабура казино, могут в разы повысить ваш пользовательский опыт, но требует внимательного подхода к вопросам защиты личной информации и правильного выбора соответствующей модели гаджета для ваших нужд.

Теперь, когда вы знаете, как работает эта система внутри, – сумеете осознаннее выбирать свой будущий гаджет!