Что такое обратный поиск по лицу?
Обратный поиск по лицу находит другие места в интернете, где встречается лицо того же человека. Вы даёте одну фотографию, сервис превращает лицо в числовой дескриптор и сравнивает его с лицами на публично доступных страницах. Сопоставление идёт только по геометрии лица и никогда по имени файла, подписи или тексту рядом с изображением.
Последняя проверка
Коротко
- На вход подаётся лицо, а не ключевое слово. Искать по имени невозможно.
- Сравнивается геометрия лица, поэтому один и тот же человек находится на другой фотографии, в другом возрасте и при другом освещении.
- Поиск по картинке находит копии вашего файла. Поиск по лицу находит человека.
- Совпадение даёт повод для проверки, а не доказательство личности.
- Доступны для поиска только публично открытые страницы. Ничего из того, что за логином.
Как работает обратный поиск по лицу?
Сначала детектор находит лицо на вашей фотографии и нормализует его по углу и масштабу. Затем модель распознавания превращает его в эмбеддинг: набор чисел, описывающий геометрические отношения между чертами лица, например относительное расстояние между глазами и форму линии челюсти. Эти отношения остаются достаточно устойчивыми при смене освещения, выражения лица, причёски и возраста, поэтому одного и того же человека можно сопоставить на снимках, сделанных с разницей в годы. Эмбеддинг сравнивается с индексом, построенным по публично доступным страницам, и ближайшие совпадения возвращаются с оценкой сходства.
- Обнаружение: найти лицо и скорректировать угол и масштаб.
- Кодирование: превратить лицо в числовой эмбеддинг.
- Сравнение: измерить расстояние до эмбеддингов в индексе.
- Ранжирование: вернуть ближайшие совпадения с оценкой сходства.
Чем это отличается от поиска по картинке?
Поиск по картинке ищет ваше изображение. Поиск по лицу ищет ваше лицо. Загрузите фотографию в систему поиска по картинке, и она найдёт копии и почти копии именно этого файла: тот же снимок, перепубликованный, обрезанный или изменённый по размеру. Дайте ту же фотографию системе поиска по лицу, и она найдёт другие снимки того же человека, которые могут совсем не походить на исходный. Эта разница определяет, какой инструмент ответит на ваш вопрос, и заменить один другим нельзя.
Для чего используют обратный поиск по лицу?
Общее у всех случаев одно: проверить, что человек в сети действительно тот, за кого себя выдаёт, или выяснить, куда попало ваше собственное лицо. Он отвечает на вопросы, недоступные поиску по имени, потому что имя легко сменить, а лицо нет.
- Проверить, принадлежит ли анкета на сайте знакомств или в соцсети реальному человеку.
- Выяснить, используются ли ваши фотографии в аккаунтах, которыми вы не управляете.
- Убедиться, что публичный профессиональный профиль подлинный.
- Соотнести фотографию или видео с человеком, который на них действительно изображён.
Насколько это точно?
Точность гораздо сильнее зависит от предоставленной фотографии, чем от самой системы. Лучший случай это чёткое фронтальное хорошо освещённое изображение одного открытого лица. Групповые снимки, сильные фильтры, солнцезащитные очки, маски, экстремальные ракурсы и низкое разрешение ухудшают эмбеддинг, а вместе с ним и результат сопоставления. Оценка ниже порога уверенности означает возможное совпадение, и восприятие возможного совпадения как подтверждённой личности — самый распространённый способ неправильно применить такие инструменты.
Чего обратный поиск по лицу не делает?
Он не подтверждает личность, и этого не делает ни одна система обратного поиска по лицу. Он читает только публично доступное, поэтому закрытые аккаунты, приватные группы и всё, что находится за логином, для него невидимы. Он не обращается к государственным, медицинским, финансовым или судебным реестрам, не умеет искать по имени или номеру телефона и не уведомляет человека о том, что его искали.
Законен ли обратный поиск по лицу?
Это зависит от того, где вы находитесь и что делаете с результатом. Распознавание лиц регулируется в разных юрисдикциях очень по-разному: где-то данные о лице считают чувствительными биометрическими данными, требующими согласия, где-то регулируют последующее использование, а не сам поиск. Проверить человека, с которым вы уже общаетесь, или найти случаи неправомерного использования собственных фотографий совсем не то же самое, что собирать досье на незнакомца.
Источники
- Face Recognition Vendor Test (FRVT) 1:1 Verification, National Institute of Standards and Technology
- Face Recognition Vendor Test programme, National Institute of Standards and Technology