얼굴 역검색이란?
얼굴 역검색은 같은 사람의 얼굴이 온라인 다른 어디에 등장하는지 찾아 줍니다. 사진 한 장을 주면 그 안의 얼굴을 숫자 기술자로 바꾼 뒤, 공개적으로 접근 가능한 페이지의 얼굴들과 대조합니다. 대조에 쓰는 것은 오직 얼굴의 기하 구조이며, 파일명이나 설명문, 이미지 주변의 텍스트는 전혀 사용하지 않습니다.
최종 검토
핵심만
- 입력은 얼굴이지 키워드가 아닙니다. 이름으로 검색할 방법은 없습니다.
- 얼굴의 기하 구조를 비교하므로 다른 사진, 다른 나이, 다른 조명에서도 같은 사람을 찾습니다.
- 이미지 역검색은 파일의 사본을 찾고, 얼굴 검색은 사람을 찾습니다.
- 일치는 확인해 볼 단서일 뿐 신원의 증거가 아닙니다.
- 공개적으로 접근 가능한 페이지만 검색 대상입니다. 로그인 뒤에 있는 것은 아닙니다.
얼굴 역검색은 어떻게 작동하나?
먼저 얼굴 검출기가 사진에서 얼굴을 찾아 각도와 크기를 정규화합니다. 이어서 인식 모델이 그 얼굴을 임베딩으로 바꿉니다. 임베딩은 두 눈 사이의 상대적 거리나 턱선의 형태처럼 이목구비 사이의 기하학적 관계를 숫자로 기술한 값입니다. 이런 관계는 조명, 표정, 머리 모양, 나이가 달라져도 대체로 안정적이어서 몇 년 차이 나는 사진 속 같은 사람도 대조할 수 있습니다. 이 임베딩을 공개 페이지로 구축한 색인과 비교해 가장 가까운 결과를 유사도 점수순으로 돌려줍니다.
- 검출: 얼굴을 찾고 각도와 크기를 보정한다.
- 부호화: 얼굴을 숫자 임베딩으로 변환한다.
- 비교: 그 임베딩과 색인 속 임베딩 사이의 거리를 잰다.
- 순위화: 가장 가까운 결과를 유사도 점수와 함께 반환한다.
이미지 역검색과 무엇이 다른가?
이미지 역검색은 당신의 이미지를 찾고, 얼굴 검색은 당신의 얼굴을 찾습니다. 사진을 이미지 역검색 엔진에 올리면 그 파일 자체의 사본과 유사본, 즉 같은 사진이 재게시되거나 잘리거나 크기가 바뀐 것들을 찾아 줍니다. 같은 사진을 얼굴 검색 엔진에 주면 같은 사람이 찍힌 다른 사진들을 찾아 주는데, 원본과 전혀 닮지 않았을 수도 있습니다. 이 차이가 어떤 도구로 답이 나오는지를 가르며, 둘은 서로 대체할 수 없습니다.
얼굴 역검색은 어디에 쓰나?
공통점은 온라인의 어떤 사람이 자신이 주장하는 그 사람이 맞는지 확인하거나, 내 얼굴이 어디까지 흘러갔는지 알아보는 것입니다. 이름은 쉽게 바꿀 수 있지만 얼굴은 그렇지 않기 때문에, 이름 검색으로는 답할 수 없는 질문에 답합니다.
- 소개팅이나 소셜 프로필이 실재하는 사람의 것인지 확인하기.
- 내 사진이 내가 관리하지 않는 계정에 쓰이고 있는지 알아보기.
- 공개된 직업 프로필이 진짜인지 확인하기.
- 사진이나 영상을 실제로 그 안에 있는 사람에게 귀속시키기.
정확도는 어느 정도인가?
정확도는 검색 엔진보다 제공하는 사진에 훨씬 크게 좌우됩니다. 선명하고 정면을 향하며 조명이 충분하고 가려지지 않은 얼굴 하나만 담긴 사진이 최선입니다. 단체 사진, 강한 필터, 선글라스, 마스크, 극단적인 각도, 낮은 해상도는 모두 임베딩의 품질을 떨어뜨리고 그만큼 대조 결과도 나빠집니다. 신뢰도 기준을 밑도는 점수는 가능성 있는 일치를 뜻하며, 가능성 있는 일치를 확정된 신원으로 취급하는 것이 이런 도구를 오용하는 가장 흔한 방식입니다.
얼굴 역검색이 할 수 없는 일은?
신원을 확정할 수 없으며, 이는 어떤 얼굴 역검색 엔진도 마찬가지입니다. 공개적으로 접근 가능한 것만 읽으므로 비공개 계정, 비공개 그룹, 로그인이 필요한 공간은 보이지 않습니다. 정부, 의료, 금융, 범죄 기록을 조회하지 않고, 이름이나 전화번호로 검색할 수 없으며, 검색 대상이 된 사람에게 알리지도 않습니다.
얼굴 역검색은 합법인가?
어디에 있는지, 결과를 어떻게 쓰는지에 달려 있습니다. 얼굴 인식에 대한 규제는 관할권마다 크게 다릅니다. 얼굴 데이터를 동의가 필요한 민감한 생체 데이터로 다루는 곳도 있고, 검색 자체가 아니라 이후의 사용을 규제하는 곳도 있습니다. 이미 대화 중인 상대를 확인하거나 내 사진의 오남용을 찾는 일은, 낯선 사람에 대한 프로필을 만드는 일과 성격이 다릅니다.
출처
- Face Recognition Vendor Test (FRVT) 1:1 Verification, National Institute of Standards and Technology
- Face Recognition Vendor Test programme, National Institute of Standards and Technology