메타 스마트안경 특허가 그리는 미래: 얼굴 인식부터 ‘흥미도’ 점수, 자동 편집까지

메타가 2026년 8월 13일 공개한 미국 특허 출원 US 2026/0238876 A1은 음성 명령에 답하는 수준을 넘어, 주변 사람과 상황을 해석하는 AI 카메라의 청사진을 제시한다. 카메라가 사람을 얼굴 인식으로 식별하고, 무엇을 하는지 파악한 뒤, 어떤 순간이 중요한지 판단해 관련 영상을 자동으로 구성하는 방식이다.

다만 이 문서가 곧 제품 출시를 의미하는 것은 아니다. 해당 출원은 기존 출원을 잇는 계속출원으로, 제안된 시스템을 설명한 기술 문서이지 소비자용 스마트안경에 이 기능이 실제로 탑재됐다는 발표나 배포 증거가 아니다.

특허가 설명하는 기능은 무엇인가

얼굴을 알아보고 장면을 해석한다

출원 내용에 따르면 카메라는 시야 안의 사람을 얼굴 인식으로 식별하고, 그들이 취하는 행동을 감지하며, 인식된 사람이나 사건과 촬영물을 연결할 수 있다. 사람뿐 아니라 물체, 활동, 주변 맥락을 시각적으로 이해하는 기능도 함께 구상됐다.

즉, AI 비서가 ‘내가 보는 것을 촬영해 줘’라는 요청을 처리하는 데서 그치지 않고, ‘지금 내 앞에 누가 있고 무엇을 하는지’를 해석하는 단계로 나아가는 셈이다. 문제는 카메라 앞에 있는 사람이 안경 사용자가 아닐 수 있다는 점이다.

표정·시선·행동을 분석한다

특허는 얼굴 표정, 시선 방향, 행동 같은 시각적 신호를 분석하는 방법도 다룬다. 예를 들어 상대가 착용자를 바라보는지, 특정 사건에 반응하는지, 어떤 활동에 참여하고 있는지 등을 파악해 해당 순간의 의미를 판단하는 데 활용할 수 있다.

이는 메타의 현재 판매 제품이 이미 이런 분석을 수행한다는 뜻이 아니다. 다만 회사가 AI 비서 중심의 카메라 구조에 이 같은 분석 기능을 포함할 수 있다고 기술했다는 의미다.

‘흥미도’ 또는 관련성 점수를 매긴다

출원에서 특히 눈에 띄는 부분은 사람이나 순간에 ‘흥미도(interestingness)’ 또는 관련성 점수를 부여하는 개념이다. AI 비서는 인물의 신원, 착용자와의 관계, 행동, 표정, 시선, 과거 선호도 등을 바탕으로 누구와 어떤 장면에 주목할지 결정할 수 있다.

이 점수는 무엇을 촬영하고, 보관하고, 강조하거나 생략할지를 좌우할 수 있다. 모든 프레임을 똑같이 다루는 대신, 시스템이 착용자의 경험 위에 개인화된 ‘편집 기준’을 덧씌우는 것이다. 다시 말해 AI가 무엇을 중요한 순간으로 볼지 자동으로 결정한다.

촬영물을 자동으로 편집해 맞춤형 미디어를 만든다

설명된 시스템은 인식된 사람이나 행동을 중심으로 영상을 분류하고 라벨을 붙인 뒤, 하이라이트 파일이나 개인화된 미디어를 생성할 수 있다. 사용자가 모임이나 대화, 행사의 모든 촬영본을 일일이 고르지 않아도 자동으로 편집된 짧은 영상을 받을 수 있다는 뜻이다.

제품 측면에서는 스마트 카메라가 자율적으로 사진작가이자 영상 편집자 역할을 하는 셈이다. 동시에 사생활 측면에서는 촬영과 AI 보관에 동의하지 않은 사람의 모습까지 자동으로 선별·보존할 수 있다는 문제가 생긴다.

주변 사람을 흐리게 처리해도 문제는 끝나지 않는다

특허에는 식별돼서는 안 되는 사람을 흐리게 처리하는 등 사생활 보호 기능도 포함돼 있다. 자동 카메라 시스템이 노출을 줄일 필요가 있다는 점을 문서 자체가 인식하고 있는 것이다.

하지만 흐림 처리가 실제로 효과적인 보호장치가 되려면 다음과 같은 세부 조건이 중요하다.

• 흐림 처리가 기본값으로 켜져 있을까?
• 안경 내부에서 처리되거나, 이미지가 기기를 떠나기 전에 적용될까?
• 주변 사람이 삭제를 요청하거나 분석 자체를 거부할 수 있을까?
• 얼굴이 흐려지기 전에 얼굴 인식이 먼저 이뤄질까?
• 흐려지지 않은 이미지나 생체정보 형태의 데이터는 얼마나 오래 보관될까?

최종 영상에서 얼굴이 흐려졌다고 해서 사생활 침해가 사라지는 것은 아니다. 시스템이 이미 얼굴을 감지·분석했거나 얼굴을 생체정보 템플릿으로 변환했다면, 최종 결과물과 별개로 처리 자체가 이뤄졌기 때문이다.

‘NameTag’ 관련 보도와는 어떻게 연결되나

이번 특허가 주목받는 이유 중 하나는 메타의 스마트안경 소프트웨어를 둘러싼 별도 보도와 시기가 겹치기 때문이다. 연구자들은 스마트안경과 연동되는 메타 AI 앱에서 내부적으로 ‘NameTag’라고 불린 휴면 상태의 얼굴 인식 구성요소를 발견한 것으로 전해졌다. 보도된 코드에는 얼굴 감지·인식 기능과 ‘Person recognized’라는 알림을 작동시키는 시스템이 포함돼 있었다.

이 기능은 소비자용으로 공개 출시된 상태가 아니었으며, 관련 코드도 논란이 커진 뒤 앱 업데이트에서 삭제된 것으로 보도됐다. 따라서 특허와 앱 코드에 대한 증거는 성격이 다르다. 특허가 폭넓은 기술 설계도라면, 앱 조사는 보다 구체적인 소프트웨어 구성요소를 발견했다는 주장이다. 그렇다고 해서 메타가 현재 소비자용 스마트안경에서 낯선 사람을 식별하도록 기능을 활성화했다는 뜻은 아니다.

Rank One Computing 라이선스가 보여주는 것

보도에 따르면 메타의 내부 스마트안경 개발은 얼굴 인식과 ‘생명성 감지(liveness detection)’ 기술을 보유한 Rank One Computing과의 라이선스 계약과도 연결돼 있다. 이 회사는 정부·군·법 집행기관 고객에게 기술을 공급해 온 업체로 알려졌다.

라이선스 계약만으로 메타가 해당 기술을 배포했다거나 소비자 기능에 적용했다는 결론을 내릴 수는 없다. 다만 단순히 특허에서만 가능한 가상의 개념을 넘어, 특정 생체인식 기술 업체의 기술을 평가하거나 개발에 활용했을 가능성을 보여주는 정황이다.

특허, 보도된 NameTag 코드, 외부 기술업체와의 관계를 함께 보면 메타가 웨어러블 얼굴 인식 기술을 탐색해 온 흐름은 확인할 수 있다. 그러나 신중한 결론은 여전히 제한적이어야 한다. 이 자료들은 기술적 역량과 개발 활동을 시사할 뿐, 공개적인 소비자 출시를 확인해 주지는 않는다.

메타의 과거 때문에 더 민감한 이유

메타는 과거 페이스북의 광범위한 얼굴 인식 시스템을 종료하고 10억 개가 넘는 얼굴 인식 템플릿을 삭제하겠다고 발표했다. 이후 일리노이주 이용자들이 제기한 소송에서 6억5,000만 달러를 지급하는 합의에 이르렀다고 관련 보도는 전했다.

또 2024년에는 텍사스주 법이 요구하는 승인 없이 텍사스 주민의 생체정보를 수집·사용했다는 주장과 관련해 텍사스주와 14억 달러 규모의 합의를 체결했다.

이런 전력이 있기 때문에 일상적인 안경처럼 보이는 기기에 새로운 생체인식 시스템이 들어갈 가능성은 일반 카메라 기능보다 훨씬 큰 감시를 받는다. 휴대전화로 사진을 찍는 상황은 주변 사람이 알아차릴 가능성이 있다. 반면 스마트안경은 촬영을 더 눈에 띄지 않게 만들고, 일상적인 사회적 상황에서 지속적으로 사용하기 쉽게 만들 수 있다.

촬영에서 식별·프로파일링으로 넘어가는 순간

얼굴 인식은 ‘누군가 나를 촬영하고 있을 수 있다’는 문제를 ‘촬영된 사람이 누구인지 식별하고 프로파일링할 수 있다’는 문제로 바꾼다. 에드워드 마키 상원의원실은 메타가 보유한 방대한 데이터와 스마트안경 카메라가 결합할 경우 얼굴을 이름, 직장 또는 개인 프로필과 연결할 수 있다며 스토킹, 괴롭힘, 표적 위협 위험을 경고했다.

시민권, 가정폭력, 재생산권, LGBTQ+ 권리, 이민자 지원 단체들도 메타에 스마트안경용 얼굴 인식 계획을 포기하라고 촉구했다. 가해자나 스토커 등 악의적인 행위자가 공공장소에서 사람을 몰래 식별할 수 있다는 우려에서다.

안경이라는 형태는 위험을 더 키울 수 있다. 시야 안에 들어온 사람은 기기가 촬영 중인지, AI가 얼굴을 분석하는지, 분석 결과가 나중에 대조할 수 있도록 저장되는지 알기 어렵다. 주변 사람은 카메라 앞에 들어설 때마다 생체정보 처리에 의미 있게 동의하기도 어렵다.

핵심은 ‘기능·탐색·출시’를 구분하는 것

이번 사안을 해석할 때는 다음 세 단계를 분리해야 한다.

1. 기능적 가능성: 메타의 특허는 얼굴 인식, 장면 분석, 관련성 점수, 자동 미디어 생성을 설명한다.
2. 개발·탐색 정황: 보도된 NameTag 코드와 Rank One Computing 라이선스는 구체적인 얼굴 인식 시스템을 개발하거나 검토했을 가능성을 보여준다. 다만 해당 코드는 삭제된 것으로 보도됐고, 기능도 공개 출시되지 않았다.
3. 실제 배포: 제공된 자료만으로는 메타가 낯선 사람을 실시간으로 식별하는 스마트안경을 현재 일반 소비자에게 제공하고 있다고 확인할 수 없다.

따라서 이 특허를 메타가 얼굴 인식 안경을 출시했다는 증거라고 부르는 것은 부정확하다. 반대로 보도된 소프트웨어와 기술업체 활동이 함께 거론되는 상황에서 단순한 공상에 불과한 문서로 치부하는 것도 충분하지 않다.

앞으로 이 기술들이 결합된다면 어떤 안전장치가 필요한지가 정책적 쟁점이다. 명시적 동의, 엄격한 보관 기간 제한, 실효성 있는 주변인 보호, 삭제를 요구할 수 있는 통제권, 민감한 용도에 대한 명확한 제한이 필요하다. 메타가 이런 시스템을 실제로 도입할지, 도입한다면 어떻게 운영할지 설명하기 전까지 이번 특허는 감시 시나리오가 이미 현실이 됐다는 확인서라기보다, 웨어러블 AI 카메라가 향할 수 있는 방향을 보여주는 경고에 가깝다.