얼굴 교체 AI는 어떻게 작동할까? 딥페이크의 원리 쉽게 이해하기
사진 한 장으로 얼굴을 바꾸는 AI가 어떤 원리로 움직이는지, 왜 정면 고화질 사진이 위험한지 기술 용어 없이 설명해요.
몇 년 전만 해도 얼굴 합성은 전문가가 수백 장의 사진과 며칠의 시간을 들여야 하는 작업이었어요. 지금은 사진 한 장과 몇 초면 그럴듯한 결과가 나와요. 무엇이 바뀌었는지 알면, 내 사진을 어떻게 관리해야 하는지도 자연스럽게 보여요.
1단계: 얼굴을 찾고, 기준점을 잡아요
얼굴 교체 AI는 먼저 사진에서 얼굴이 어디 있는지 찾아요. 그다음 눈꼬리, 코끝, 입꼬리, 턱선 같은 기준점 수십 개를 찍어 얼굴의 방향과 표정을 파악해요. 얼굴이 정면을 향하고 크게 찍혀 있을수록 이 단계가 정확해지고, 결과도 자연스러워져요.
2단계: 얼굴을 '숫자로 된 특징'으로 바꿔요
AI는 얼굴을 그림 그대로 기억하지 않아요. 대신 "이 사람을 다른 사람과 구별하게 해 주는 특징"을 수백 개의 숫자 묶음으로 바꿔요. 얼굴 인식으로 휴대폰 잠금을 푸는 기술과 비슷한 원리예요. 이 숫자 묶음에는 표정이나 조명 같은 정보는 거의 없고, "누구인지"에 해당하는 정보만 담겨요.
3단계: 다른 사진의 얼굴 위에 덧입혀요
마지막으로, 바꾸고 싶은 사진(대상 사진)의 표정·각도·조명은 그대로 두고 "누구인지"에 해당하는 특징만 원하는 사람의 것으로 바꿔 다시 그려요. 피부색과 그림자를 주변에 맞게 다듬으면 사람 눈으로는 구별하기 어려운 결과가 나와요.
왜 사진 한 장으로도 가능해졌을까요?
예전 방식은 한 사람의 얼굴을 바꿀 때마다 그 사람의 사진 수백 장으로 AI를 새로 학습시켜야 했어요. 요즘 도구는 이미 수많은 얼굴로 미리 학습되어 있어서, 새로운 사람의 사진을 한 장만 넣어도 2단계의 "특징 숫자"를 바로 뽑아낼 수 있어요. 여기에 이미지 생성 AI가 더해지면서 얼굴만 바꾸는 것이 아니라 몸, 옷, 배경까지 새로 만들어 내는 것도 쉬워졌어요.
어떤 사진이 특히 위험할까요?
- 정면에서 찍은 사진: 기준점이 모두 보여서 특징을 뽑기 쉬워요.
- 얼굴이 크고 선명한 고해상도 사진: 프로필 사진, 증명사진, 졸업사진이 대표적이에요.
- 여러 각도의 사진이 한곳에 모인 계정: 각도가 다양할수록 더 자연스러운 합성물을 만들 수 있어요.
- 누구나 볼 수 있는 공개 게시물: 수집 프로그램이 자동으로 모아 갈 수 있어요.
보호 노이즈는 어느 단계를 막을까요?
담이 사진에 넣는 보호 노이즈는 주로 1~2단계를 노려요. 사람 눈에는 거의 보이지 않지만, AI가 얼굴을 찾거나 "특징 숫자"를 뽑을 때 엉뚱한 값이 나오도록 만드는 원리예요. 그러면 3단계에서 만든 결과가 어색해지거나 다른 사람처럼 보이게 돼요.
다만 모든 AI에 똑같이 통하지는 않아요. 새로 나온 모델이나, 사진을 크게 줄이고 다시 압축하는 과정에서는 효과가 약해질 수 있어요. 자세한 내용은 보호 노이즈의 효과와 한계에서 볼 수 있어요.
정리하면
얼굴 교체 AI는 "얼굴을 찾고 → 특징을 뽑고 → 다른 사진에 덧입히는" 세 단계로 움직여요. 정면 고화질 사진을 공개적으로 많이 올릴수록 이 과정이 쉬워져요. 공개 범위를 줄이고, 꼭 올려야 하는 사진에는 보호 처리를 더하는 것이 현실적인 대비 방법이에요.