Face Swap이란? 얼굴 교환을 넘어 사진 표현을 바꾸는 AI 기술 Face Swap의 실력

Face Swap이란? | 杉山宣嗣

최근、'Face Swap(페이스 스왑)'이라는 말을 들을 수 있는 기회가 늘어났습니다.。

SNS에서는 유명인의 얼굴을 다른 사람으로 바꾸거나、자신의 얼굴을 영화의 주인공으로 하거나 하는 동영상이 화제가 되고 있습니다。

그 때문에、많은 사람들이 얼굴 스왑을 "얼굴을 바꾸는 놀이 기술"이라고 생각합니다.。

물론 그것도 실수가 아니다。

그러나 실제로 사용해 보면、Face Swap의 진정한 가치는 다른 곳에。

그것은、

"사람을 다른 사진 세계로 이동시킬 수 있습니다"

라는 점입니다。

이것은 단순한 얼굴 교환과는 전혀 다른 이야기입니다.。

그리고、이 변화는 사진 표현과 비주얼 제작에 큰 영향을 미치기 시작。


Face Swap이란?

Face Swap이란?、AI를 사용하여 이미지와 동영상의 얼굴을 다른 사람의 얼굴로 대체하는 기술입니다.。

기존에도 Photoshop 등으로 얼굴을 합성하는 것이 가능했습니다.。

그러나 자연스러운 마무리를 위해서는 고급 기술이 필요했습니다.。

  • 얼굴 각도
  • 표현
  • 빛의 방향
  • 피부색
  • 그림자

이것들을 미세하게 조정하지 않으면 부자연스러워집니다.。

그런데 현재의 AI는、

  • 얼굴 방향
  • 표현
  • 조명
  • 피부질

등을 자동으로 분석、놀랍도록 자연스럽게 얼굴을 바꿀 수 있습니다.。

몇 년 전이라면 전문가가 아니면 어려웠습니다.、이제 누구나 쉽게 할 수 있습니다.。


얼굴 스왑은 얼굴 교환 기술이 아니다.

여기가 중요한 포인트。

얼굴 스왑을 사용하기 전에 나는、

「얼굴을 바꾸는 기술」

라는 인식밖에 없었。

그러나 실제로 검증을 계속하는 동안、또 다른 가능성이 보였다.。

Face Swap에 의해 가능하게 되는 것은、

얼굴을 바꾸는 대신、인물을 다른 사진 세계로 이동시키는 것

입니다.。

예를 들어 한 여자가 있다고。

그 여자를、

  • 꽃밭
  • 해변
  • 파리의 길거리
  • 숲
  • 미래 도시

같은 다른 세계에 존재할 수 있습니다.。

게다가 단순한 콜라주가 아닙니다.。

그 세계에 처음부터 존재했던 것 같은 자연스럽게 배치할 수 있게 되어 왔습니다.。

이것은 기존의 사진 합성과는 크게 다른 변화。


실은 나도 Face Swap의 연구를 하고 있었다

내가 SNS 등에서 공개했던 '모델과 꽃' 시리즈가。

언뜻 보면 꽃을 테마로 한 비주얼 작품이지만、실은 또 다른 목적도 있었습니다。

그것은、

Face Swap의 가능성을 검증하는 것

です。

내가 알고 싶었던 것은、

「얼굴을 교환할 수 있을까」

아니。

알고 싶었던 것은、

다른 사진 세계에서 같은 인물을 얼마나 자연스럽게 존재시킬 수 있는지

라는 것이었습니다.。

꽃의 세계、환상적인 세계、현실에는 존재하지 않는 공간。

거기에 같은 인물을 배치했을 때、사람은 위화감없이 받아 들일 것인가?。

AI는 어디까지 자연스러운 표현을 실현할 수 있는지。

그런 실험이기도했습니다.。


옛날이라면 힘들었던 작업

이 이야기를 듣고、

"옛날부터 합성 사진은 있었던 건가?"

생각하는 사람도있을 것입니다.。

그대로。

광고 사진의 세계에서는 옛날부터 합성이 이루어졌습니다.。

그러나 작업량이 다릅니다.。

예、

남국의 해변에서 촬영한 것 같은 비주얼을 만들고 싶습니다.。

예전이라면、

  • 현지에서 촬영
  • 스튜디오에서 인물 촬영
  • Photoshop에서 자르기
  • 합성하다
  • 빛을 맞추다
  • 색을 맞추다

라는 공정이 필요했습니다.。

시간과 비용이 든다.。

게다가 자연스럽게 보여주기 위해서는 경험과 기술이 필요했습니다.。

그런데 현재는、

AI로 만든 세계나 다른 사진에 대해 Face Swap을 하는 것만으로、상당히 높은 완성도를 얻을 수 있는 케이스가 증가하고 있습니다。

기술적인 장애물이 크게 떨어졌습니다.。


Face Swap과 생성 AI를 결합하면 무슨 일이 일어나는지

Face Swap이 정말 재미있는 것은 생성 AI와 결합했을 때。

먼저 생성 AI로 배경과 세계관을 만듭니다.。

예、

  • 거대한 꽃으로 둘러싸인 공간
  • 하늘에 떠 있는 도시
  • 미래의 도시
  • 신비한 숲

등。

그、얼굴 스왑으로 사람의 얼굴을 바꿉니다.。

그러면、

"그 사람이 실제로 그 자리에 있었다"

같은 사진이 완성됩니다.。

물론 현실에는 그 자리가 존재하지。

그러나 시각적으로는 매우 자연스럽。

이것은 전통적인 사진 표현에 없었던 새로운 영역이라고 말할 수 있습니다.。


일반인에게도 친숙한 기술이 된다

Face Swap은 광고나 크리에이티브 업계만의 기술이 아닙니다.。

앞으로는 일반 사용자에게도 퍼질 것입니다.。

예、

여행지에서 촬영한 사진이 없어도、

자신을 전세계 관광지에 배치할 수 있습니다.。

가족사진 수정에도 사용되。

집합 사진에서 표정이 좋았던 얼굴만 사용할 수 있습니다.。

프로필 사진을 만드는 데에도 사용할 수 있습니다.。

이미 동영상의 페이스 스왑도 빠르게 진화하고 있습니다.。

몇 년 후 많은 사람들이 의식하지 않고 사용하는 기술이 될 수 있습니다.。


Face Swap은 사진의 가치를 없애는가?

Face Swap이 진화하면、

「사진의 가치가 없어지는 것이 아닌가」

라는 목소리도 있습니다.。

그러나 나는 그렇게 생각하지 않는다.。

왜냐하면 Face Swap은 사진 자체를 부정하는 기술이 아니기 때문입니다.。

오히려、

  • 촬영된 얼굴
  • 촬영된 표정
  • 촬영된 인물

다른 곳에서 활용하는 기술입니다.。

사진이 불필요해지는 대신、

사진 사용법이 바뀐다。

그렇게 생각하는 것이 실태에 가까울 것입니다.。


Face Swap의 주의점

반면에 주의해야 할 점도 있습니다.。

Face Swap은 매우 강력한 기술입니다.。

본인의 허락 없이 얼굴을 이용하거나、실제로는 존재하지 않는 사건을 진짜처럼 보이거나 하는 것도 가능합니다。

그 때문에、

  • 본인의 권리를 존중하다
  • 오해를 초래하는 사용법을 하지 않는다
  • 스푸핑에 사용하지 않음

같은 고려 사항이 필수적입니다.。

기술 자체에는 선악이 없습니다.。

중요한 것은 사용법。

Face Swap은 사람을 속이는 것이 아니라、새로운 표현과 커뮤니케이션을 위해 사용되어야 한다.。


요약

얼굴 스왑은 단순히 얼굴 교환 기술로 언급되는 AI 기술입니다.。

그러나 실제로는、그 이상의 가능성을 가지고。

사람을 다른 사진 세계로 이동。

현실에는 존재하지 않는 공간에 자연스럽게 존재。

그리고 사진 표현의 폭을 크게 넓히다。

나 자신、이 가능성을 탐구하기 위해 다양한 실험을 계속해 왔습니다.。

Face Swap은 아직 개발 도상 기술이지만、그 진화 속도는 놀라울 정도로 빨라지고。

몇 년 후에는 "얼굴 교환 앱"이라는 인식이 아닙니다.、사진이나 영상을 만들기 위한 당연한 기술로 사용되고 있을지도 모릅니다。

그 변화는 이미 시작。

▶︎ [AI 뷰티 비주얼에 제3자를 넣는 어려움]

▶︎ [모델 & 꽃 프롬프트 기사 일람]