가상인간, 버추얼 인플루언서 체험이 가능하다는 APP "카멜로(KAMELO)"

 

"클레온(klleon)"이라는 업체인데요, 이 회사는 종편 MBN의 20대 대통령 선거 개표 방송에 3D 그래픽 기술을 제공하여 두 명의 후보자들을 딥휴먼 기술로 재현하기도 했었습니다. (연기자들이 연기하고 얼굴을 갖다 붙이는 방식)

 

 

 

MBN 개표 안내 방송 화면 캡처

 

 

이 회사가 보유하고 있는 "딥휴먼"이라는 기술은 간단하게 말해서 가상인간을 구현하는 기술 중 하나인 "딥페이크" 기술을 간소화한 기술인데, 클레온 측의 설명에 따르면, "단일 얼굴 이미지와 30초 분량의 음성 데이터로 실시간에 가까운 비디오에 있는 사람의 얼굴과 음성을 변환 또는 생성할 수 있는 기술"입니다.

 

클레온 딥휴먼 설명 자료

가상인간을 만드는 기술과 국내 가상인간에 대한 내용은 아래의 링크에서 확인 가능합니다. 

 

가상인간 로지 외에 버추얼 인플루언서, 한국에 누가 있지?

 

며칠 전에 우연히 클레온이 만든 "카멜로(KAMELO)"라는 앱을 발견했습니다.

어느 블로거가 가상인간 체험이 가능한 SNS라고 소개한 글이 있던데, 이 앱을 이용하여 동영상을 올리고 동영상의 얼굴과 목소리를 바꾸면 가상인간을 만들 수 있습니다. 호기심에 한번 간단하게 소개해 드리려고 합니다.

​

플레이스토어에서 카멜로 앱을 다운로드합니다.

 

카멜로 SNS에 가입하고, 권한 설정 등등은 알아서 하시고, 일단 체험을 위해 이미 올라와 있는

동영상을 선택해서 얼굴과 목소리가 바뀌는지 해 보겠습니다.

제가 선택한 동영상은 어벤저스 인피니티 워의 한 장면입니다.

 

 

먼저 화면에 보이는 외계인을 선택하고, 다음 화면처럼 동양인 여성을 선택한 후 바꾸기를 시작합니다.

 

그런데, 실패입니다. 바뀌었다고 나오기는 하지만, 외계인 얼굴에 여성의 얼굴이 몇 번 겹쳐 보이다가 그냥 외계인 얼굴로 남아 있습니다.

음... 재미 삼아해 보는 거지만, 실패하면 기분이 나쁩니다. 이유는 대충 짐작이 가는데 아래에서 제 의견을 말씀드리기로 하고

다시 해 보겠습니다.

카멜로에 샘플로 올라와 있는 여성 2명의 동영상을 선택해서 아랫부분에 보이는 외국인 남성의 얼굴을 붙여 보겠습니다.

 

 

하하하, 성공했습니다~ 예상했던 것보다 끔찍한 얼굴이지만, 어쨌든 성공입니다.

앱 이용자들의 사용기를 보면 친구들끼리 동영상을 찍어 올리고 얼굴을 바꿔보면서 즐기는 듯합니다.

​

과거에도 얼굴을 합성해서 바꿔주는 앱들은 많이 있었습니다. 그런 앱들과 결정적으로 차이가 나는 것은 바뀐 얼굴이 원본 얼굴이 웃거나 표정을 바꾸면 같이 표정이 바뀐다는 점입니다. 제 생각에는 기본적으로 얼굴의 표정을 결정짓는 근육들의 좌표를 8개 정도 정해 놓고, 좌표를 눈이나 얼굴 외곽선과의 거리 비율에 따라 확정한 후, 얼굴을 바꿔서 입혀 넣을 때 그 좌표 값이 바뀌는 편차를 그대로 반영하도록 하여 원본의 표정이 바뀌면 덮어 씌운 얼굴의 표정도 바뀌도록 하는 듯합니다.

그래서 인피니티 워의 타노스 부하로 나왔던 외계인의 경우는 인간의 얼굴이 아니기 때문에, 아마도 눈을 인식하지 못했거나, 얼굴 전체 길이가 너무 길어서 그럴지도 모르겠는데, 근육들의 좌표 값을 산출해 내는 데에 실패해서 얼굴 변경에 실패한 것이 아닌가 싶습니다.

​

어쨌든, 이것저것 해 보면 재미있는 앱일 듯합니다.

관심이 가는 분들은 한 번씩 해 보세요~

감사합니다~