[week18] Character cameos (feat. 라이언)

지난 30일 OpenAI가 X에 공식 포스팅한 게시글 내용이다.
"Introducing character cameos, now available in the Sora app."
이번 포스팅에서는 이 character cameos 기능에 대해 알아보겠다.

Introducing character cameos, now available in the Sora app. pic.twitter.com/k1R4FdCRPV

— OpenAI (@OpenAI) October 29, 2025

얼핏 봤을 때는 Wan animate의 모션캡처와 Veo의 립싱크 기능이 합쳐진 느낌이다.

근데 OpenAI는 여기에서 더 나아가 아예 Sora를 활용한 새로운 캐릭터 생성이나 카메라 롤에 담긴 실제 물체나 반려동물 영상을 활용하여 원하는 캐릭터로 변환하는 구체적인 방법까지 제시하고 있다.

영상 속 예시자료들

Animal Lip-sinc가 매우 자연스러워졌다는 점에서 대부분의 립싱크 툴이 동물의 얼굴을 제대로 인지하지 못했던 올 상반기에 비해 엄청난 발전이라고 볼 수 있겠다.

심지어는 정면이 아닌 옆면까지도 자연스럽게 해석하고 있음을 확인할 수 있다.

---

[목차여기]

이제는 나만의 '진짜' COMPANION을 제작할 수 있다.

참고로 Sora 어플은 현재 iOS에서만 다운로드 가능하고 안드로이드는 출시 예정이다.

Android & iOS

나는 여러 호환성 이슈로 갤럭시와 아이폰 두 가지 모두를 갖고 있기 때문에 곧바로 테스트를 진행해 보려고 한다.

내가 제작하려는 Companion은 바로 지난 13주 차에서 다뤘던 카카오프렌즈이다.

직접 AI로 제작해본 내 메이트 [라이언]

카나나 AI 서비스의 공식 캐릭터 [나나]의 디자인은 카카오라는 브랜드 특유의 아이덴티티가 거의 없기 때문에, 차라리 기존 카카오프렌즈 캐릭터 중 가장 인지도가 높은 [라이언]을 사용하는 것이 어떨까 하는 생각에서 시작되었다.

 

아래는 당시(9월 25일)에 작성했던 포스트 링크이다.

[week13] 최근 카카오 행보를 보고 든 생각

---

제작 과정

캐릭터를 추가하려면 래퍼런스 영상을 업로드해야한다.

프로필로 들어가 캐릭터 추가 버튼을 누르면 위처럼 영상을 직접 촬영하거나 업로드하라는 페이지가 뜬다.

이미지가 아닌 영상을 업로드하는 이유는 AI가 다각도에서 해당 객체를 분석하기에 좀 더 용이하게 하기 위함일 것이다.

나는 [라이언] 영상을 따로 카메라 롤에 갖고 있지 않기 때문에 소스를 얻고자 [카카오프렌즈] 유튜브 채널을 방문했다.

 

래퍼런스 영상으로 가장 적합한 것은 아무래도 3D로 제작된 애니메이션이며, 그중에서도 씬 전환이 이루어지지 않는 '댄스 영상'일 것이다.

솔로 데뷔는 끝내 못한 아이돌 라이언

하지만 안타깝게도 카카오에서는 (씬 전환이 없는) [라이언]의 단독 댄스 영상을 제작한 적이 없다. 

모든 영상에는 춘식이가 함께하고 있고, 매번 다른 무대의상까지 걸치고 있으니 학습데이터로는 그다지 좋다고 볼 수 없다.

 

그렇다면 방법은 한 가지이다.

[라이언] 단독 댄스 영상을 AI로 먼저 뽑은 후, 그것을 학습시키는 것이다.

---

춤추는 라이언 영상 제작

Sora2 API로 뽑은 라이언 댄스 영상

*혹시나 저작권 이슈가 발생할 수도 있기에 OpenArt에서 제공하는 API를 활용하여 로컬 서버에서 영상을 뽑았다.

이제 라이언 댄스 영상을 뽑았으니, 해당 영상 파일을 Sora 어플에 캐릭터로 등록해 보겠다. (공개범위는 당연히 비공개이다.)

---

라이언 캐릭터 등록

캐릭터 등록 과정

캐릭터 등록을 마쳤다.

다음은 카메오를 등록할 차례이다.

 

사실 진정한 Companion(동반자)이 되기 위해서는 나 자신과 캐릭터의 상호작용이 무엇보다 중요하다고 생각되는 바이다.

그렇기에 나는 나 자신을 촬영하여 카메오로 등록하고, 나와 라이언이 함께 등장하는 영상을 뽑기로 했다.

---

카메오 등록

카메오 등록 과정

카메오 등록까지 모두 마쳤다.

이제 본격적으로 [나]와 [라이언]이 함께 무언가를 하고 있는 영상을 생성해보겠다.

---

라이언과 함께

캐릭터 카메오 영상 제작 과정

기존에 등록해 둔 [라이언] 캐릭터와 [나] 카메오를 결합하여 간단한 프롬프팅을 입력하면 다음과 같이 영상이 생성된다.

(당연히 커뮤니티 공개처리는 하지 않았다.)

해당 영상을 끝으로 이번 포스팅은 마무리하겠다.

---

라이언과 함께