AI로 Rapper를 만들어보다
Veo3 I2V 한계를 극복해보자
Veo3 발표 영상들을 보다가 문득 아이디어가 떠올랐습니다.
저희 팀이 기획 및 제작하는 플래그쉽 게임의 VIP 멤버십 한정판 브랜디드 패키지를 홍보하는 랩퍼 숏폼을 만들어보면 어떨까 싶었거든요.
저희 팀은 게임의 VIP 멤버십 프로그램 기획과 개발부터 수출까지 전 과정을 담당하고 있습니다.
이번 기회에 AI를 활용한 새로운 홍보 에셋을 만들어보자라는 생각이 들었습니다.
Veo3는 아직 I2V가 제한적인지라, 현재 사용 가능한 도구들만으로도 충분히 콘텐츠 에셋을 만들 수 있다는 걸 확인해보고 싶었어요. 전체 제작 워크플로우는 아래와 같습니다.
제작 워크플로우:
기획 & 스크립트: ChatGPT로 랩 가사 작성
음성: CapCut AI Voice Over로 랩퍼 보이스 생성
모델: 미드저니 v7 Omni로 후드+텀블러 착용 캐릭터 생성 (포토샵으로 디테일 보정)
영상화: Krea Lipsync로 이미지+음성 합성
각 단계별로 생각보다는 자연스러운 결과물이 나온 것 같습니다.
Suno나 Heygen, Hedra 같은 립싱크 플랫폼의 유료 기능을 사용하지 않고도 이 정도까지는 생성이 가능했어요. 게다가 Krea의 립싱크 정확도는 기대보다 높은 결과물이 나와 인상적이었습니다.
물론 완벽하지 않은 립싱크 구현, 간헐적으로 부자연스럽고 불필요한 동작 등 아직은 개선할 점들이 많이 보입니다. 하지만 늘 그렇듯이 기술과 툴들은 계속 빠른 속도로 발전하기에 이런 점들도 빠른 시간 내 보완되리라 생각합니다.
기존 제작 방식을 생각해보면, 이런 영상 소재를 만들기 위해서는 랩퍼 섭외, 촬영 준비, 편집 작업까지 거쳐야 했습니다. 하지만 AI 툴을 활용하면 아이디어가 떠오른 순간부터 몇 시간 내에 프로토타입을 만들어볼 수 있어요. 다양한 컨셉을 빠르게 test run, 개선 보완하고 빠르게 효과적인 방향을 찾아갈 수 있다는 점에서 매우 큰 강점이라 생각합니다.
상세 프로세스
1. 숏폼 영상 기획 및 스크립트
- 영상 컨셉, 홍보 포인트 기획 -> gpt로 스크립트 작성
- 프롬프트:
너는 틱톡 소셜 컨텐츠 전문 스페셜리스트야. 숏폼 컨텐츠의 기획이 탁월한 전문가야. 아래 내용을 바탕으로 숏폼 컨텐츠 스크립트를 작성해줘. 출연 모델은 3번 이미지의 미국계 흑인 패션모델이고 멋지고 카리스마 있는 모습이야. Summoners War Skyarena 라는 모바일 rpg 게임의 상위 VIP 유저들을 위한 Guardiance Club Membership에 가입한 이들을 축하하는 인사를 하는 20초 분량의 숏폼 스크립트를 작성해줘. 모델은 멤버쉽 가입자들만 받을 수 있는 1번 이미지의 한정판 후드 집업을 입고 있으며, 2번 이미지의 한정판 텀블러를 손에 들고 있어.
- 결과 출력
"Hey, Guardians!
Welcome to the elite—Summoners War Guardians Club!
You've earned your place, and now you're part of something legendary.
Rock your exclusive hoodie, sip from your special-edition tumbler, and let everyone know—you’re among the chosen few.
This isn't just a membership, it's a badge of honor.
Congrats, Guardians. You've leveled up."
2. AI Rapper 보이스 음성 생성
- Capcut AI voice over 기능 활용
- AI voice 중 "리듬음성" 적용, 랩핑 오디오 생성
3. 가상 모델 생성
- 멤버 한정으로 제공되는 한정판 후디와 텀블러를 착장한 AI 모델 생성
- 사용 툴 : 미드저니 v7
실제 멤버쉽 한정판 후디 & 텀블러 상품
세세한 로고 디테일이 100% 구현이 되지 않은 것을 포토샵으로 보안 (왼 before / 오 after)