AI 동영상 생성 프로그램, Gen-1
인공지능으로 고퀄리티 동영상 쉽게 만들기
오늘 소개할 Gen-1(젠-1)은 인공지능이 동영상을 새로운 스타일로 생성해주는 프로그램입니다.
기존에 포스트 프로덕션이라고 일컬어지는 특수효과를 인공지능이 구현해주는 것이라 보면 됩니다. 특수효과를 만드는 건 전문가 영역으로 일컬어져 왔습니다. 특수 효과를 만드려면, 복잡한 구현 방법을 알아야 하고, 노하우가 있어야 하고, 많은 인력도 필요하기 때문입니다. 그런데 젠-1은 이 복잡하고 어려운 특수효과를 말 한 마디로 구현합니다. 이로서 일반인들도 다양한 고퀄리티 영상을 자유롭게 제작할 수 있는 길이 열린 것입니다.
젠-1은 이미지 또는 텍스트 프롬프트의 구성과 스타일을 소스 비디오의 구조에 적용하여 현실적이고 일관되게 새로운 비디오를 합성합니다. 아무것도 촬영하지 않고 새로운 것을 촬영하는 것과 같습니다.
쉽게 말해, 인공지능한테 말로 영상의 주제와 스타일만 명령하면, 우리가 막 찍은 영상에 그 명령한 스타일을 덧씌워서 멋있는 영상으로 구현해주는 겁니다.
젠-1은 대표적으로 다음 기능 3가지를 제공합니다.
젠-1의 대표적인 기능
1. Stylization : 소스 비디오를 특정 스타일로 변경합니다.
2. Storyboard : 목업을 특정 스타일로 변환해서 보여줍니다.
3. Mask : 비디오에 특정 주제부에만 스타일을 변경합니다.
4. Render : 질감이 없는 렌더링에 질감을 입혀 사실적인 영상을 만듭니다.
5. Customization : 다양한 커스터마니징을 합니다.
크리스토발 발렌수엘라 런웨이 CEO는 영상 제작자와 특수효과 제작자가 실제 작업하는 방법을 수년간 참고하여 이 프로그램을 만들었다고 합니다.
1. Stylization : 소스 비디오를 특정 스타일로 변경합니다.
ⓒ 2023 Runway AI Inc.상단의 좌측은 영상이고 우측은 스타일이 있는 이미지입니다. 이를 합쳐달라고 젠-1에게 말하면 아래와 같은 영상을 만듭니다. 퀄리티가 좋습니다.
2. Storyboard : 목업을 특정 스타일로 변환해서 보여줍니다.
ⓒ 2023 Runway AI Inc.좌측 영상은 노트를 세워 대략적인 구도를 만들어둔 목업입니다. 좌측의 이 영상을 도시의 밤 스타일로 만들어 달라고 하면 바로 이렇게 영상에 스타일이 덧씌워집니다. 이제 스토리보드 단계에서도 실제 구현하는 영상에 가깝게 미리 확인할 수 있습니다.
3. Mask : 비디오에 특정 주제부에만 스타일을 변경합니다.
기존에 어도비 애프터 이펙트로 마스크를 따려면 여러 레이어와 그 레이어를 사용하는 방법을 알아야 합니다. 하지만 젠-1은 오직 말로만 마스크를 따고 그 위에 스타일을 입힐 수 있습니다.
A dog with blacks spots on white fur
간단합니다.
4. Render : 질감이 없는 렌더링에 질감을 입혀 사실적인 영상을 만듭니다.
ⓒ 2023 Runway AI Inc.렌더링할 때 질감이 있으면 시간도 많이 걸리고, 파일도 무거운데, 이 젠-1만 있으면 질감 없이 렌더링만 해도 되겠네요. 젠-1이 질감을 덧씌워주기 때문입니다. 위는 샘플 영상인데 좌측 하단에 질감 없는 더미 영상이 화면의 다양한 질감이 있는 고화질 영상으로 만들어졌습니다.
5. Customization : 내가 만든 스타일을 움직이는 영상으로 바로 만들 수 있습니다.
ⓒ 2023 Runway AI Inc.내가 만든 스타일을 움직이게 하고 싶다면 젠-1을 이용하면 됩니다. 내가 만든 스타일대로 어떤 영상이든 올리면 그 위에 덧씌워주기 때문입니다. 다양한 일러스트 분들이 영상 재작을 하는데 용이할 것으로 보입니다.
젠-1의 사용방법
젠-1은 런웨이 웹사이트에서 신청을 하면 사용해볼 수 있습니다. 그런데 대기자 명단에 있는 사람을 대상으로 시범적으로 운영하고 있습니다.
Gen-1에 대한 더 자세한 정보는 아래 런웨이(Runway Research) 웹사이트에서 확인하실 수 있습니다.
https://research.runwayml.com/gen1
관련 기사
https://www.aitimes.com/news/articleView.html?idxno=149308
