brunch

매거진 잡다한 주일의 미디어 이야기

라이킷 9 댓글

You can make anything
by writing

C.S.Lewis

계정을 잊어버리셨나요?

by 주일 Aug 25. 2023

인공지능과 함께 창작하기

생성형 인공지능으로 창작을 쉽고 재미있게 시작하기

인디앤임팩트 뉴스레터 25호에 실린 글입니다. https://maily.so/iimedia/posts/995e8b76

1. 인간의 얼굴을 한 로봇

친근한 모습으로 다가오긴 했지만 적지 않은 사람들이 위협으로 느끼는 듯하다. 이세돌 9단과 바둑을 둔 알파고 이후 인공지능은 낯선 화두는 아니지만 지금처럼 인간의 영역에 깊게 들어온 적은 없어서일까. 특히 생성형 인공지능이란 녀석은 인간 고유의 능력이라 생각했던 창작까지 넘본다니 인간은 무얼 해야 하나 존재론적 위기감까지 느끼는 건 자연스럽다. ‘창의성이란 무엇인가’만 갖고도 논쟁할 거리는 많지만 이번에는 일단 인공지능을 창작의 동료로 받아들이고 함께 무언가 만들어가는 방법과 가능성만 논하려고 한다.

2. 누가 생성형 인공지능을 잘 쓸 수 있을까 (한계와 주의점)

1) 전통적 개념의 창작으로부터 자유로워지기 : 현대미술에서는 예술가가 직접 붓을 들 필요가 없다. 작품의 개념을 기획하는 능력이 중요할 뿐. 타인에게 시켜도 예술이고, 우연에 맡겨도 예술이다. 심지어 의도하지 않은 관객의 참여로 완성될 수도 있다. 고전적 예술의 범주에 얽매이지 않은 사람이 유리할 것 같다.

2) 창작 과정을 전반적으로 이해하는 능력 : 필요한 것을 주문하고 생성하는 것에 그치지 않고 그것을 어떻게 사용할지, 어느 수준까지 작품에 반영할지, 저작권 문제나 활용 범위는 어떻게 해야 할지 미리 생각을 갖고 있어야 한다.

3) 기본적인 제작(수정) 능력 : 글쓰기라면 원하는 글의 구성을 미리 생각하고 있고, 인공지능의 산출물을 의도대로 윤문할 수 있어야 한다. 이미지 생성이라면 손가락이 6개로 나왔을 때 5개로 수정할 수 있어야 하고, 자신이 원하는 바를 암호 같은 프롬프트(명령어)로 바꾸어 입력할 줄 알아야 한다. 동영상이나 음악처럼 물리적 길이와 리듬 같은 게 중요한 콘텐츠를 주문할 때도 원하는 게 나올 때까지 반복해서 생성하고 수정하고 기다릴 줄 알아야 한다.

4) 우연까지 받아들일 수 있는 유연성 : 근래의 생성형 인공지능은 그럴싸한 결과물을 금방 만든다. 단순히 완성도를 넘어 미처 생각하지 못한 방향으로 접근한 결과물을 보면 사람보다 낫다는 말까지 나오는 수준이다. 나만의 작품이라는 생각보다는 인공지능과 ‘함께’ 만든다는 생각을 해보면 어떨까.

5) 책임지는 자세 : 단순하게는 베끼기(트레이싱) 논란이 나올 수도 있고, 크게는 최종 역할의 지분 문제까지 나올 수 있다. 아이디어만 얻을 수도 있고 협업을 할 수도 있지만 내 이름으로 발표한다면 결국 내가 책임져야 한다. 이왕 사용한다면 당당하게 사용 여부와 범위를 밝힐 필요가 있다.

6) 기술을 겁내지 않는 태도 : 지금까지 나온 기술들은 애들 장난처럼 느껴질 정도로 앞으로도 많은 앱과 서비스가 쏟아져 나올 것이다. 적어도 자기 분야에서는 어떤 신기술이 나오고 있는지, 선구자들이 어떻게 활용하는지는 적극적으로 추적하며 관심을 둘 필요가 있다.

3. 분야별 유용한 기술

1) 기획•글쓰기 : ChatGPT*나 뤼튼*을 보면 글쓰기 솜씨는 뛰어나다. 하지만 과거 자료를 바탕으로 작동하고 어떻게든 글을 완성해야 한다는 강박으로 인해 생기는 환각(Hallucination) 때문에 사실 여부가 중요한 글쓰기에는 적합하지 않다. 그보다는 로그라인이나 트리트먼트, 라디오 방송대본처럼 구조에 의존하여 쓰는 글의 초안을 작성하거나 아무 열쇳말이나 던져주고 마음껏 상상해 보라고 맡기는 브레인스토밍에 유용하다. 글쓰기가 익숙하지 않은 초보 창작자나 반복적인 패턴의 글쓰기를 자주 하는 작가들에게 도움이 될 것이다.

ChatGPT와 BingChat으로 만들어 본 동화 줄거리.

Dall-E와 PlaygroundAI로 그려본 동화 삽화

2) 이미지 생성 : 가장 쉽게 사용할 수 있고 효과가 뚜렷할 분야가 이미지 생성이다. 유명 화가의 화풍을 흉내내거나 클립아트를 대체할 일러스트를 만드는 것을 넘어 웹툰이나 그래픽 노블로 바로 발표해도 좋을 수준의 그림들이 꾸준히 만들어지고 있다. 처음에는 Dall-E*가 주목받았지만 MidJourney*나 NovelAI 같은 유료 서비스들이 등장하고, 오픈소스 진영의 Stable Diffusion* 파생 서비스가 우후죽순 등장하며 다양한 분야에서 사용되고 있다.

영감을 얻기 위한 그림 생성으로 시작해서 배경 그림, 디자인용 클립아트나 로고까지 만들 수 있고, 심지어는 명령어만 구체적으로 입력하면 실사와 구분이 안 가는 사진도 만들어낼 수 있다. 그림 그릴 능력이 없는 사람도 줄거리만 준비되어 있다면 동화책 한 권 뚝딱 만들 수 있는 시대가 도래했다.

생성형 인공지능으로 줄거리를 쓰고 그림을 그린 만화책이 이미 시판되고 있다.

3) 음악•음성 생성 : 이미 많은 창작자들이 클로바더빙*의 인공지능 성우의 목소리를 활용해서 유튜브 영상이나 뉴스, 팟캐스트를 만들고 있다. 음악은 아직까진 완성도가 떨어지기 때문에 배경음악 같은 부차적 수준에서만 쓰이긴 하지만, 저작권에서 자유로운 음악을 무한대로 만들 수 있다는 점 때문에 앞으로의 가능성은 무궁무진할 것이다. 원고만 넣으면 그럴싸한 목소리로 읽어주고, 분위기와 길이와 빠르기만 결정하면 알아서 음악을 만들어주는 인공지능, 안 쓸 이유가 없다.

인공지능으로 만든 음악. 영상의 배경에 깔 수준으로는 충분하다.

누군가의 목소리 샘플 약간만 있으면 음성을 복제할 수 있는 서비스도 속속 나오고 있다. 가짜뉴스를 위한 준비 완료.

4) 동영상 생성 : 사실적인 촬영 영상을 완전히 대체하긴 어렵지만, 필터 입히는 수준을 넘어선 애니메이션은 꽤 쉽게 만들 수 있다. 자신의 사진이나 AI 아바타에게 생명을 불어넣는 방식으로 숏폼 비디오를 만들 수 있고, 보도물을 제작할 수도 있다. 사전 시각화나 스토리 보드 제작을 위한 활용도 가능하다. 아직까진 대부분 유료 서비스고, 단독 작품으로 공개하기엔 완성도가 떨어지긴 하지만 쓰는 사람에 따라선 그런 결점도 창작의 요소로 받아들일 것이고, 대량의 영상을 ‘생산’해야 하는 제작자라면 충분히 용납할 수 있을 것 같다. 주목할 서비스 하나를 추천한다면 RunwayML*인데, 웹브라우저 기반으로 영상을 편집하는 기능 이외에도 인공지능을 활용한 인물 배경 지우기, 영상 속 특정 물체를 지우기, 글을 써서 동영상 만들기, 동영상을 다른 느낌으로 바꾸기 등 다양한 기능이 속속 추가되고 있다.

이젠 누구나 쉽게 후반작업을 할 수 있는 시대가 되었다

4. 학습 과제

생성형 인공지능을 당장 창작에 활용하려는 사람은 딱 두 가지만 공부하면 좋을 것 같다. 하나는 인공지능에게 지시할 때 원하는 결과물을 얻어내기 위한 ‘프롬프트 잘 입력하기’다. 글이든 그림이든 추상적이고 두루뭉술한 명령어를 입력하면 전혀 의도하지 않은 결과가 나온다. 그렇기 때문에 자신이 쓰는 서비스에서 요구하는 명령어 입력방식을 숙지하고 다른 고수들이 공유하는 프롬프트를 잘 참고해서 생성할 필요가 있다. 다른 하나는 ControlNet이다. 이미지나 영상을 생성하면 구도나 인물의 자세 등이 무작위로 나온다. 그러나 콘트롤넷이란 플러그인 기술을 활용하면 내가 업로드한 그림을 기반으로 이미지를 생성하거나 같은 자세의 인물을 생성한다. 심지어는 관절인형을 갖고 놀 듯 결과물의 자세를 원하는 대로 바꿀 수도 있다. 한동안 프롬프트 엔지니어란 직업이 각광받을 것 같다고 하는데, 창작자에게도 남의 일은 아닌 듯 싶다.