SKT·온마인드, AI 가상인간 공동 제작 MOU 체결
뉴스 스크랩
기사 제목: SKT·온마인드, AI 가상인간 공동 제작 MOU 체결
기사 링크:https://www.ajunews.com/view/20221004091508387
넵튠의 자회사 온마인드가 SK텔레콤(SKT)과 인공지능(AI) 버추얼 휴먼 공동 제작 사업을 위한 업무협약(MOU)을 체결했다고 4일 밝혔다.
3D 버추얼 휴먼 제작사 온마인드는 SKT에서 분할해 투자전문회사로 출범한 SK스퀘어가 첫 투자처로 선택한 회사다. 자체 개발한 정교한 3D 버추얼 휴먼 구현 기술력과 실시간 상호작용이 가능한 렌더링 기술로 업계에서 높은 평가를 받고 있다.
온마인드는 메타버스 시대의 중요한 자산인 버추얼 휴먼 제작에 있어 다양한 AI 핵심 기술을 확보하고 있는 SKT와의 협력을 통해 버추얼 휴먼과 AI가 결합하고, 이상적인 버추얼 휴먼의 모습에 한걸음 다가갈 수 있을 것으로 기대하고 있다. 양사 사업 제휴 첫 프로젝트는 온마인드의 버추얼 휴먼 '나수아(SUA)'의 AI 목소리를 제작하는 것으로, 이 과정에서 SKT의 AI 기반 음성합성기술이 적용된다.
SKT가 보유한 AI 기반 음성합성기술은 음향 모델과 보코더 모델이 통합된 종단형(end-to-end) 딥러닝 모델링이다. KBS 라디오 '누군가 어딘가에' 음악방송의 AI DJ에 적용돼 품질 검증을 받은 바 있고, 누구(NUGU) 셀럽과 T맵 셀럽 보이스(Voice) 서비스에 활용됐다. 가장 최근에는 디지털 메이트 에이닷(A.) 캐릭터의 보이스에 적용됐다.
이상호 SKT 최고기술책임자(CTO)는 "SKT의 AI 기반 음성합성기술을 통해 버추얼 휴먼에 자연스러운 생명력을 불어넣을 수 있을 것으로 기대한다"며 "앞으로도 SKT가 보유한 AI 기술 역량을 다양한 산업영역에서 활용할 수 있도록 지원 영역을 넓혀 가겠다"고 말했다.
김형일 온마인드 대표는 "그 동안 나수아의 목소리가 성우의 목소리를 기반으로 녹음 후 싱크를 맞추는 방식이었다면, SKT의 AI 기반 음성합성기술을 통해 밝고 깨끗한 이미지에 적합한 AI 목소리를 갖게 될 것으로 기대한다"며 "사전 녹음 없이 사람에 가까운 자연스러운 목소리로 연기하고 노래할 수 있는 고유 목소리를 갖게 된다면 향후 나수아의 음원 발매는 물론 미디어·광고 출연, 라이브 커머스 진행 등 모든 가능성을 열어두고 다양한 활용 방안을 모색할 수 있다"고 말했다.
핵심 기술 및 비즈니스 소개
휴먼 렌더링 - 실시간으로 사람의 형상을 합성하는 기술. 삼성전자가 세계 최초로 선보인 인공인간 네온의 페이스북 코덱 아바타가 대표적인 사례이다. 네온의 경우로 GAN(생성적 적대 신경망) 기술을 이용하여 사람이 표현할 수 있는 다양한 표정 영상을 학습하고 입력되는 사람의 얼굴형에 맞게 새로운 표정을 생성해내는 기술이다.
볼류 메트릭 캡쳐 기술 - 많은 수의 카메라를 사용하여 형태 그대로의 형상을 공간상의 3차원 픽셀 단위로 물체 공간을 차지하는 것처럼 공간에 있는 형태와 색상을 촬영하는 방식
3D 모델링 - 기존에는 3차원 얼굴 모델을 만들고 애니메이션 3D 모델링 데이터를 움직이거나 변형시키는 것에 그쳤지만 기술이 발전하면서 전신 사진을 이용하여 애니메이션이 가능한 3차원 전신 모델을 생성하는 기술들이 나오고 있다. 입력 영상으로부터 사람의 자세를 유추한 후 표준화된 3차원 모델로 해당 자세를 만들고 변형하여 2차원 영상으로 투영한 다음 텍스쳐를 만들어 내고, 만들어진 3차원 모델을 렌더링하여 다시 입력 영상과 비교하는 재귀적인 방식이다.
시사점 및 인사이트
기사에 나온 digital human(AI human)은 은 컨텐츠, 의료, 교육, 광고 등에 사용되고 있으며 그 중 현재 많이 사용되는 곳은 마케팅이다. 가상 모델인 경우도 많고, 다양한 기업을 마케팅하는 경우도 많다. AI human은 상품, 잡지 같은 물리적 매체에서도 사용될 수 있지만 메타버스 같은 디지털 플랫폼에서 발전시킬 수 있으며 현실과 가상을 넘어선 다양한 콘텐츠 개발이 기대된다.
같이 생각해 볼 만한 논점
1. 해당 AI Human이 SKT 어느 곳에서 활용될 것 같은가?
2. AI Human은 인간을 대체할 수 있는가?
