미래 방구석 콘서트
귀는 도착했다. 눈과 소름 돋는 관객 떼창은 언제 따라올까.
아침에 출근 준비를 하면서 거실 스피커로 음악을 틀었다. 보스 서라운드 시스템, 센터 스피커 하나에 소파 뒤쪽 위성 스피커 둘. 음질이 나쁘지 않다. 와이프와 둘째와 함께 보컬 곡을 듣는데, 신나는 노래가 나왔다. 아이가 몸을 흔들고, 나도 모르게 리듬을 탄다.
그러다 문득 이런 생각이 들었다.
오디오 마니아들이 수백만 원짜리 장비를 쌓아가며 결국 추구하는 건 하나다. 원음에 가까워지는 것. 해상도, 공간감, 밸런스, 음의 결. 스피커가 사라지고, 눈을 감으면 연주자가 거기 있는 것 같은 착각. 그런데 왜 거기서 멈춰야 하지? 귀가 거의 도착했다면, 눈은 언제 따라올까?
청각은 이미 종착역에 와 있다
음악 재생 기술은 사실상 꽤 와 있다. 고해상도 음원, 공간 오디오, 멀티채널 서라운드. 거실을 작은 공연장처럼 만드는 세팅은 이미 가능하다. 눈을 감으면 가수는 무대 위에 있고, 연주자는 내 앞에서 숨을 쉬는 것처럼 느껴진다.
그렇다면 다음 질문은 자연스럽다. 눈은?
사실 눈도 이미 움직이기 시작했다. 2022년부터 런던에서 열리고 있는 ABBA Voyage는 그 가능성을 가장 극적으로 보여준 사례다. ILM(Industrial Light & Magic)이 160대의 카메라로 ABBA 멤버들의 동작을 캡처해 만든 디지털 아바타, 'ABBAtars'가 3천 석 규모의 전용 아레나에서 공연한다. 제작비 약 1.75억 달러, 누적 티켓 판매 150만 장 이상. 관객의 99%가 매회 자리를 채운다.
놀라운 성과다. 하지만 한 가지 빠진 게 있다. ABBAtars는 관객을 보지 않는다. 정해진 안무를 정해진 순서로 수행할 뿐이다. 내가 환호하든 졸고 있든, 무대 위의 아바타에게는 차이가 없다. 시각은 도착했지만, 교감은 아직이다.
눈이 따라오고 있다
그 "눈"이 거실까지 들어오려면 디스플레이 기술이 필요하다. 공연장이 아니라 내 집, 내 소파 앞에서 작동하는 무언가.
뉴욕 브루클린에 본사를 둔 Looking Glass Factory(2014년 설립)는 10년 넘게 이 문제에 매달려왔다. 이 회사가 만드는 건 안경도 헤드셋도 필요 없는 홀로그래픽 디스플레이다. 2025년에 발표한 'Hololuminescent Display(HLD)'는 두께 1인치 이하의 패널에 홀로그래픽 볼륨을 내장해, 일반 영상을 3D 홀로그램으로 변환한다. 핵심은 고해상도 2D 디스플레이의 광학 스택 안에 홀로그래픽 에칭을 결합한 하이브리드 기술이다. 10년간 축적해 온 라이트 필드 기술의 노하우 위에, 일반 영상만으로도 실제 깊이감과 입체적 존재감을 만들어내는 방식. 안경도, 아이트래킹도, 별도의 3D 콘텐츠 파이프라인도 필요 없다. 16인치부터 86인치까지, 가격은 $2,000부터.
아직은 주로 광고나 리테일 매장용이다. 하지만 방향은 분명하다. 홀로그램이 전용 공연장에서 거실로 내려오는 중이다. 86인치 디스플레이가 벽에 걸리는 날, 거실 한가운데 사람 크기의 무언가가 서 있는 건 더 이상 SF가 아니다.
반응까지 읽히기 시작하면
눈이 따라왔다 치자. 그런데 그것만으로는 ABBA Voyage와 크게 다르지 않다. 녹화된 영상을 3D로 보여주는 것일 뿐이니까. 진짜 다른 경험이 되려면, 무대 위의 존재가 나를 인식하고 반응해야 한다.
야마하는 이 방향에서 가장 흥미로운 실험을 하고 있는 곳이다. 'AI Music Ensemble Technology'는 AI가 실시간으로 연주자의 템포, 다이내믹, 표현을 분석해 앙상블 파트너처럼 반응하는 기술이다. 'Dear Glenn' 프로젝트에서는 1982년에 50세로 세상을 떠난 피아니스트 글렌 굴드의 연주 스타일을 100시간 이상의 녹음 데이터로 학습시켜, 2019년 오스트리아 아르스 일렉트로니카 페스티벌에서 브루크너 오케스트라 린츠 멤버들, 피아니스트 프란체스코 트리스타노와 실시간 합주를 시켰다. AI 피아니스트가 인간 연주자의 속도 변화에 맞춰 즉흥적으로 반응하며, 마치 진짜 앙상블 파트너처럼 호흡을 맞춘 것이다.
이건 음악 도메인의 이야기지만, 원리는 같다. AI가 사람의 행동을 실시간으로 감지하고, 그에 맞는 반응을 생성해 내는 것. 이 기술이 홀로그램 위의 가수에게 적용된다면? 내가 박수를 치면 가수가 그쪽을 보고 웃고, 리듬에 맞춰 몸을 흔들면 시선이 따라오고, 내가 축 처져 있으면 "put your hands up" 제스처를 취하는. 녹화된 공연이 아니라, 지금 이 순간의 나에게 반응하는 무대.
생성형 AI가 만들어내는 가수이기 때문에 가능한 일이다.
혼자인데 혼자가 아닌, 집단적 황홀경
여기까지 상상하면 한 가지가 빠져 있다. 콘서트의 본질 중 하나인 집단 에너지. 수만 명이 같은 후렴을 부를 때 등골을 타고 올라오는 그 소름. 혼자 있는 거실에서 그게 가능할까?
이런 기술들이 하나로 엮이는 날이 오면, 금요일 밤 풍경은 이렇게 바뀔지도 모른다.
소파에 앉아 와인잔을 기울이며 거실 조명을 낮춘다. "오늘은 박효신으로." 음성 명령과 함께 거실 중앙, 테이블 너머 공간에 반투명한 무대 조명이 번진다. 키를 70%로 줄인 박효신이 눈을 감고 서 있다.
첫 소절이 시작되자 무의식적으로 고개를 끄덕인다. 그가 눈을 뜬다. 정확히 내가 앉은 방향을 향해. 살짝 미소를 지으며 고개를 기울이는 동작. 나도 모르게 숨을 멈춘다.
후렴에서 작게 따라 부르자, 그는 마이크를 살짝 앞으로 내밀었다. 마치 "같이 부르자"는 것처럼. 조금 더 크게 불렀다.
그런데 내 목소리만 들리는 게 아니었다. 오브젝트 기반 오디오(Object-based Audio)가 수만 명의 합창을 거실 사방에 깔아주기 시작한다. 단순한 녹음이 아니다. 수만 명의 목소리 하나하나가 거실 공간 안의 '좌표'를 점유하며 들려온다. 왼쪽 뒤에서, 오른쪽 위에서, 바로 옆에서. 혼자인데 혼자가 아닌 것 같은 착각. 같은 시간, 같은 노래를 틀고 있는 다른 거실들의 목소리가 실시간으로 합쳐지고 있는 건지도 모른다.
노래가 끝났을 때, 그가 가볍게 고개를 숙여 인사했다. 박수를 쳤다. 거실에는 나뿐이었다. 그런데 방금 그 소름은 진짜였다.
아침에 거실 스피커로 음악을 틀었을 뿐인데, 여기까지 와버렸다. 귀가 먼저 도착하고, 눈이 따라오고, 반응이 읽히고, 이제는 함께 부르는 것까지. 어쩌면 머지않아 콘서트의 정의 자체가 바뀔지도 모른다. 가수가 나를 보고, 군중이 나와 함께 부르고, 그 모든 것이 내 거실에서 일어나는 밤.
그날이 오면 우리는 더 행복해질까, 아니면 뭔가를 잃어버린 걸까. 마치 인스타그램에서 수많은 사람과 연결되어 있으면서도, 문득 전화할 사람이 떠오르지 않는 밤처럼.