지능보다 연비: AI 반도체 권력 이동의 진짜 이유

[방구석5분혁신.디지털&AI]

[방구석5분혁신=안병민] 자, 일단 머릿속에 있는 엉킨 실타래부터 풀고 시작하자. 우리가 흔히 말하는 ‘AI(인공지능)’는 일종의 소프트웨어, 즉 ‘지능 그 자체’를 말해. 반대로 ‘AI 반도체’는 그 지능이 쌩쌩 돌아가게 만드는 ‘기계 장치’, 즉 하드웨어지. 비유하자면 AI는 아주 복잡하고 영리한 ‘레시피’고, AI 반도체는 그 레시피대로 요리를 직접 해내는 ‘주방 도구’인 셈이야. 아무리 레시피가 훌륭해도 요리할 냄비가 없거나 불이 약하면 소용없겠지? 지금 벌어지는 전쟁은 이 ‘레시피(AI)’를 더 똑똑하게 만드는 단계를 넘어, 그 요리를 가장 빠르고 싸게 대량 생산할 ‘전용 냄비(반도체)’를 누가 먼저 차지하느냐의 싸움이야.


1. AI의 '공부법'이 바뀌니 반도체의 '스펙'도 바뀌어야 한다


우리가 AI 반도체를 이야기할 때 ‘학습(Training)’과 ‘추론(Inference)’이라는 말을 쓰는데, 이게 헷갈리는 주범이야. 이건 사실 AI(소프트웨어)가 하는 ‘일의 종류’를 나누는 거거든. 먼저 ‘학습’은 AI가 수억 권의 책을 읽으며 똑똑해지는 과정이야. 이때는 힘 좋은 ‘학습용 반도체(엔비디아 GPU 등)’가 필요해. 밤새도록 무거운 데이터를 굴려야 하니까 말이야. 근데 공부가 끝난 AI를 실제 서비스에 투입하는 게 ‘추론’이야. 챗GPT한테 질문하면 답을 내놓는 그 순간이지. 근데 문제는 이거임. 이제 공부는 끝났고 전 세계 사람들이 AI를 써먹기 시작하니까, 공부 잘하는 반도체보다 ‘문제 빨리 풀고 전기 적게 먹는 반도체(추론용 NPU)’가 훨씬 더 절실해진 거야.


쉽게 말해, 예전엔 서울대 갈 천재 하나 만드는 게 목표였다면, 이제는 그 천재를 우리 회사 대리님으로 앉혀서 24시간 실전 업무에 투입해야 하는 시대가 온 거지. 근데 이 천재가 월급(전기세)을 너무 세게 부르면 사장님 입장에선 부담스럽잖아? 그래서 지금 반도체 시장의 주인공은 연봉 높은 천재가 아니라, 적게 먹고 일 잘하는 '가성비 직장인'들이야.


2. 엔비디아의 '범용 엔진' vs 빅테크의 '맞춤형 엔진'


여기서 반도체 판의 진짜 갈등이 시작돼. 지금까지는 엔비디아가 만든 ‘GPU’라는 반도체가 시장을 꽉 잡았어. 이건 마치 ‘모든 요리를 다 할 수 있는 최고급 만능 밥솥’ 같은 거야. 공부(학습)할 때도 좋고 일(추론)할 때도 나쁘지 않거든. 근데 구글이나 아마존 같은 빅테크 공룡들이 계산기를 두드려보니 “우리 집은 파스타만 만드는데, 왜 굳이 비싼 만능 밥솥을 써야 해?”라는 의문이 생긴 거지. 그래서 자기네 서비스(AI)에만 딱 맞춘 ‘커스텀 실리콘(전용 반도체)’을 직접 만들기 시작했어.


오해하지 마, 이게 엔비디아가 힘이 빠져서 망해가고 있다는 뜻이 절대 아니야. 엔비디아는 여전히 이 동네의 압도적인 일진이야. 시장 전체 파이도 예전보다 훨씬 더 커지고 있어. 다만 예전에는 모두가 엔비디아가 만든 기성복(GPU)만 입었다면, 이제는 "내 몸에 딱 맞는 맞춤 정장"을 원하는 손님들이 늘어난 거야. 구글의 TPU 같은 전용 칩이 엔비디아 물량의 30%까지 쫓아왔다는 건, 이제 엔비디아의 독점 제국 옆에 거대한 '자치구'들이 생기고 있다는 강력한 증거야.


3. 5,000조 원의 전쟁, 핵심은 '전기세 고지서'에 있다


근데 이게 진짜 포인트임. AI 서비스를 돌리는 데 들어가는 비용의 70%가 바로 이 ‘추론’ 단계에서 발생해. 우리가 챗GPT랑 대화 한 마디 섞을 때마다 데이터센터에서는 반도체가 미친 듯이 돌아가며 전기를 잡아먹거든. 이 비용을 못 줄이면 AI는 부자들만 쓰는 장난감이 될 수밖에 없어. 그래서 지금 반도체 기업들이 목숨 거는 건 ‘지능’이 아니라 ‘연비’야. 똑같은 정답을 내놓는 AI(소프트웨어)라면, 그걸 단돈 1원이라도 싼 전기료로 처리해 주는 반도체(하드웨어)가 시장을 먹는 거지. 엔비디아가 최근 추론 특화 AI 반도체 스타트업 Groq 같은 기업과 기술 라이선스 계약을 체결하고 핵심 인력을 영입하며 태세 전환을 하는 것도 결국 “우리 칩도 이제 연비 좋아!”라는 걸 증명하고 싶어서야.


4. 기술의 완성은 결국 가격이 얼마나 착하냐에 있다


결국 우리가 봐야 할 묵직한 통찰은 이거야. AI와 AI 반도체의 개념이 섞이는 건, 그만큼 하드웨어와 소프트웨어가 한 몸처럼 움직여야만 돈을 벌 수 있는 시대가 됐다는 뜻이지. 기술이 아무리 화려해도 우리 전기세 고지서가 감당 안 되면 그건 죽은 기술이야. AI 반도체의 권력이 이동한다는 건, AI가 ‘특별한 마법’에서 우리 삶을 지탱하는 ‘저렴한 전기나 수도’ 같은 서비스로 내려오고 있다는 신호야. 이제는 누가 더 똑똑한지를 겨루는 게 아니야. 누가 더 우리 삶에 ‘조용하면서도 저렴하게’ 스며드느냐가 진짜 승부처인 거지. 혁신은 결국 우리 삶을 얼마나 낮은 비용으로, 얼마나 깊숙이 바꾸느냐로 증명되는 법이니까. ⓒAI혁신가이드안병민

Gemini_Generated_Image_q95570q95570q955.png



매거진의 이전글슈퍼카의 운전대를 잡아라: '질문인간' 저자 인터뷰