서른다섯에 직업을 바꾼 사람이 있다. 10년 차 마케터가 UX 디자이너로 전향했다. 주변 반응은 둘로 나뉘었다. "용기 있다"와 "늦지 않았어?" 본인도 불안했다. 디자인 전공자들은 대학 때부터 시작했고, 신입은 스물네 살이고, 포트폴리오는 백지다.
그런데 6개월 만에 취업했다. 같이 부트캠프를 시작한 비전공 동기들보다 빨랐다. 왜? 마케팅에서 10년간 쌓은 것들 — 사용자 심리 이해, 데이터 분석 습관, 비즈니스 맥락 파악, 기획서 커뮤니케이션 — 이것들이 UX 디자인에서 그대로 작동했기 때문이다.
그는 제로에서 시작한 게 아니었다. 기존 역량 위에 새 레이어를 얹은 것이었다.
AI에서 이걸 파인튜닝(Fine-tuning)이라고 부른다.
대형 언어 모델은 인터넷의 방대한 텍스트로 사전 학습(Pre-training)된다. 언어의 구조, 문법, 상식, 논리를 익힌다. 이 과정에 수천억 개의 텍스트와 수백만 달러의 비용이 든다. 범용적이지만 특정 용도에 최적화되어 있지는 않다.
파인튜닝은 이 사전 학습된 모델을 특정 목적에 맞게 추가 학습시키는 것이다. 의료 데이터로 파인튜닝하면 의료 전문 모델이 되고, 법률 문서로 파인튜닝하면 법률 전문 모델이 된다. 핵심은 — 처음부터 다시 학습하지 않는다는 것이다. 기존에 쌓인 범용 지식은 그대로 두고, 그 위에 전문 지식을 덧입힌다.
처음부터 학습하면 수개월이 걸릴 일이, 파인튜닝으로는 며칠이면 끝난다. 비용은 수백 분의 일로 줄어든다. 그리고 대부분의 경우, 처음부터 학습한 모델보다 성능이 좋다. 범용 지식이라는 토대 위에 전문성을 쌓았기 때문이다.
"새로 시작한다"는 말에는 묘한 매력이 있다.
백지 상태. 깨끗한 출발. 과거를 버리고 새 사람이 되는 것. 영화에서는 아름다운 서사다. 낯선 도시로 떠나고, 이름을 바꾸고, 전혀 다른 삶을 산다.
현실에서는 거의 불가능하고, 대부분 불필요하다.
서른다섯의 마케터가 디자인을 시작할 때, 10년의 경력은 짐이 아니라 토대다. 마흔에 글을 쓰기 시작한 사람은 마흔 해의 삶이 재료다. 이혼 후 새 관계를 시작하는 사람은 이전 관계에서 배운 것들 — 무엇이 나를 행복하게 하는지, 어떤 갈등 패턴을 반복하는지 — 을 가지고 간다. 가져가야 한다.
파인튜닝의 첫 번째 교훈: 과거를 삭제하지 마라. 위에 쌓아라.
하지만 파인튜닝에는 조건이 있다. 사전 학습이 충분히 되어 있어야 한다.
모델이 기본적인 언어 능력이 없는 상태에서 의료 데이터로 파인튜닝하면, 의료 전문가가 아니라 의료 용어를 아무렇게나 나열하는 기계가 된다. 토대 없이 전문성을 쌓으면 형태만 전문가인 공허한 결과물이 나온다.
사람도 마찬가지다. 기본기 없이 전환하면 위험하다.
코딩 부트캠프 3개월 마치고 "나는 개발자"라고 하는 사람. 자격증 하나 따고 "나는 전문가"라고 하는 사람. 파인튜닝의 성능은 사전 학습의 깊이에 비례한다. 기반이 얕으면 파인튜닝도 얕다.
11장의 전이학습과 구분하자. 전이학습은 한 영역의 경험이 다른 영역으로 '옮겨가는' 현상이다. 파인튜닝은 의도적으로 새 영역에 맞게 자신을 '재조정하는' 행위다. 전이학습이 자연스러운 발견이라면, 파인튜닝은 의식적인 설계다.
파인튜닝에서 가장 어려운 부분은 무엇을 유지하고 무엇을 바꿀지 결정하는 것이다.
AI에서는 이걸 '어떤 레이어를 동결(freeze)할 것인가'라는 문제로 다룬다. 모든 레이어를 풀어서 재학습하면 기존 지식이 망가진다. 이걸 '파괴적 망각(Catastrophic Forgetting)'이라고 부른다. 새로운 것을 배우느라 이미 알고 있던 것을 잊어버리는 현상.
전직을 생각해보자. 마케터가 디자이너가 되면서 "마케팅적 사고를 완전히 버려야 해"라고 하면? 자신의 최대 강점을 스스로 삭제하는 것이다. 파괴적 망각이다. 반대로, 마케팅 사고방식을 전혀 수정하지 않으면? "이건 디자인이 아니라 마케팅 기획서잖아"라는 피드백을 받게 된다. 과소적응이다.
균형점은 — 핵심 역량은 유지하되, 새 맥락에 맞게 표현 방식을 바꾸는 것이다. 사용자 심리를 이해하는 능력은 유지한다. 하지만 그 이해를 기획서가 아니라 와이어프레임으로 표현하는 법을 배운다. 깊은 레이어는 동결하고, 표면 레이어만 재학습한다.
인생의 전환점마다 사람들이 하는 실수가 두 가지다.
하나, "나는 완전히 달라져야 해." 과거를 부정하고 백지에서 시작하려 한다. 비용이 막대하고, 성공 확률이 낮고, 기존에 쌓은 것을 낭비한다.
둘, "나는 이대로도 충분해." 변화를 거부하고 기존 방식만 고집한다. 새 환경에 적응하지 못하고, 과거의 성공 공식이 현재에서 실패 공식이 된다.
파인튜닝은 이 두 극단 사이에 있다. 바꿀 것은 바꾸되, 버릴 것까지 버리지는 마라. 당신의 사전 학습 — 수십 년간 쌓아온 경험, 관점, 실패, 통찰 — 은 비싼 자산이다. 그걸 토대로 새 방향을 학습하는 것이 가장 효율적이고, 대부분의 경우 최선의 결과를 낸다.
한 가지 실용적인 프레임을 제안한다.
전환을 앞두고 있을 때, 종이를 꺼내 두 열을 만든다.
왼쪽: 동결할 것 — 새 맥락에서도 유효한 기존 역량.
오른쪽: 재학습할 것 — 새 맥락에 맞게 바꾸거나 새로 익혀야 할 것.
대부분의 사람은 오른쪽 열만 보고 압도당한다. "이걸 다 언제 배워." 왼쪽 열을 먼저 채우면 다르다. 이미 가진 게 보인다. 새로 배울 것이 '전부'가 아니라 '차이분'이 된다. 막막함이 줄어든다.
이게 파인튜닝의 본질이다. 전부 학습하는 게 아니라, 차이만 학습한다.
완전히 새로 시작하지 않아도 된다. 아니, 새로 시작하지 않는 편이 낫다.
당신은 빈 모델이 아니다. 이미 사전 학습된 모델이다. 수십 년치의 데이터로. 거기에 새 데이터를 얹어라. 레이어를 추가해라. 방향을 조정해라.
그게 파인튜닝이다. 그리고 거의 언제나, 처음부터 시작하는 것보다 더 빠르고, 더 좋은 결과를 낸다.
"우리는 경험에 의해 만들어진다. 경험을 버리는 것은 자신을 버리는 것이다." — 존 듀이