brunch

인공지능 질문 개선 패턴

학습여정

“강의에서 배운 내용을 정리해 공유합니다. 함께 더 풍부한 배움이 되리라 믿습니다.”


대규모 언어 모델(LLM)이 복잡한 질문을 받았을 때, 그 질문을 여러 개의 작고 구체적인 하위 질문으로 나누어 단계적으로 해결하도록 유도하면 더 정확하고 향상된 추론 결과를 얻을 수 있다는 것입니다. 이 기법을 '인지 검증기 패턴'이라고 칭합니다.


명확성 향상: 필요한 정보를 더 명확하게 정의함.

정보의 질 향상: 유용하고 관련성 높은 데이터를 이끌어냄.

다양한 관점 고려: 문제를 여러 측면에서 바라보게 함.

문제 해결 능력 강화: 효과적인 해결책을 찾는 데 기여함.

자기반성 촉진: 자신의 생각과 가정을 재검토하게 함.


작동 방식:

규칙 부여: 사용자(혹은 프롬프트)가 LLM에게 "질문을 받으면, 원본 질문에 더 정확하게 답하는 데 도움이 될 추가 질문들을 먼저 생성하라"는 규칙을 제시합니다.


하위 질문 생성: LLM은 원본 질문과 관련된 하위 질문들(예: "앞마당의 모기 수는?"이라는 질문에 대해 마당 크기, 기후, 시기, 수원 유무, 식생 종류 등을 묻는 질문 생성)을 자동으로 만듭니다.


정보 결합 및 최종 답변: 생성된 하위 질문들에 대한 답변(정보)을 종합하여 원본 질문에 대한 최종적이고 더 상세한 답변을 구성합니다.


장점:

추론 정확도 향상: 복잡한 문제를 논리적인 단계로 분해하여 LLM의 추론 과정을 개선하고, 최종 답변의 정확도를 높입니다.


사고 구조화 지원: 사용자가 문제의 다양한 측면(차원)을 인지하도록 도와 자신의 생각을 체계적으로 구조화하는 데 유용합니다.


투명성 확보: 답변이 도출되는 과정을 보여줌으로써, 사용자가 결과에 대해 덜 회의적으로 접근하고 신뢰도를 높일 수 있습니다.



위험 요소:

사실적 오류(Hallucination): 하위 질문에 대한 답변을 구성하는 과정에서 LLM이 제공하는 개별 데이터(수치, 통계 등)는 여전히 부정확하거나 조작된 정보일 수 있습니다.


현실적 대책:

교차 검증 필수: LLM이 제시하는 하위 질문들의 논리적 타당성은 인정하되, 그 답변에 포함된 구체적인 사실 정보(예: 평방미터당 모기 밀도)는 사용자가 직접 검증해야 합니다.



실천 방향 제안 3가지

프롬프트에 규칙 포함: LLM에게 복잡한 질문을 할 때, 프롬프트 서두에 "이 질문에 답하기 위해 필요한 추가 질문 5가지를 먼저 생성하고, 그 질문들을 바탕으로 최종 답변을 해줘"와 같은 '인지 검증기 패턴' 규칙을 명시적으로 포함하여 사용하십시오.


하위 질문을 검토 목록으로 활용: LLM이 생성한 하위 질문들을 문제 해결을 위한 체크리스트나 검토 목록으로 사용하여, 고려하지 못했던 변수나 요소를 파악하는 데 활용하십시오.


단계별 사실 검증: 최종 답변을 받기 전에, LLM이 생성한 하위 질문과 그에 대한 답변을 단계별로 검증하며 진행함으로써 최종 결과물의 신뢰도를 직접 제어하십시오.



사례: 신제품 개발

초기 질문: 한 회사가 새로운 스마트폰을 개발하기로 결정했습니다. 초기 질문은 "우리 제품은 어떤 기능을 가져야 할까요?"였습니다.


질문 개선: 팀은 이 질문을 개선하여 "고객이 가장 필요로 하는 기능은 무엇인가요?"로 바꿉니다. 이렇게 함으로써 고객의 요구를 더 명확히 이해할 수 있게 됩니다.


정보 수집: 개선된 질문을 바탕으로 팀은 고객 설문조사와 시장 조사를 실시합니다. 이를 통해 고객이 선호하는 기능(예: 카메라 품질, 배터리 수명 등)을 파악합니다.


다양한 관점 고려: 팀은 "경쟁 제품과 비교했을 때, 우리 제품의 차별점은 무엇인가요?"라는 추가 질문을 던집니다. 이를 통해 경쟁 분석을 수행하고, 시장에서의 위치를 명확히 합니다.


문제 해결: 고객의 피드백과 경쟁 분석을 바탕으로, 팀은 "고객이 가장 원하는 기능은 무엇인지"와 "어떤 기능이 시장에서 차별화될 수 있는지"를 종합적으로 고려하여 최종 제품 사양을 결정합니다.


최종 결과: 결과적으로, 팀은 고객의 요구를 충족시키고 경쟁력을 갖춘 스마트폰을 성공적으로 출시하게 됩니다. 질문 개선을 통해 더 나은 정보와 다양한 관점을 확보하여 의사결정의 질을 높일 수 있었습니다.


※ 본 요약은 Coursera의 Vanderbilt University ‘프롬프트 엔지니어링 특화 과정’ 학습 내용을 바탕으로 작성된 개인 학습 기록입니다. 공정 이용(fair use) 범위 내에서 작성되었으며, 강의 원문 및 자료의 직접 복제·캡처는 저작권에 의해 금지됩니다.- by Coursera Plus - "Learning Notes and Summaries by Digitalian”

keyword
작가의 이전글질문 구체화 패턴