테마
08. 지식 선주입과 자기 점검
긴 작업에서 중요한 것은 한 번의 좋은 답변이 아니라, 대화가 끝날 때까지 방향이 틀어지지 않는 것이다.
1. 지식 선주입이란?
지식 선주입은 작업 전에 관련 배경지식이나 문서를 먼저 컨텍스트에 넣어두는 방식이다.
예를 들면:
- 용어 정의
- 사내 가이드라인
- 논문 초록
- 매뉴얼 문서
- 법령, 정책, 규정 요약
이렇게 미리 넣어두면 모델은 이후 답변에서 그 정보를 참고하기 쉬워진다.
핵심은 모델이 갑자기 똑똑해지는 것이 아니라, 내가 준 기준으로 읽게 되는 것이다.
2. 언제 특히 유용한가?
지식 선주입은 아래처럼 배경지식이 분명한 분야에서 유용하다.
- 회사 내부 용어가 많은 작업
- 특정 도메인 문서를 요약하거나 해석할 때
- 일정한 규칙을 따라야 하는 문서 작성
- 논문/보고서 초안처럼 앞부분 맥락이 계속 중요할 때
예를 들어 먼저 가이드라인을 넣고,
text
앞으로 답변은 아래 브랜드 가이드라인을 기준으로 작성해줘.이후에 문구 작성, 수정, 검토를 계속 이어가는 식이다.
3. 문서를 통째로 넣는다고 항상 좋아지지는 않는다
선주입의 함정도 있다.
- 정보가 너무 많으면 핵심이 묻힌다
- 오래된 정보와 새 정보가 섞이면 혼선이 생긴다
- 관련 없는 자료까지 주면 오히려 품질이 떨어진다
그래서 보통은 아래 방식이 더 좋다.
| 나쁜 방식 | 더 나은 방식 |
|---|---|
| 자료를 무작정 다 넣기 | 현재 작업에 필요한 부분만 선별 |
| 문서만 던지고 끝내기 | 어떤 관점으로 읽을지 같이 지정 |
| 한번 넣은 뒤 영원히 믿기 | 중간중간 방향 점검 수행 |
4. 형성평가: 내가 시킨 의도를 제대로 이해했는지 점검하기
형성평가는 원래 학습 과정의 진행 상태를 점검하는 개념이다.
프롬프트 작업에서는 이를 이렇게 바꿔 쓸 수 있다.
"지금 네가 이해한 이 작업의 목적은 무엇이야?"
이 질문은 단순하지만 매우 강하다.
모델이 엉뚱한 방향으로 작업하고 있을 때, 중간에 바로 궤도를 수정할 수 있기 때문이다.
이 과정은 긴 작업에서 특히 유용하다.
5. 전략평가: 무엇을 하려는지가 아니라 어떻게 하려는지 점검하기
형성평가가 목적 확인이라면, 전략평가는 접근 방식 확인이다.
예:
- 어떤 기준으로 요약하고 있는가?
- 무엇을 우선순위로 두고 있는가?
- 어떤 식으로 비교하고 있는가?
전략평가 질문 예시:
text
지금 이 문서를 평가할 때 어떤 기준과 전략을 사용하고 있는지 설명해줘.이 답을 보면 두 가지가 가능하다.
- 전략이 괜찮으면 그대로 진행
- 전략이 이상하면 바로 수정 피드백 제공
즉, 결과물을 기다렸다가 망한 뒤 고치는 것이 아니라 중간 전략부터 고쳐서 손실을 줄이는 것이다.
6. 메타인지 평가: 스스로의 한계를 설명하게 만들기
메타인지 평가는 모델에게 자기 방식의 문제점이나 한계를 설명해보라고 하는 것이다.
예:
text
지금 네 답변 방식의 약점이나 놓치고 있을 수 있는 부분을 스스로 점검해줘.물론 이 답이 언제나 완전히 사실이라고 믿을 수는 없다.
그래도 이 질문이 유용한 이유는 다음과 같다.
- 모델이 점검 프레임을 텍스트로 다시 세운다
- 다음 답변에서 그 프레임이 일부 반영될 수 있다
- 사용자가 채택/폐기할 판단 근거가 생긴다
즉, 메타인지 평가는 "정답 확인"이라기보다 자기 점검 루프를 대화 안에 넣는 장치에 가깝다.
7. 긴 작업에서 이 세 가지를 어떻게 함께 쓸까?
형성평가, 전략평가, 메타인지 평가는 따로도 쓰지만 함께 돌리면 더 강하다.
긴 기획서, 발표자료, 보고서 초안 작업에 특히 잘 맞는다.
8. 실전에서 자주 하는 실수
8.1 배경지식을 너무 많이 넣는다
많이 넣는다고 항상 좋아지지 않는다.
현재 작업에 필요한 정보만 선별하는 편이 낫다.
8.2 점검 질문을 너무 자주 던진다
중간 점검은 유용하지만, 매 답변마다 하면 오히려 흐름이 끊긴다.
8.3 점검 결과를 검증 없이 믿는다
형성평가, 전략평가, 메타인지 평가는 모두 참고용이다.
최종 판단은 여전히 사용자가 해야 한다.
9. 추천 사용 순서
- 관련 자료나 기준을 먼저 넣는다
- 초안이나 분석 결과를 받는다
- 형성평가로 목적 이해를 확인한다
- 전략평가로 접근 방식을 확인한다
- 메타인지 평가로 스스로의 약점을 점검하게 한다
- 교정 피드백을 반영해 다음 답변을 받는다
이 순서만 기억해도 긴 대화의 방향성을 훨씬 잘 유지할 수 있다.
핵심 정리
- 지식 선주입은 작업 전에 관련 기준과 문서를 먼저 넣어두는 방식이다
- 형성평가는 목적 이해를, 전략평가는 접근 방식을, 메타인지 평가는 자기 한계를 점검하게 한다
- 이 세 가지는 긴 작업에서 방향이 틀어지는 것을 막는 데 특히 유용하다
- 점검 질문은 강력하지만 참고 도구일 뿐이며, 최종 판단은 사용자가 해야 한다