지시 튜닝

정의

모델이 사람의 지시를 더 잘 알아듣고 따르도록 다듬는 학습 단계.

자세한 설명

모델이 사람의 지시를 더 정확히 알아듣고 그대로 따르도록 다듬는 학습 단계입니다. 사전학습만 마친 모델은 다음 말을 이어 쓰는 데는 능숙해도 이걸 세 문장으로 요약해 줘 같은 구체적인 요청을 바로 알아듣지 못할 수 있습니다. 지시와 그에 맞는 바람직한 답을 묶어서 많이 보여 주며 다듬으면, 지시한 형식까지 지켜 답하는 지금의 대화형 AI 가 됩니다. 사전학습이 기초 지식을 쌓는 단계라면, 지시 튜닝은 그 지식을 실제 대화에서 쓰도록 길을 터 주는 단계라고 보면 됩니다.

예를 들면

지시 튜닝을 거친 모델은 세 줄로 요약해라는 말의 형식까지 지켜 답합니다.

관련 용어