332
에이전트 시대의 AI 시스템 설계
5.5
패턴
16
: 지시사항 진화
지시사항 진화
Evol
-
Instruct
패턴은 사전훈련된 모델에 복잡한 작업을 새로 가르치기 위한 데이터
셋을 효율적으로 생성하는 방법이다. 수많은 예시 (입력-출력 쌍 )로 이루어진 대규모 데이터
셋을 이용해서 모델에게 작업 수행 방법을 가르치는 것을
지시사항 조정
instruction
tuning
이라고 부
른다. 이 패턴의 이름이 지시사항
진화
인 것은 이유는 초기 지시사항 (입력 ) 데이터셋을 진
화
evolution
시켜서 지시사항 조정을 위한 데이터셋을 만들기 때문이다.
5.5.1
문제
기초 모델은 사전훈련 과정에서 수많은 작업의 수행 방법을 배운다. 하지만 그런 작업들은 대
체로 모델 제공업체가 예상했거나 소비자용 애플리케이션에서 접한 것들이다. 그런 작업들은
또한 훈련에 사용할 데이터가 공개된 작업들인 경우가 많다. 예를 들어 사전훈련된 모델이 하
이쿠를 써달라는 요청을 척척 처리할 수 있는 이유는 하이쿠 작성을 원하는 사람이 많아서 모
델 제공업체가 그것을 훈련 지시사항에 포함시켰기 때문이자, 기초 모델의 훈련에 쓰인 말뭉
치
corpus
에 하이쿠 예시가 충분히 많았기 때문이다.
하지만 회사 업무 관련 작업은 그런 조건들을 충족할 가능성이 아주 낮다. 어떤 건물이 회사 제
품 창고로 적합한지에 관한 보고서를 작성하는 업무를 생성형
AI
모델에게 맡긴다고 하자. 기
초 모델이 이 작업을 제대로 수행할 가능성은 얼마나 될까? 과연 모델 제공업체가 타당성 보
고서가