표를 물어보기에 좋은 방법이 있을까요?

[데이터 빅]

클로바 chat completions을 사용 중,

system : 

[계산식]을 바탕으로 [질문]에 답해줘

user :

[계산식] 사기금엑에 따른 벌금

- 1000만원 미만 : 벌금 10만원

- 1000만원 이상 ~ 3000만원 미만 : 벌금 100만원

- 3000만원 이상 ~ 8800만원 미만 : 벌금 500만원

- 8800만원 이상 ~ 3억 원 미만 : 벌금 1000만원

- 3억 원 이상 : 벌금 3000만원

[질문] 사기금액이 8000만원이면 벌금을 얼마를 내야 해?

 

와 같이 표로 이루어져 있는 내용을 text로 바꾸어서 던졌는데요,

결과가 아래와 같이 나왔습니다.

 

사기금액이 8000만원인 경우, 벌금은 다음과 같이 계산됩니다.

- 해당 구간: 8800만원 이상 ~ 3억 원 미만

- 벌금: 1000만원

따라서, 사기금액이 8000만원일 때 벌금은 1000

 

위와 같이 결과에서 구간을 잘 인식하지 못했는데요, 이를 해결할 수 있는 방법이 있을까요?

[CLOVA Studio 운영자]

안녕하세요, @데이터 빅 님,

특정 금액 구간을 참고하여, 답변하는 것을 생각중이신 것으로 이해했습니다.

아래와 같이, 시스템 프롬프트 보강 및 적절한 예제를 넣어보는 형태로 작업 제안드립니다.

7000만원의 구간이 어디인지 사전 정보를 넣어서, 개선이 되는 것을 확인했습니다.

또한 최대한 주어진 정보를 토대로 답변을 해야하는 것으로 보여, Repetition penalty를 1.2로 낮추고, temperature도 낮추는 것이 좋을 것 같습니다.

지속적으로 모델을 개선하고자 노력하고 있습니다.

앞으로도 많은 관심과 이용 부탁드립니다.

감사합니다.