튜닝과 누적학습 관련 하여 질문 드립니다.

[nsjpa]

현재 clova studio에 학습되어 있는 걸 기본 모델이라고 한다면

1.
1-1.튜닝을 통한 추가 학습한 값은 기본 모델에 추가가 되는 개념인가요?
1-2.아니면 개인 계정에 생성한 튜닝 모델에 기본 모델이 추가 되는 개념인가요

1-1이라면 모든 계정 사용자가 튜닝 한 값들이 학습되어 clova studio 에 적용되어 플레이그라운드에서도 확인이 되는 프로세스인지
1-2라면 본 계정에서 튜닝 해서 넣은 값들에 기본 모델 값이 추가 되어 api등을 이용할 때 본 계정에서 튜닝 학습한 결과들이 높게 나오는 방식인지 궁금합니다.

질문을 드리게 된 이유는
튜닝 시 누적 관련해서 프로세스가 어떻게 되는지 궁금해서 입니다.

1-1 이면 글로벌이니 지속적으로 튜닝을 할 경우 누적이 될 거 같은데요
1-2 일 경우는 내 작업 메뉴에 튜닝 리스트가 있는데 해당 목록을 각각의 모델로 보게 되면 수정이 없기 때문에 누적이 안된다고 생각이 들고
기존 목록에 넣었던 값을 추가 세트와 같이 넣어서 새로 생성을 해야 된다 생각이 들어서 입니다. 그럴 경우는 토큰 가격이 중복으로 드는 경우가 생겨서 입니다.

 

2. 지난번 키워드를 통한 질문 추출 셋을 샘플로 보여주셨는데요
크롤링한 뉴스 기사를 샘플로 질문 셋을 프롬프트에 넣고 다른 기사에 대한 질문 생성을 만드는 과정을 하는데 잘 안되어서
해당 결과가 잘못 나오는 원인이 뭔지 간단하게나마 설명 해주시면 앞으로 프롬프트 구성에 도움이 될 것 같습니다.

샘플은 플레이 그라운드 전체 목록에
1월 30일에 생성한
'내용,키워드 추출,질문 생성' 이라는 제목으로 전체 공개 해두었습니다.

목적은 설명 하나에 질문 3~5개 정도 추출 후 정비하여 튜닝에 대화셋이나 질문답변셋에 학습 시킬 목적입니다.

[CLOVA Studio 관리자2]

안녕하세요, @nsjpa님, 클로바 스튜디오 기획 담당입니다.

1. 튜닝을 진행하면 해당 계정에 한해서 튜닝 모델 이용이 가능합니다. 튜닝된 작업물이 기본 모델이 추가되지 않습니다. 현재 플레이그라운드에서 튜닝된 모델을 불러오는 기능은 제공하지 않으며, 검토중에 있습니다. 튜닝 작업을 수행하신 뒤 테스트앱을 발급하시어, API 연동 및 파라미터 조절등을 하실 수 있습니다.

각각 서로 다른 튜닝 작업을 진행하신 것은 누적되는 방식이 아닙니다. 따라서 튜닝 작업을 수행하신 뒤 또 다른 튜닝 작업을 수행하시는 것은 별개의 작업이며, 마찬가지로 토큰이 중복 차감될 수 있습니다.

 

2. 현재 플레이그라운드에서 해보았을때, 말씀하신대로 결과가 잘 나오지 않았습니다.

아래와 같이 프롬프트 예제를 더 추가하였더니, 정답에 가깝게 출력되었습니다.

아무래도 이런류의 작업은 2048 토큰의 제약 때문에 예제를 많이 넣을수 없을텐데요. 짧은 유형의 예제들로 구성해보시는건 어떨까요?

원문에 없는 키워드가 추출되는 문제는 튜닝을 통해서 개선이 될 수 있으리라 생각됩니다.