Jump to content

Object Storage에 데이터를 업로드 후 튜닝 API에서 사용했을 때 토큰 수 측정 문의


Recommended Posts

안녕하세요.

튜닝 API를 이용하여 HCX-300 모델을 튜닝하던 중 데이터셋의 토큰 수 측정과 관련하여 궁금한 점이 생겨서 글 남깁니다.

기존에 튜닝 API를 호출할 때 로컬 내 데이터 경로를 직접 참조하였을 때에는 튜닝된 모델 정보에 데이터셋의 토큰 수가 계산되어 나왔는데, Object Storage에 업로드한 데이터를 불러와 튜닝을 진행했을 때에는 데이터셋의 토큰 수가 0이라고 나왔습니다. 토큰 수가 0이라고 나온 것이 Storage와 연결하는 중 문제가 생긴 것인지 궁금합니다.

[Object Storage 사용]

image.png.12cfdbed54343142aec1c26aa08a306f.png

[데이터 경로 직접 참조]

image.png.d4b0629444498559a04dfc7c796a519b.png

링크 복사
다른 사이트에 공유하기

게시글 및 댓글을 작성하려면 로그인 해주세요.



로그인
×
×
  • Create New...