if(kakaoAI)2024

세션 77 상세

세션 영상

세션 정보

FunctionChat-Bench: 도구 연결 대화에서의 언어모델 생성 능력 평가카카오

Function Call은 언어모델과 외부 도구를 연결해 실시간 정보를 이용하거나 실세계 동작을 수행하도록 하는 기술입니다. 기술 개발과 성능 향상을 위해서는 항상 좋은 측정 방법이 필요한데요. 외부 도구를 사용하는 한국어 대화 환경에서의 Function Call 성능을 다면적으로 평가할 수 있도록 개발한 FunctionChat-Bench를 소개합니다.

이신복 (niki.y)

Language Model의 학습과 평가를 위해 언어데이터를 다루고 있는 링기스트 니키입니다.