결정 모델(Jev)의 쓸모는 정답률보다 모를 때 물러서는 방식에 있다
글을 쓰지 않고 판단만 돌려주는 결정 모델 jev를 분류 과제 120건에서 추론형 LLM과 나란히 돌려 봤습니다. 정답률은 LLM에 조금 못 미쳤지만 모를 때 물러서는 모양이 좋았고 같은 입력에는 같은 답을 내서, LLM을 대신하는 자리보다 LLM 앞에 세우는 자리가 맞았습니다.
글을 쓰지 않고 판단만 돌려주는 결정 모델 jev를 분류 과제 120건에서 추론형 LLM과 나란히 돌려 봤습니다. 정답률은 LLM에 조금 못 미쳤지만 모를 때 물러서는 모양이 좋았고 같은 입력에는 같은 답을 내서, LLM을 대신하는 자리보다 LLM 앞에 세우는 자리가 맞았습니다.