결정 모델(Jev)의 쓸모는 정답률보다 모를 때 물러서는 방식에 있다
글을 쓰지 않고 판단만 돌려주는 결정 모델 jev를 분류 과제 120건에서 추론형 LLM과 나란히 돌려 봤습니다. 정답률은 LLM에 조금 못 미쳤지만 모를 때 물러서는 모양이 좋았고 같은 입력에는 같은 답을 내서, LLM을 대신하는 자리보다 LLM 앞에 세우는 자리가 맞았습니다.
글을 쓰지 않고 판단만 돌려주는 결정 모델 jev를 분류 과제 120건에서 추론형 LLM과 나란히 돌려 봤습니다. 정답률은 LLM에 조금 못 미쳤지만 모를 때 물러서는 모양이 좋았고 같은 입력에는 같은 답을 내서, LLM을 대신하는 자리보다 LLM 앞에 세우는 자리가 맞았습니다.
AI가 보편적 지식을 다 흡수하는 시대에 진짜 moat는 무엇인가. 종이와 도서관 이야기에서 출발해, 퇴사한 분께 여러 번 연락을 드려야 했던 인수인계 경험을 거쳐, 조직의 개별적 지식을 사람과 AI가 함께 읽는 지식 그래프로 남기려고 OKF와 nxtgen-ax를 만든 과정을 정리했습니다.