결정 모델(Jev)의 쓸모는 정답률보다 모를 때 물러서는 방식에 있다
글을 쓰지 않고 판단만 돌려주는 결정 모델 jev를 분류 과제 120건에서 추론형 LLM과 나란히 돌려 봤습니다. 정답률은 LLM에 조금 못 미쳤지만 모를 때 물러서는 모양이 좋았고 같은 입력에는 같은 답을 내서, LLM을 대신하는 자리보다 LLM 앞에 세우는 자리가 맞았습니다.
Author

리드 SA/FDE 엔지니어
리드 SA/FDE 엔지니어로 AI/Cloud/FDE, 더 나아가 팀과 동료, 의사결정과 일에 대한 생각을 주로 씁니다.
글을 쓰지 않고 판단만 돌려주는 결정 모델 jev를 분류 과제 120건에서 추론형 LLM과 나란히 돌려 봤습니다. 정답률은 LLM에 조금 못 미쳤지만 모를 때 물러서는 모양이 좋았고 같은 입력에는 같은 답을 내서, LLM을 대신하는 자리보다 LLM 앞에 세우는 자리가 맞았습니다.
EKS·ArgoCD·ClickHouse Cloud 환경에서 Langfuse를 v3에서 v4로 무중단 업그레이드한 기록입니다. 다섯 단계로 쪼갠 이유, 공식 가이드가 다루지 않는 Helm 차트 v2 전환과 ClickHouse Cloud GRANT 보정, 직접 밟은 함정과 정합성 검증 쿼리를 정리했습니다.
ClickHouse는 조인에 약하다는 통념을 DuckDB와 같은 조건에서 TPC-H SF100까지 직접 재봤습니다. 조인 성능을 가르는 건 엔진이 아니라 플래너였고, 그 통념은 25.8까지의 얘기였습니다.
에이전트를 만들 때 프롬프트보다 오래 걸리는 일은 고객이 덩어리로 준 것을 어디까지 쪼갤지 정하는 일입니다. 데리다의 해체를 빌려 그 과정을 정리했습니다.
에이전트가 짠 코드가 세션마다 다른 패턴을 고르는 문제를 컨벤션 저장소와 디자인 시스템으로 6개월간 잡아 온 과정과 배운 점을 정리했습니다.
dense 27B인 Qwen3.8을 M4 Pro 48GB 맥에서 4bit로 돌리면 실제로 얼마나 나오는지, 직접 벤치를 돌리며 배운 평가 프로토콜의 함정을 정리했습니다.
파라미터 값 하나가 비어 있어 RDS MariaDB가 엿새에 걸쳐 스토리지 고갈로 죽어간 장애를 추적한 과정과, 운영 DB에 statement timeout이 필수인 이유를 정리했습니다.
AI 활용률 92%라는 숫자는 사람이 실제로 사고했는지 말해주지 않습니다. 해커톤에서 받은 질문을 계기로 FDE가 갖춰야 할 사고 방식을 정리했습니다.