2026년 3월 12일 · 읽는 시간 약 6분
정확도 함정: 99%가 위험한 이유
벤더 슬라이드에 ‘정확도 99%’가 크게 적혀 있으면, 회의실은 잠시 조용해집니다. 좋은 숫자처럼 보이기 때문입니다. 그런데 사기 탐지, 희귀 질환 스크리닝, 설비 이상 감지처럼 관심 사건이 드문 문제에서는 그 숫자가 거의 아무 말도 하지 않을 수 있습니다.
아무것도 안 해도 99%?
1,000건 중 이상이 10건뿐이라면, 모든 건을 ‘정상’이라고만 외쳐도 정확도는 99%입니다. 모델은 똑똑해 보이지만, 정작 잡고 싶은 10건은 전부 놓칩니다. Aladatl 입문 과정의 ‘점수 읽기’ 주간에서 가장 먼저 꺼내는 예시이기도 합니다.
무엇을 물어야 할까
정확도 대신, 놓쳤을 때의 비용과 오탐의 비용을 물어보세요. 재현율·정밀도·비용 행렬 같은 단어가 부담스럽다면, “우리가 놓치면 얼마가 깨지고, 잘못 알람이 울리면 누가 고생하나요?”라고 말해도 충분합니다.
한 줄 정리
높은 정확도는 출발점이 될 수 있지만, 희귀 사건 앞에서는 도착점이 아닙니다. 다음 미팅에서는 숫자 하나보다 실패의 종류를 먼저 적어 보세요.