혼동 행렬Confusion Matrix

네 칸에는 각자 이름이 있어요

가로줄과 세로줄이 만나는 자리마다 부르는 이름이 정해져 있어요. 찾으려는 것을 제대로 찾아낸 칸은 참 양성, 아닌 것을 그렇다고 잘못 고른 칸은 거짓 양성이에요. 진짜인데 놓친 칸은 거짓 음성, 아닌 것을 조용히 넘긴 칸은 참 음성이고요.

이름이 어렵게 들리지만 규칙은 단순해요. 앞의 참과 거짓은 판정이 맞았는지, 뒤의 양성과 음성은 그렇다고 했는지 아니라고 했는지를 가리켜요. 헛 경보는 거짓 양성, 놓친 불은 거짓 음성이에요.

지표는 전부 이 표에서 나와요

정확도는 네 칸 중 맞힌 두 칸을 전부 더해 전체로 나눈 값이에요. 정밀도는 경보가 울린 두 칸만 놓고 그중 진짜 불이었던 몫을 보고, 재현율은 실제로 불이 났던 두 칸만 놓고 그중 경보가 울린 몫을 봐요.

같은 표에서 어느 두 칸을 짝지어 보느냐만 다를 뿐이에요. 그래서 지표 이름이 헷갈릴 때는 표를 먼저 그려 놓고 어느 줄을 밑에 까는지 짚어 보면 금방 풀려요.

지표 하나만 받아 보면 나머지 칸이 어떻게 생겼는지 알 수 없지만, 표를 받으면 지표를 전부 직접 만들어 볼 수 있어요. 평가 결과를 넘겨받을 때 숫자가 아니라 표를 달라고 하는 이유예요.

두 가지 실수는 무게가 달라요

표를 보는 진짜 이유는 틀린 칸 두 개를 갈라서 보기 위해서예요. 헛 경보는 사람들이 한 번 나갔다 들어오면 끝나지만, 놓친 불은 돌이킬 수 없어요.

이 무게 차이는 표를 봐야만 드러나요. 한 숫자로 요약된 성적은 두 실수를 똑같이 한 번씩으로 세니까요. 어느 칸이 커지는 것을 감수하고 어느 칸을 줄일지 정하는 일이 실제 현장의 선택이에요.

판정 기준을 조이거나 풀면 두 칸 사이에서 숫자가 옮겨 다녀요. 예민하게 맞추면 헛 경보 칸이 커지면서 놓친 칸이 줄고, 둔하게 맞추면 반대가 돼요. 표를 두 장 놓고 견주면 조정이 어느 쪽으로 작용했는지 한눈에 보여요.

종류가 여럿이면 표가 커져요

가르는 종류가 셋이면 표는 세 줄 세 칸, 열이면 열 줄 열 칸이 돼요. 대각선에 놓인 칸이 제대로 맞힌 자리고, 대각선을 벗어난 칸은 전부 헷갈린 자리예요.

큰 표에서는 어느 칸이 유난히 두꺼운지를 봐요. 비슷하게 생긴 두 종류가 서로 오가며 섞이는 일이 흔한데, 그런 짝은 한 칸에 숫자가 몰려서 대번에 눈에 띄어요. 학습 자료를 어느 종류부터 더 모아야 할지 정하는 데 바로 쓰여요.

숫자가 아니라 비율로 칠해 보면 더 잘 보여요. 종류마다 자료 수가 다르면 원래 개수만으로는 비교가 어렵거든요. 줄마다 합이 같아지도록 맞춰 놓고 색의 진하기로 읽으면, 어느 줄이 유난히 흐린지가 대번에 드러나요.