평가 오류 · 관대화·중심화·최근 효과
Rater Errors in Performance Appraisal
평가 오류란?
- 평가 오류는 양심이 아니라 판단의 치우침
- 분포·시간과 비교·사람, 세 갈래로 구분
- 분포 점검과 관찰 기록 같은 절차로 줄인다
평가 오류를 평가자의 양심이나 성의 문제로 보면 대책은 '공정하게 평가하라'는 당부로 끝납니다. 그러나 평가 오류는 성실한 평가자에게도 일정한 방향으로 나타나는 판단의 치우침입니다. 기억은 최근 일에 쏠리고, 갈등은 피하고 싶고, 비교 대상에 따라 눈높이가 흔들립니다. 그래서 오류는 의지가 아니라 절차로 줄이는 것이 실무의 출발점입니다.
오류는 크게 세 갈래로 나눠 보면 정리가 쉽습니다. 첫째는 분포 오류로, 점수가 한쪽에 몰리는 현상입니다. 대부분에게 높은 점수를 주는 관대화, 모두를 보통에 두는 중심화, 전반적으로 낮게 주는 엄격화가 여기에 듭니다. 둘째는 시간·비교 오류입니다. 평가 직전 두세 달의 일만 반영하는 최근 효과, 초반 인상이 끝까지 가는 초두 효과, 바로 앞사람과 견줘 점수가 흔들리는 대비 효과가 있습니다. 셋째는 사람에 대한 오류로, 한 가지 장점이 전체 점수를 끌어올리는 후광 효과, 자신과 닮은 사람에게 후한 유사성 오류가 대표적입니다.
진단은 숫자로 할 수 있습니다. 평가자별 등급 분포를 뽑아 상위 등급 비율이 조직 평균보다 뚜렷하게 높으면 관대화, 표준편차가 유난히 작으면 중심화를 의심합니다. 한 사람의 항목별 점수가 모두 같다면 후광 효과의 신호입니다. 대책도 오류마다 다릅니다. 최근 효과에는 분기별 관찰 기록이, 분포 오류에는 등급별 기준 문장과 조정 회의가, 대비 효과에는 사람 단위가 아니라 항목 단위로 전원을 평가하는 순서가 듣습니다.
현장에서 어긋나는 지점은 오류 교육을 한 번 하고 끝내는 것입니다. 오류의 이름을 아는 것과 줄이는 것은 다른 일이어서, 기록 양식과 분포 점검이 따라붙지 않으면 다음 평가에서 같은 분포가 나옵니다. 반대로 강제 배분을 오류의 해법으로 쓰는 것도 조심해야 합니다. 분포는 고르게 보이지만 실제로 모두 잘한 팀에서는 근거 없는 하향이 일어나, 치우침을 다른 종류의 불공정으로 바꿔 놓을 뿐입니다.
| 구분 | 대표 오류 | 드러나는 신호 | 줄이는 방법 |
|---|---|---|---|
| 분포 오류 | 관대화·중심화·엄격화 | 등급 쏠림, 작은 표준편차 | 등급별 기준 문장, 조정 회의 |
| 시간·비교 오류 | 최근 효과·초두 효과·대비 효과 | 근거가 특정 시기에 몰림 | 분기별 관찰 기록, 항목 단위 평가 |
| 사람에 대한 오류 | 후광 효과·유사성 오류 | 항목별 점수가 모두 같음 | 항목별 독립 평가, 복수 평가자 |
평가자의 점수가 실제 성과와 체계적으로 어긋난다는 문제는 산업·조직심리학의 인사평가 연구에서 오래 다뤄 온 주제이며, 관대화·중심화·후광 효과 같은 이름도 그 연구 흐름 속에서 정리됐습니다. 오늘날에는 평가자 교육의 기본 항목으로 쓰입니다.
가상의 사례로 살펴보겠습니다. 임직원 350명 규모의 유통사 A사는 팀장 28명이 1차 평가를 합니다. 지난해 전체의 71%가 5점 척도에서 4점 이상을 받았고, 한 팀은 9명 전원이 같은 점수였습니다. 평가 등급이 보상 차등의 근거 역할을 하지 못한다는 지적이 나왔습니다.
- 인사팀 과장이 팀장 28명의 평가 분포를 뽑습니다. 4점 이상 비율이 85%를 넘는 팀장이 9명, 점수 표준편차가 0.3 이하인 팀장이 6명으로 나타납니다.
- 평가자 교육에서는 이름을 가린 본인의 분포표를 한 장씩 나눠 줍니다. 한 팀장이 "제가 이렇게 다 똑같이 줬는지 몰랐습니다"라고 말합니다.
- 물류팀장은 평가 근거 메모가 10월 이후 일뿐인 것을 확인합니다. 인사팀은 분기마다 팀원당 관찰 기록 두 줄을 남기는 칸을 평가 시스템에 추가합니다.
- 평가 화면은 사람별 입력에서 항목별 입력으로 바뀝니다. 팀장은 '목표 달성' 항목에서 팀원 전원을 먼저 비교한 뒤 다음 항목으로 넘어갑니다.
- 등급마다 기준 문장을 두 줄씩 붙입니다. 4점은 '목표를 넘기고 동료의 일까지 도운 사례가 있음'으로 적혀, 팀장들이 점수를 줄 때 사례를 떠올리게 됩니다.
- 다음 평가에서 4점 이상 비율은 71%에서 46%로 내려가고, 전원 동점 팀은 사라집니다. 표준편차 0.3 이하인 팀장은 6명에서 1명이 됩니다.