柯克派翠克四層次評估
Kirkpatrick Model
柯克派崔克四階段評估是什麼?
- 反應→學習→行為→結果 四層次評估
- 超越滿意度,以績效評估教育成效
- 層級越往上,衡量的價值越大
柯克派翠克模型真正改變的是評估的時間點。大多數教育承辦人都是課程結束後才煩惱要問什麼;但如果好好運用這個模型,會在規劃階段就先把「這堂課結束六個月後,現場應該出現什麼行為才算成功」寫成一句話。有了這句話,課程內容才會調整、才會出現作業,也才會有主管介入的位置。當它被當作設計工具而非評量工具來用,這個模型才會發揮價值。
四個階段的評量成本與說服力呈現完全相反的走向。第一階段的反應只要一張問卷就能完成,但在高階主管面前無法作為依據;第四階段的結果則會用營收、不良率、離職率等數字,但因混入教育以外的變數,很難主張因果關係。因此現場常見的做法,是以第三階段的行為為主軸。教育後 4 到 12 週,詢問主管、同事「這個人有什麼改變」,是性價比與可信度最好的方式。另外,菲利普斯(Jack Phillips)在此基礎上加上ROI作為第五階段;柯克派翠克的後繼者提出的「New World 模型」,則把支撐第三階段的現場環境(主管支持、獎勵、制度)單獨列為「必要驅動因素」來處理。
最常見的誤解,是相信第一階段分數高,第四階段自然跟著高。講師滿意度拿到 4.8 分的課程,三個月後行為改變為零,這種情況並不少見。因為「有趣」與「轉化為行動」是不同的變數。另一個常見的失誤,是教育組獨自想證明第四階段而出的問題。業務培訓後報告銷售額成長了 12%,主管反問「那不是新產品上市的效果嗎?」,當場就站不住腳。沒有對照組,或至少沒有「受訓後 vs 未受訓者」的比較就主張成效,下一年的預算審議中反而會失去信任。
唐納德・柯克派翠克(Donald Kirkpatrick)以 1954 年的博士論文為基礎,於 1959 年以一系列論文發表了這套四層次(反應、學習、行為、結果)評估模型。之後他的著作《Evaluating Training Programs》(1993)使其廣為人知。
舉例來說,假設一家擁有 900 名全體員工、生產建材的 A 公司。前一年安全事故全年發生 14 件,遭到本部長警告;隔年對全體生產線員工辦了兩次 4 小時的「危險預知訓練」,事故卻沒有減少。教育組長被問到「滿意度 4.6 分,為什麼現場還是老樣子?」,於是從第三期課程起,把柯克派翠克四層次納入設計階段。
- 教育組長在企劃書第一行改寫:不是寫「實施危害預知訓練」,而是先寫下第三階段的目標——「作業前五分鐘 TBM 中,組長要親口說出兩項以上的危害因素」,再從這個目標反推,砍掉不需要的課程內容。
- 在第一階段問卷中,拿掉「講師很有熱忱」這一題,改為主觀題:「請寫下明天在我們產線可以直接用的三個項目」。交白卷的比例從 38% 降到 11%。
- 第 2 階段改以 12 張實物照片取代測驗,請學員找出其中的危險因素。平均從 4.2 個提升到 8.1 個,但生產部長表示「找得到和說得出來是兩回事」,要求進行第 3 階段的確認。
- 第三階段的做法是:教育 6 週後,安全管理人員隨機到現場參與 27 次 TBM。組長主動說出危害因素的比例只有 33%,結果顯示問題不在教育本身,而是「組長很忙」的環境。
- 因此把 TBM(班前危害預知會議)檢核表精簡成一頁,並在班長的 KPI 中加入觀察項目。重新評量後,發言比例升到 81%;屬於第四階段指標的未遂事故通報,從每月 6 件增加到 23 件,實際事故則從全年 14 件降到 5 件。
金輝
金鍾赫