概念地圖・柯氏四層次評估
分類:生產力
這一頁不只是把一個概念解釋一遍——一張自己畫的結構圖,加上拿台灣情境從頭走一次的實例演練、這個框架什麼時候會騙你,以及它接回 P.A.I.N. 之後長什麼樣。一頁必須交付的三層 →
柯氏四層次評估:訓練做完了,然後呢
課程結束,發下滿意度問卷,平均 4.7 分,承辦人鬆一口氣,年度訓練報告上寫「成效良好」。柯氏四層次評估(Kirkpatrick Four-Level Model)就是為了戳破這口氣:它把「有沒有效」拆成四層——反應(他喜不喜歡)、學習(他學會了嗎)、行為(他回去以後真的改了嗎)、成果(公司的數字有沒有動)。四層由下往上,越上面越難量、也越是你真正想要的。而多數公司的訓練評估,永遠停在最底下那一層。
四層各自在量什麼
這套模型由 Donald Kirkpatrick 在 1950 年代提出,原本只是他博士論文裡的四個問題,後來成為企業訓練界最通行的評估語言。它之所以歷久不衰,是因為它用最少的字講清楚一件事:喜歡、學會、做到、有用,是四件必須分開驗的事。
| 層次 | 問的問題 | 怎麼拿證據 | 做假的樣子 |
|---|---|---|---|
| 1 反應 | 他覺得這堂課如何 | 課後問卷、當場回饋 | 當成有沒有效的結論 |
| 2 學習 | 知識與技能有變嗎 | 前後測、實作演練 | 只有後測,沒有前測 |
| 3 行為 | 回工作崗位後改了嗎 | 主管觀察、行為紀錄 | 用自評問卷代替觀察 |
| 4 成果 | 公司的數字有沒有動 | 營運指標、對照組 | 把同期所有好消息都算進來 |
要拿到每一層的證據,先過四個自問
四層的難度並非等距往上,每一層都需要一種前一層不需要的準備。準備沒做,那一層就量不到。
一、這層的證據,是他自己說的還是被看見的。第一層與第二層可以靠學員自陳,第三層一旦也用自陳,整套評估就塌了——沒有人會在問卷上說「我上完課什麼都沒改」。行為層的證據必須來自外部:主管的觀察紀錄、系統裡留下的痕跡、客戶端的反饋。這是四層之中最花力氣、也最常被跳過的一層。自問:如果這個人自己不回答,我還拿得到第三層的證據嗎?
二、你有沒有課前的那個數字。學習層要證明的是「變化」,而變化需要兩個時間點。多數內訓只在課後考一次,於是分數再高也無法排除「他本來就會」。前測的成本很低——課前十分鐘一份小測驗或一個實作任務就夠,價值卻是整層評估的地基。自問:這批人上課前的水準,我手上有數字嗎?
三、行為的觀察窗口,開得對不對。不同的技能,改變顯形的速度差很多:一個新的表單填法可能一週就看得出來,一個溝通習慣要三到六個月。窗口開太早會誤判成沒效,開太晚則會被其他變化污染。實務上的做法是先問「這個行為多久會有一次自然發生的機會」,再乘上三到五次。自問:他要用到這個技能,一個月大概有幾次機會?
四、第四層的那個數字,是開課前就講定的嗎。成果層最大的失敗模式是事後才去找數字——課上完了,回頭在報表裡翻找哪個指標剛好上升。正確的順序是倒過來:先跟業務單位談定「這門課要影響的是哪個數字、預期動多少、多久後看」,再回頭設計課程內容。自問:這門課要動的那個數字,寫在合約或簽呈上了嗎?
一家科技公司的簡報課,四層一起量
台灣的中型科技公司很常買一種課:兩天的「簡報技巧」,講師知名、教材精美、學員回饋很好,而年底檢討時沒有人講得出它改變了什麼。
- 第一層:課後問卷 4.7 分,開放欄位一片好評。學員買單
- 第二層:課前課後各做一次十分鐘的架構測驗,平均由 52 分升到 79 分。真的學到了
- 第三層(三個月後):抽查 40 份實際簡報,只有 9 份用上課堂教的結構。斷點在這裡
- 追問那 31 份為什麼沒用:公司有固定的簡報範本,改結構要跟主管解釋。環境沒改
- 那 9 份的共通點:他們的主管自己也上過同一堂課。關鍵變數浮出來
- 第四層:專案提案通過率沒有變化。最上面那層沒動
這個案例真正有價值的發現,藏在第二層與第三層之間那道斷崖:學會了(79 分)卻做不到(9/40),中間隔的並不是能力,是那份固定範本與那位沒上過課的主管。訓練單位對此無能為力——他們能買到最好的講師,卻改不動一份範本的規定。所以後續的改法跟課程本身無關:先讓一級主管上同一堂課、再把公司範本改成允許兩種結構。這兩件事做完,同一批人的行為層才開始移動。順帶一提,第四層那個「提案通過率」其實也不是好指標,因為提案能不能過,簡報只佔其中一小塊。以上為說明結構用的示意情境,僅供理解框架之用。
這座金字塔,有三個地方會騙你
它最被誤解的地方,是那個「金字塔」的形狀本身——形狀暗示了一條由下往上的因果鏈,而那條鏈其實並不存在。
- 四層不是因果階梯。學員很喜歡這堂課,跟他學到多少東西之間,多數研究找到的相關低到接近零;甚至有研究顯示,讓人覺得有點吃力的課,滿意度較低而學習成效較好。這代表你不能用下層推上層——每一層都得自己量。金字塔的圖形容易讓人以為「底下穩了上面就會長出來」,這是它流行了七十年卻一直被誤用的主因。
- 第四層的歸因幾乎不可能乾淨。公司這一季的良率上升,同期還有換料、換線、換主管、旺季效應。要把功勞切給那門課,嚴格說得有對照組(同樣條件下沒上課的一群人),而實務上很少有公司願意這樣做。折衷的處理方式是誠實地把話講成「這門課是這個結果的其中一個貢獻因素」,並在報告裡列出同期還發生了什麼——這比一個看起來很精確的投報率數字更可信。
- 它預設「這件事該用訓練解決」。整座金字塔從第一層開始,就已經接受了「開一門課」是答案。可是職場上大量的績效落差,根因是流程、工具、誘因或人力配置,這些用訓練去補,最好的結果也只是把責任從系統轉嫁到個人身上。上面那家公司的例子就是活的:真正的瓶頸卡在範本規定與主管那一端,員工的簡報能力反而是最先被排除的嫌疑。這一點模型本身完全看不到。
量得出這門課有沒有效,量不出這件事該不該開課
四層都量完、報告寫得漂亮的那一刻,有個問題會忽然浮出來:一開始為什麼會決定開這門課?
多數時候的答案是——有人抱怨了、去年有預算、或者某位高層看到一篇文章。這個決策從頭到尾沒有經過任何診斷,而柯氏的四層也不會回頭檢查它,因為模型的起點就設在「課已經要開了」。P.A.I.N. 之尺放在這裡,第一格「誰在痛」問的是:真正在為這件事付出代價的人是誰?在簡報課那個例子裡,付出代價的是那些提案被打回、專案延宕的工程師;他們痛的是「我講不清楚」,還是「我講清楚了也沒人拍板」?這兩個答案通往完全不同的解法,而一門課只解得掉第一種。四層量得出這門課有沒有效,量不出這個痛本來該不該用課來解。所以在採購任何訓練之前,值得先做一件更便宜的事:找五個真的卡住的人,請他們描述最近一次卡住的完整經過,一直問到「那當下你缺的是什麼」。他們缺的東西如果不能用兩天教會,那再好的講師都改不了第三層。
關於柯氏四層次評估,常被問到的幾件事
聽說還有第五層 ROI,那是什麼?
那是 Jack Phillips 後來加的一層,把第四層的成果換算成金額,再扣掉訓練成本算出投報率。它在需要向財務單位爭取預算時很有用,但也把第四層的歸因難題再放大一次——你得先能乾淨地把成果歸因給訓練,才有資格談報酬率。實務上比較穩健的用法是:第四層用具體的營運指標講,ROI 只在成果非常明確可切割(例如減少某項可計費錯誤)時才算。
每一層都要做嗎?成本很高。
不必每門課都做到第四層,但值得依課程的投資規模分級。一次性的小型分享做到第一、二層就夠;年度重點的技能培訓做到第三層;只有那些真的綁著營運目標、金額也大的專案才進第四層。一個實用的原則是:如果你不打算根據結果改變任何決定,那一層就不必量。評估的成本應該配合它會影響的決策大小。
既然滿意度跟成效無關,為什麼大家還在用?
因為它便宜、即時、而且量的其實是另一件有價值的事——學員的參與意願。滿意度低的課會影響下一次報名率與現場投入程度,這在自願參加的內訓裡很重要。所以它不該被廢掉,該被降級:當成「這門課有沒有辦法讓人願意坐完並投入」的指標,而不是成效的證明。錯只在把它當結論用。
「新世界柯氏模型」說要倒過來設計,是什麼意思?
後來由 Kirkpatrick 家族提出的修訂版主張:規劃時從第四層開始往下走。先確定要影響的營運成果,再定義達成它需要哪些關鍵行為,接著才決定這些行為需要哪些知識技能,最後設計課程。這個順序會讓很多課在規劃階段就被取消——因為往下推的過程中會發現,需要的關鍵行為靠訓練根本產生不了。這其實是這套模型最有用的地方,卻最少被使用。
線上課程或非同步學習怎麼套?
四層一樣適用,只是證據來源換了。第一層看完課率與評分,第二層可用課中測驗與作業,第三層仍然需要外部觀察(這一點線上線下沒有差別),第四層不變。線上學習特有的陷阱是資料太多:完課率、觀看時長、答題正確率都很好抓,於是評估容易停在第二層並且顯得很豐富。判斷的關鍵仍然是那句老話——有沒有人真的在工作上做了不一樣的事。
想知道「學到的東西怎麼才會變成能用的東西」,柯柏經驗學習圈談的是同一段落差的前半;坊間那張「聽講只記得 5%」的圖其實查無根據,學習金字塔的迷思把來龍去脈說清楚了。想把自學的效率提到極限,《超速學習》的拆書是不錯的下一站。
喜歡這篇文章嗎?
每週幫你拆二本好書,把判斷力、好書金句、好問題,直送你的信箱。
不適合你可隨時退訂 · 每週兩封,陪你把書讀進生活。
送出即表示同意我們依隱私權政策使用你的 email。