公部門數位學習評量機制及訓練績效衡量之研究 - 臺灣大學圖書館 ...

公部門數位學習評量機制及訓練績效衡量之研究
等…,都是不可見的,更難於轉換成貨幣數位,所以被稱為「軟效
益」。而其中的「成本」又分為(A)單元課程成本─開發費+維護
費+運作管理費;(B)單元開課成本-講師費+學員費+場地費
+設備費+運作管理費等。各項影響因子甚多,需要依據評鑑單位
的既定意圖來做取捨。
加以 ROI 的計算過程需要嚴謹管控各個步驟的細節,因此有
相當程度的操作障礙(Horton,2001):
‧ 當要做 ROI 第五層次評鑑時,需已經蒐集完成第四組織影
響、第三工作績效、第二學習成果與第一層級反應的資料。
‧ 蒐集和分析資料與數據時,應使用最可靠的來源。
‧ 分析資料時,應選擇最保守的計算方案。
‧ 應摒除極端和不受支持的項目。
‧ 若無法從目標對象或特定來源取得改善資料,就需假設只有
一些或亳無改善可言。
‧ 視潛在錯誤發生的可能性而調整量的估計。
‧ 儘量將無形度量轉換成貨幣價值的度量。
‧ 所取得的 ROI 結果要先和所有關鍵單位與人員進行溝通。
ROI 模式需先決定訓練後的資料的蒐集方法,再將其影響區分
出,並予以量化,以計算出 ROI。Phillips 建議量化的五個步驟:
1.界定訓練所影響的單位、2.決定每個單位的價值、3.瞭解單位受
訓練影響的程度、4.蒐集訓練後一年內的資料、5.決定一年內的價
值。比較細部的 ROI 評鑑,其作業流程可分為 10 個步驟,依序如
下(謝政彥,2006):
‧ 步驟一:透過需求分析確定訓練目標。
‧ 步驟二:擬定評鑑計畫及設定評鑑基準。
包括完成資料蒐集計畫、ROI 分析計畫等。
‧ 步驟三:蒐集訓練進行中的資料(第 1、2 層)。
包括學員滿意度、對訓練課程的有關反應、自訓練課
程所學習知識或技巧的程度。
‧ 步驟四:蒐集訓練實施後的資料(第 3、4 層)。
包括學員是否有將所學應用在工作上、應用訓練所學
後對組織、業務造成的影響或收益。
‧ 步驟五:將訓練效益分離出來。
學員的績效反應,會受到訓練本身及非訓練因子的影
響,因此要透過一些方法(包括設立對照組的實證研
究、利用趨勢線等)來真正評鑑訓練的績效、或是透
20