等等——0級？我們以前從未談論過這個！ROI Institute的 Jack Phillips將 0 級描述為「基本數據，例如參與課程的人數以及每人的費用」。 （請參閱此處對 Jack Phillips 關於衡量和實現電子學習投資回報率的採訪。）與我們合作的一家機構對他們創建的關於培訓計劃有效性的基於 Excel 的儀表板感到自豪。當我們查看他們的儀表板（實際上是靜態記分卡）時，我們發現它們包含一組強大的圖表和統計數據，包括受訓學生數量、提供的課程和班級數量、培訓開發成本以及成本和掙值根據預算交付培訓。誠然，圖表令人印象深刻，但孤立地報道說，他們離開高層管理人員時，並沒有完全相信培訓會在該機構留下深刻的印象。確實，我們必須收集和報告這些數據（如果我們要計算投資回報率，則包括成本數據），但我們還必須將其與更高級別的培訓聯繫起來，以鞏固我們的觀點，即培訓對業務成果有影響。
第 1 級：反應
我們都知道 1 級笑臉表或學生回饋問卷。與 0 級一樣，如果這就是我們所做的全部，那麼我們的培訓評估計劃的價值就有限，而且幾乎沒有能力顯示影響。 1 級調查的誘惑是專注於獲取剛剛提供的實際培訓的回饋。但在不讓調查變得過於繁重的情況下，可以整合幾個問題，以了解剛完 新加坡電話號碼格式 成的培訓課程對更大的組織圖景的貢獻程度。例如，可以圍繞戰略領域提出一兩個問題，例如：
人們如何認為培訓有助於實現機構使命；
培訓計畫如何很好地解決聯邦員工觀點調查(FEVS) 中機構關注的領域。 FEVS 調查中有幾個問題直接涉及培訓（例如，員工發展問題，例如「我對目前工作所接受的培訓感到滿意」和「我有機會提高自己的技能」）。關注員工發展分數的機構可以在全企業一級調查結束時插入一兩個問題，以對這一戰略關注領域進行脈搏檢查，並可能預測未來 FEVS 結果；
受訓者和他/她的主管在培訓計劃發生之前討論了參加培訓計劃的目的有多少（知識轉移到工作場所的預測因素）；
學生對未來應用或影響的期望是什麼（可能與以後的實際應用或影響相關的數據點）。
整個培訓行業都認識到我們過度強調了對 1 級數據的關注。然而，一個好的評估計劃將在第 1 級收集足夠的信息，以幫助講述計劃影響的整體情況，並提供「調試」內容開發和交付期間培訓中出現的問題的能力。但評估計劃不應就此止步。
一些最關鍵的受影響領域包括賠償、自動續約、具有約束力的仲裁、終止、審計權和地點選擇。
未來的小數據潛水
在未來的部落格中，我們將更深入地探討我們可以收集的與 2-5 級相關的資訊類型，以及如何分析它們以深入了解我們的培訓計劃的績效。然後我們將討論報告我們的發現。我們開始建立一個「證據鏈」（柯克帕特里克術語）或「影響鏈」（菲利普斯投資回報率術語），以顯示培訓和業務成果之間的聯繫。
同時，進一步了解「數據分析」的真正意義可能是件好事。這不僅僅是收集數據的問題，而是執行相關分析以了解數據可以教導我們的組織什麼。為此，您可以考慮參加 3 月 8 日星期二舉辦的免費 ovLoop 培訓，題為“如何理解政府數據分析”。
直到下週——請務必留意訓練計劃中可用於分析的小數據（並記得在收拾行李出發之前查看天氣頻道）。
Eugene de Ribeaux 是GovLoop 精選部落客計劃的一部分，我們在該計劃中精選來自全國（甚至全世界！）政府聲音的部落格文章。要查看更多精選 Blogger 帖子，請按此處。