作者：黃品叡醫師
▌小問卷大學問
你知道從問卷就可以分析學員的心理狀態嗎？
如果不知道，那你一定要來聽聽Wally老師的分析！
(實在太喜歡老師講評這一段了，分享給大家哈哈)
填滿意度問卷的人有五種類型：
第一種人：全部都填五，他很喜歡你，或是沒什麼想法
第二種人：全部都填四，他可能沒有那麼喜歡你
第三種人：全部都填三，他討厭你
第四種人：填四五交錯，因為他不想讓你知道他是在亂填
第五種人：出現二和一，通常是勾錯選項，或是根本來錯課程
聽到第二種人的時候整個笑出聲，怎麼可以那麼洞悉人性XD
—-
好啦這不是重點，只是想說雖然這門課被譽為ATD中最難上的課，但還是有許多有趣的地方。燒腦歸燒腦，但過程一定不會無聊~
▌為甚麼想來上這堂課
我帶著兩個問題來到這堂課：
一是醫學院學習，除了考試以外，鮮少有其他類型的評估機制，去探究學生學習後的影響以及使用比例。絕大多數的課後問卷，超過九成是上面提到第一種類型的人，老師也沒辦法了解自己教得好不好，有沒有需要改進的地方。有沒有方法可以突破現狀，製作出真正有意義的反饋，甚至可以算出課程投資報酬率的評估方式？
二是對醫院而言，績效評估的概念是薄弱的。雖然平常有各種大小評鑑，但評鑑評估的是指標，並不是實質上的生產能力。而既然是指標，到評鑑時，這些指標自然都會達標，意義不大。對於組織面，有沒有甚麼方法可以去準確評估績效狀態，並從中解決那些怠速環節，從中提升產值。
加上一堆上過學習效果評估的同學都說這堂課超棒，所以就入坑了XD
—-
分享這堂課的三個重點收穫：
▌一次性打通績效評估任督二脈
L1 – 反應和預定計畫(Reaction & Planned Action)
L2 – 學習(Learning)
L3 – 應用和實踐(Application & Implementation)
L4 – 業務影響(有形和無形) (Impact)
L5 – 投資回報率(ROI)
即便是新手小白，也能清楚理解L1-L5的評估標的，以及如何評估，為何評估。
說是一堂充滿計算公式的數學課真的不為過。但其實只要照著老師和課程的架構走，知道公式中的數值要怎麼取得，或是如何推倒，其實並不難(好啦計算部分我覺得不難……被拖走)。
自己覺得難點在於，因為非人資領域和公開課講師，對於績效評估(菲氏/柯氏)和成本計價的部分很陌生，但這兩部分老師都有很清楚地介紹，同時也列點把可能遺漏的成本細項都一一標註在講義中，擔心跟不上進度的同學可以放心。
▌問卷設計一點通
除了數據計算，我覺得收穫最多的是問卷設計。不僅了解一到五級的評估標的，以及其所對應的問卷/測驗類型。以及詳細解釋常見的四種評估方式：
1.數字量表
2.描述量表
3.行為錨定數字量表
4.檢查清單
同時針對製作客觀性測驗的關鍵問題(Critical problem)，老師都會給出具體數字，以及怎麼樣的情境，要考慮哪些狀況，以及具體作法為何。過程中解決了困擾我許久的四個問題，分享給大家：
1.該出幾題
2.關鍵題和非關鍵題該如何配重
3.問卷的信效度要怎麼做才足夠
4.評估的時間點
此外除了客觀性測驗，還有調研，模擬類型，主觀性評估的類型….，族繁不及備載，答案的部分就先賣關子，歡迎來上課(?)
我想說的是對於一個問卷小白而言，這門課無疑是大補帖，十分推薦給想要理解問卷設計本質的夥伴！
▌精選問卷範本全都錄
對於新手小白，最難的地方便是不知道如何設計題型，以及如何精確的用字遣詞。
而這兩個問題完全不用擔心！因為問卷的範例，都已收錄在課程的附錄講義中。(附錄講義應該100多頁吧…..份量超大，參考度極高！)
看完以上範例和課程點評，如同老師所說，真的不知道自己以前的問卷在做甚麼哈哈。但依照課程教授的重點，以及附錄講義的參考問卷，很快就能製作出符合自己要求的高水平問卷。
▌寫於文末
「數據思維，是根據數據來思考事物的一種思維模式。」
在負債學習法中提到：「每件事都可以量化，有了量就有了數據，有了數據才能討論使用效率(ROI)，以及負債量(TOTAL)，以及最後的優化(Optimization)」。其中數據化的重點，便在於後續的優化。並透過優化前後的數據，去計算出優化過程所帶來的成效。
而課程中講求的，便是利用各種工具，將原本無法量測的學習效果進行數據化，並透過所得數據量，依照合理的公式計算出進步幅度、效益成本比(BCR)、以及投資報酬率(ROI)。
學習效果評估真的是一門非常棒的課，推薦給大家。
課程報名連結：https://reurl.cc/YvR160
回地圖首頁：CE課程心得
