Home
Explore Uedu
Student Console
Register as Member/Login
(2) In future presentations of the research findings, in addition to the course project website and public presentations, your real name and personal information will not appear in this research report. If you are interested in the research results, we can provide you with an executive summary after the study is completed.
問卷中心
Teacher Console
Course Setup
Support & Messages
Uptime Data

UeduGPTs

--

Jupyters

2

Local AI

--

CISOSE26 本地 AI UG26
臺北 AQI 23 · 臺中 AQI 33 · 臺南 AQI 41 · 高雄 AQI 40

AI Reply Desktop Notifications

Show a desktop notification when the AI TA finishes replying

Chat Message Notifications

Notify me when classmates post messages in the forum

Sound notification

Play an alert sound whenever there is a new notification

EMI Toolkit / 教學法文章 / 第 92 篇
📊 數位學習 📄 實證教學法 ⏱ 約 7 分鐘

學習分析儀表板:看見不等於改變

Learning Analytics Dashboards: Seeing Is Not Changing

兩份系統性回顧(945 篇篩出 93 篇;SRL 視角)的共同結論:多數儀表板缺乏學習理論基礎,對學習成效的嚴格證據有限。指標要連到「下一步行動」、參照點預設「跟自己比」,儀表板才能支持學習。

本文依據的研究
Bodily, R., & Verbert, K. (2017). Review of research on student-facing learning analytics dashboards and educational recommender systems. IEEE Transactions on Learning Technologies, 10(4).
https://dl.acm.org/doi/abs/10.1109/tlt.2017.2740172
Matcha, W., Uzir, N. A., Gašević, D., & Pardo, A. (2020). A systematic review of empirical studies on learning analytics dashboards: A self-regulated learning perspective. IEEE Transactions on Learning Technologies, 13(2).
https://research.monash.edu/en/publications/a-systematic-review-of-empirical-studies-on-learning-analytics-da/
🧪
在 Uedu 上實證這個教學法
本文的教學法可在 Uedu 平台實作並驗證成效:學生端 Bloom 趨勢+論壇統計儀表板 · 看板使用頻率與行為改變/成績的關聯。 教師可據此設計一個小型準實驗(前後測或組間對照),用平台資料檢驗成效。

一句話重點

學習分析儀表板(learning analytics dashboard)讓學習數據「被看見」,但兩份系統性回顧的共同結論是:看見不等於改變——儀表板要連到「下一步行動」、參照點要設計得當,才談得上支持學習。

研究發現了什麼

把學生的登入次數、作業進度、測驗表現視覺化呈現給學生本人,聽起來理所當然有益。但證據呢?

Bodily 與 Verbert(2017,發表於 IEEE Transactions on Learning Technologies回顧了學生端儀表板與學習報告系統的研究,從 945 篇文獻中篩出 93 篇納入分析。他們發現這個領域的系統性缺口:多數研究聚焦在系統「做出來了」與學生「覺得好用」,嚴格測量學習成效的研究相當少;需求分析、視覺設計依據與資訊選擇的理由,在多數系統的開發過程中付之闕如。

Matcha、Uzir、Gašević 與 Pardo(2020,同樣發表於 IEEE TLT則從自我調節學習(self-regulated learning,SRL)的視角系統性檢視實證研究,結論更直接:現有儀表板很少奠基於學習科學理論,大多停留在呈現「你做了多少」的活動量指標;對學習成效的實證證據有限,且儀表板若只給數據、不給「接下來該怎麼做」的支持,學生未必有能力自行把數字轉譯成有效的學習調整。

兩份回顧還共同點出一個容易被忽略的設計題:參照點(reference frame)。「跟全班平均比」是最常見的預設,但社會比較對落後學生可能造成挫折而非動力;「跟自己的過去比」與「跟課程目標比」則把注意力導向可控制的進步。儀表板呈現什麼數據、跟誰比,本身就是一個教學設計決策。

解讀證據時請留意

「實證有限」不等於「證實無效」——它反映的是研究設計的不足:多數研究缺乏對照組與學習成效測量。在更嚴格的證據出現之前,合理的態度是把儀表板當作「需要搭配教學設計才有效的原料」,而非開箱即用的解決方案。

教師可以怎麼做

每個指標都要配一個「所以呢」

檢視你給學生看的每項數據:學生看完知道下一步該做什麼嗎?「你的練習量低於建議值」必須連到「本週先完成這兩份練習」,沒有行動連結的指標寧可拿掉。

預設「跟自己比」,謹慎使用全班排名

把「本週 vs 上週」的自我進步設為主視覺,全班分布僅作為輔助脈絡(或可關閉)。對已經落後的學生,排名往往是壓力源而非資訊。

呈現學習品質指標,而非只有活動量

登入次數與停留時間是最容易取得、也最容易誤導的指標。優先呈現與學習目標直接相關的證據:概念測驗的精熟度、認知層次的分布、提問的深度。

把儀表板讀數變成一個教學活動

學期中安排一次「數據檢視週」:學生看自己的儀表板、寫下一條觀察與一條行動承諾、兩週後回頭檢核。詮釋數據的能力需要教,不會自動發生。

用成效檢驗你的儀表板

比較「有檢視並訂行動」與「未檢視」學生的後續表現變化,或在不同班級試行不同參照點設計。別讓自己的儀表板重蹈文獻批評的覆轍——只測滿意度,不測學習。

搭配 Uedu 工具

Bloom 認知層次分析

Uedu 的 Bloom 認知層次分析正是「學習品質指標」的實例:它分析學生與 AI 對話中展現的認知層次(記憶、理解、應用、分析、評鑑、創造),而非只計算對話則數。教師端可看到全班的層次分布趨勢,據此調整提問設計與課堂活動——數據直接連回教學決策。

AIDA 優學伴(蘇格拉底式)

儀表板最缺的「下一步行動」環節,交給 AIDA 補上:學生檢視自己的學習數據後,與 AIDA 進行一段蘇格拉底式對話——「你注意到什麼模式?」「你打算先改變哪一件事?」。AI 以提問引導學生自己把數據轉譯成行動計畫,恰好對應 Matcha 等人指出的自我調節缺口。

一個可立即試做的小活動

期中前後各安排一次十分鐘的「數據反思」:學生檢視自己的測驗表現與 Bloom 層次分布,在學習單上寫下「一個觀察+一個行動」,並與 AIDA 對話確認行動的可行性。期末比較有無認真完成反思的學生,其表現變化的差異——你會得到自己課堂的「儀表板有效條件」證據。

結語

數據視覺化只是學習分析的上半場,下半場是詮釋與行動。把參照點設為自己的進步、把每個指標連到下一步、用對話引導學生轉譯數據——儀表板才能從「漂亮的鏡子」變成「會指路的地圖」。

給教師的提醒:本文為教學參考,所引研究多為特定情境(學科、國別、班級規模)下的質性或相關性研究, 其「教學功能」與「策略」屬於可遷移的原則而非保證成效的處方。請依您的學科特性、學生組成與課程目標調整運用。
回到所有 EMI 教學法文章