對話即學習：學生與 AI 對話中的學科相關認知投入型態

研究理念：對話即學習（Chat as Learning）

生成式 AI 教學助理已快速進入高等教育，但學界持續爭論：學生與 AI 的對話究竟是真實的認知歷程投入，還是只是資訊檢索？ 本研究提出「對話即學習（Chat as Learning）」測量典範——把學生對 AI 的每一次提問， 視為進行中學習認知的可觀察外顯軌跡，作為成果導向評量之外的過程層次訊號， 並可在母體、課程與學生三個尺度上聚合分析。 須強調的是：「學習」一詞指的是此典範的理論定位；本研究測量的是學生提問所反映的認知需求（cognitive demand） （以 Bloom 認知層次分類），而非學習成效本身。 本論文由張家凱助理教授與李奎皓老師發表於《Computers and Education: Artificial Intelligence》（Elsevier）—— 教育類別全球排名第二的國際期刊（影響係數（Impact Factor）23.4、CiteScore 43.3，開放取用（Open Access））， 專門收錄人工智慧在教育應用上的研究。

研究問題

先前研究已確立：在本平台上，約 62% 的學生—AI 訊息在聚合層次反映高階認知需求。 本研究進一步追問：這樣的認知投入是跨情境穩定的個人特質，還是會隨學科的認知要求而變動—— 即使是同一位學生？為回答此問題，本研究採用within-person（受試者內）跨學科設計： 追蹤同一批學生在不同學科課程中的提問型態，把「個人風格」與「學科情境」兩種解釋拆開檢驗。

研究方法

資料來自跨四所大學部署的 AI 教學助理平台（Uedu ClassroomGPT），涵蓋兩個學期、116 門課程、逾 60,000 則學生訊息， 以自動化 Bloom 認知層次分類管線標註每則提問的認知層次。 分類器與兩位受訓人工評分者在 300 則分層抽樣訊息上進行驗證：高階／低階二元判定的 LLM—人類 Cohen's κ 為 .426–.606（個別評分者），最佳配對共識（best-pair consensus）下達 κ = .753。 統計檢驗採受試者內成對比較，並以交叉隨機效應混合效應邏輯迴歸（crossed random-effects GLMM） 同時估計課程層與學生層的變異。 本研究經國立臺灣大學研究倫理委員會核准（NTU-REC，案號 202507EM058），以去識別化既有資料進行二次分析。

主要發現

• 學科各有認知投入側寫：STEM 課程的提問以 Apply（應用）最突出（20.8%）、語言課程以 Understand（理解）為主（31.7%）、社會科學課程則以 Create（創造）最突出（33.8%）；人文課程因課程數少（兩學期僅 3 門）僅作描述性呈現。
• 同一位學生，換了學科就換了型態：受試者內成對比較顯示，同一批學生在社會科學課程的高階提問比例顯著高於其在 STEM 課程的表現（合併 n = 16，p < .001），且此方向在兩個獨立學期樣本中一致重現。
• 課程層變異遠大於學生層變異：交叉隨機效應模型證實上述對比，並顯示高階認知投入的變異主要來自「課程」而非「學生」——認知投入型態是學科情境相關的，不是固定的個人互動風格。
• 對 AI 助教設計的意涵：AI 教學助理的設計與評估應納入學科脈絡，而非假設一體適用的互動模式。

解讀界線

與 Uedu 一貫的研究紀律相同，本研究對其宣稱設有明確界線：

• 測的是提問層次的認知需求，不是學習成效：Bloom 層次描述學生提問所反映的認知投入型態，不應逕讀為成績或學習成果的提升。
• 「相關」不是「因果」：學科相關（discipline-associated）指型態隨學科情境共變；課程設計、任務型態與評量方式都可能是機制的一部分。
• 分類器效度有其範圍：個別評分者層次的一致性屬中等（κ = .426–.606），最佳配對共識較高（κ = .753）；完整 6×6 混淆矩陣已於論文揭露。
• 人文學科樣本有限：僅 3 門課，相關型態僅供描述性參考。