提供實物操作、實體空間感官與運動回饋，以及多模態人工智慧評測的數位情境學習環境

Abstract

在餐旅與護理等服務型學科中，多模態知識如動作、手勢、表情等，是專業表現的關鍵要素。本研究基於具身認知、認知負荷理論與多媒體學習原則，設計融合實物操作、實體空間感官與運動回饋的數位學習方法，學生可在擬真情境中以自然動作互動。藉由引入真實物件以降低操作複雜性的認知負荷，並運用即時多模態AI評測促進反思與技能掌握。實驗與科大餐旅課程合作，69名學生隨機分為對照組與實驗組。結果顯示，相較虛擬介面操作的數位實境，本方法可在較低認知負荷下提升學習成效與反思能力，突顯將多模態回饋與實物操作納入數位情境學習的優勢。