評分與回饋流程
本流程以「八向度、32題量表(與 Codex 協作/生成)」為核心,將逐字稿、音訊及影像分別取證後再綜合評量,最後產出可複核、可行動及可追蹤的形成性回饋。
1. 準備與界定評量範圍(使用者)
首先確認評量目的、授課情境及使用的八向度32題量表,並盤點MP4、MP3、逐字稿、PPT/教材及相關課程資料。原始影音與教材均保持唯讀,分析結果另存於輸出資料夾。
評量目的在協助教師改善教學,不直接推論學生學習成效,也不宜單獨用於教師人事評鑑/決策。
2. 證據品質檢查(Codex)
分析前先檢查:
- 影音長度、格式及檔案版本是否一致。
- 逐字稿是否為原始稿或精校稿。
- 逐字稿時間碼是否與影音同步。
- 投影片、逐字稿與錄影畫面是否相互對應。
若逐字稿與影音時間不一致,以實際影音時間為主要依據;不同步的逐字稿僅作內容索引。
3. 三種證據分別分析(Codex)
三種資料先獨立分析,不在初期混合判斷:
- 逐字稿:分析教學目的、內容結構、術語、推理、提問及回饋語言。
- 音訊:分析音量、響度、停頓、講述密度、節奏及問答換話。
- 影像:分析教材同步、畫面可讀性、工具切換、互動及可觀察的非語言表現。
若講者未入鏡,眼神、姿態、手勢等項目應標示NA,不得以推測方式給低分。
4. 建立時間軸並逐項評分(Codex)
依實際影音建立五分鐘時間軸,記錄各時段的教材畫面、教學內容、提問、示範及互動活動。
接著依32題逐項記錄:
- 0–4分或NA。
- 直接證據來源。
- 時間碼、逐字稿段落或教材頁碼。
- 扣分理由。
- 為何未採相鄰分數。
- 證據信心:高、中或低。
同一問題原則上只在最直接的向度主要扣分,避免重複扣分。
5. 綜合判讀與形成性回饋(Codex)
完成分流評分後,再進行跨來源整合:
- 多種證據相互一致時,提高判斷信心。
- 證據衝突時,以實際影音及較直接證據為主。
- 資料不足時,降低信心或標示NA。
- 安全紅旗另行判斷,不得由其他高分抵銷。
回饋依下列順序形成:
- 指出值得保留的教學優點。
- 找出2至3項最優先改善問題。
- 說明問題的直接影音證據。
- 提供教師下一堂課可以直接採用的說法或活動。
- 設定成功標準、追蹤證據及再評量時間。
例如不只寫「應增加互動」,而是具體建議:「案例後停20秒,請所有學生在聊天室完成一句回答,再展示兩個匿名答案並說明判斷依據。」
6. Word輸出與品質檢查(Codex)
完整Word報告應包含:
- 使用說明與證據限制。
- 八向度結果總覽。
- 逐字稿、音訊及影像個別分析。
- 實際影音時間軸。
- 32題完整分數、證據、扣分理由及信心。
- NA理由與安全紅旗。
- 教學優點及優先改善行動。
- 改善追蹤與再評量表。
交付前需檢查題號完整性、表格結構、頁面裁切、圖片替代文字及無障礙問題,並由人工抽查低信心項目、主要扣分與安全注意事項。
整體流程的核心原則是:每個分數均能回到證據、每個扣分均有理由、每項回饋均能轉換成下一次可執行的教學行動。
最後,「使用者」確認Word報告。
沒有留言:
張貼留言