2024年2月29日 星期四

新構想:ChatGPT 輔助學習--基本統計

原規劃給我導生的-沒人報名。

我主動去撈2個學生...

目標:

  1. 協助導生學習基本統計課程(怡靜開授的必修課,一學分)。
  2. 初步測試 ChatGPT輔助學習統計之效能。

具體學習目標:

統計方面--了解上述統計課程之主要概念與應用;

ChatGPT--了解如何用ChatGPT以學習/釐清統計概念與應用

執行方式:

  1. 參與者於課後,自行複習,若遇不懂之概念/應用,則先以 ChatGPT釐清之。
  2. ChatGPT練習(參與者):協助確認課程重點/主要概念,協助解釋與舉例說明,也可協助出考題以確認了解程度。亦即學習如何使用 ChatGPT以協助答上述目標。
  3. 課後定期討論(參與者跟我),以釐清統計概念與 ChatGPT使用方法
可能遭遇困難【對策】:
  • ChatGPT使用方法【參考範本/多練習/交流】
  • 統計概念/應用難以快速理解【多看解釋/應用實例,多交流】
  • 學生對於ChatGPT提供訊息之判斷能力,短期內難以提升【持續學習/應用,調整心態--急不來】

2024年2月26日 星期一

遠距/居家兼任助理

薪水大致一樣,在家上班--這是今年聘任兼任助理的創舉

多一些彈性--原來不可能協助我者,變成可能!!

每週定期線上討論

任務/工作記錄於Line, blog, 或雲端硬碟

目前已有畢業多年的系友協助我,一起努力!!

2024年2月21日 星期三

ChatGPT (My GPTs) 作為SP/專家之優缺點

優點:

學習能力強

隨時可使用,且可多人使用

可修改參數,產生多種SP

可立即提供逐字稿(數位化) 

針對逐字稿,可提供立即回饋--病人或專家【包含分析考生之優缺點、製表呈現/比較、給予評分(包含提供解釋)、評論/讚賞等,我覺得ChatGPT可以徹底打敗專業人員】等之後--中文語音轉文字--正確率提升之後---一般口語對答分析,一般專家應該也比不上了。

 

缺點:

過於專業(回答過於詳實,且有時會提出專業意見)【當SP的缺點】

僅能對談/訪談,無法執行觸診/檢查 

還是模擬,非真實

需會員才能使用

有詢問次數限制 【需多次來回訪談時】

可能出錯,且不易預期 


「ChatGPT 作為SP以及專家(回饋)的效能驗證」宜列為重要且優先投入的研究議題!!

ChatGPT 作為專家評分與回饋的效能驗證,宜列為最優先

  • 評分回饋之一致性、正確性&效率 vs 一般專家
  • 學員回饋/滿意度
  • 我們已有諸多逐字稿,可以立即測試/驗證之!!
專家評分與回饋之 MyGPT 指示架構:
  • 任務說明【如評估考生 Barthel index 之表現並給予評分與回饋】
  • 核心概念說明【說明Barthel index之評估概念、考生常見錯誤、評論/評分重點、以及回饋重點】
  • 逐步分析逐字稿之特定內容,再給予評論/評分【逐步分析逐字稿之流程、評論與評分之流程,包含製表呈現】
  • 給予評論/包含正向回饋/建議【如何依據上一步之分析結果,給予評論(包含正向回饋/建議),包含製表呈現】






 

2024年1月31日 星期三

實習學生心理領域「團體帶領」之教學與研究

吃飯的傢伙:心理領域實習學生與治療師之「團體帶領」,可謂最常執行的治療活動。

充實的歷練:實習學生定期需要好好準備、執行、以及檢討團體帶領之準備、過程與成效。還有每周多次的實務練習。

充滿教學與研究的機會:上述過程,參與的治療師與個案人數,皆龐大,故自然擁有極大的教學與研究機會。以教學/評估為例,計畫書的準備、評估與教學、活動執行的教學與評估、活動成效的評估與改良.... 主題多、學術與實務價值高!!

實證不足:國內外OT皆少見,無論團體帶領之教學與評估,皆相當有限。

故我覺得心理領域「團體帶領」之教學與研究,充滿機會!!


圖:桃療病人享受放輕鬆花園採果樂趣

一般實習生之準備/帶領團體之順序如下:

準備計畫書(或企劃書)、與指導老師討論、準備執行、執行團體、事後討論/計畫書結案。

相關文件:計畫書準備要求、計畫書、團體執行紀錄、計畫書撰寫評估表(含結案計畫書評估)、團體執行評估表(含技巧與成效)、個案參與評估表、個案滿意度與回饋評估表。

相關研究主題以上述執行順序歸類如下:

  • 提升計畫書準備效能【擬優先執行/撰寫院內計畫】

    1. 計畫書準備/回饋教學與評估模式之發展與驗證
      1. 檢討/改良現有教學、評估與回饋模式以發展最佳教學與評估模式
    2. 計畫書撰寫評估表(含結案計畫書評估)之發展與驗證
      1. 內容效度、評估者間/評估者內信度驗證(第1篇論文)
      2. 反應性與預測效度驗證(第2篇論文) 【反應性可驗證教學模式改良後,能否呈現前後之差異。預測效度可驗證計畫書撰寫表現預測計畫書執行表現】
      3. 比較 ChatGPT 與專家之評分表現【二者之一致性、intra-rater reliability,或是 ChatGPT如何有效協助臨床人員評估學員表現。Feb. 8 新增】
    3. 建立計畫書資料庫
      1. 結合臨床與教學單位之資料庫

  • 提升團體帶領之執行效能【擬撰寫中大型計畫】

    1. 團體帶領之觀察/紀錄表之發展與驗證,包含個案、帶領者以及協助者、環境、器材以及與計畫書之一致程度等。
      1. 內容效度、評估者間/評估者內信度驗證(第1篇論文)
      2. 反應性與預測效度驗證(第2篇論文) 【反應性可驗證教學模式改良後,能否呈現前後之差異。預測效度可驗證團體帶領表現預測團體成效】
    2. 影響團體帶領效能之因素探究【機制探究】
      1. 建構/驗證/改良機制
    3. 建立團體影音資料庫
      1. 結合臨床與教學單位之資料庫
  • 團體帶領成效指標之探究
    1. 團體帶領技巧評估工具之發展與驗證
      1. 心理計量特性驗證
    2. 團體帶領成效評估工具之發展與驗證
      1. 直接/立即 vs 間接/中長期成效
      2. 心理計量特性驗證

  • 不同團體類型之異同

    1. 特定團體,如體適能、認知團體帶領
    2. 不同團體之差異比較


2024年1月28日 星期日

2023 年度報告 -- AI 應用研究進展與困境

從2018投入迄今,已滿5年。加上去年投入的 ChatGPT 主題,團隊投入的人力/資源,有增無減。

研究成果: 3 篇論文,皆排名於 Q1

  1. Development of a 13-item Short Form for Fugl-Meyer Assessment of Upper Extremity Scale Using a Machine Learning Approach
  2. Development of a Berg Balance Scale Short-Form Using a Machine Learning Approach in Patients With Stroke
  3. Using Artificial Intelligence to Identify the Associations of Children's Performance of Coloring, Origami, and Copying Activities With Visual-Motor Integration

       3論文之同質性偏高,顯示我們的能力/資源限制(「分析/應用能力」以及「資料庫之質與量」皆不足)。短期間不易突破,但應值得繼續努力提升分析/應用能力,以及找尋與累積資料庫之質與量。

研究計畫:

  1. 發展中風患者動作、平衡及行走能力之人工智慧評估系統【2023年結案】
  2. 發展認知評估之人工智慧系統於思覺失調症患者【執行中/2025年結案】
  3. 提升職能治療師/實習學生以個案為中心之決策效能:從傳統方法過渡至人工智慧【執行中/2024年結案】

    3計畫之執行/完成率偏低,主要困難在於資料(庫)累積太慢。或可期待恭宏的AI認知收案。

    自行累積的教學資料庫,生理領域已暫停(因人手不足),心理領域慢慢進行中。心理領域另有OSCE(李P)/大三團體帶領(陳P)以及大四實習團體帶領(李主任)之 video,持續累積中。「團體帶領之教學、帶領以及評估」應是下一階段之重要研究議題。

    另取得 PANSS 資料,已完成稿件, R1 審查中。

資料庫取得:

        取得國家級資料庫-WHODAS 2.0 ,含數種診斷,且有追蹤資料。2024年應有稿件完成。



2024年1月25日 星期四

ChatGPT相關之教學 videos & PPT

My GPTs 使用經驗交流(榆函、宣佑、玉正、怡晴與清麟)【May 29, 2024】

Lynn 閱讀英文期刊論文 (若需PPT,請找我):

謝清麟  

2023年度報告 -- ChatGPT 研究

2023年3~4月決定投入,這或是職涯末期最關鍵的決定!!

投入主因:跟AI相關,且預期ChatGPT將改變教學、研究、甚至影響臨床執業程序/效能!!

招兵買馬:結合楊醫師團隊,擬定主要研究方向

  1. 應用成效:如「ChatGPT輔助撰寫研究計畫」「GPChatT作為標準病人之效能」「ChatGPT輔助給予教學評語之成效驗證」
  2. 評估工具:如「大型語言模型AI(如 ChatGPT)使用之需求與使用經驗的問卷」
  3. 教與學之影響-追蹤研究:如 ChatGPT之使用與成效調查

分享與教學應用

  1. 數次與臨床人員、教師交流以及數篇研討會論文發表
  2. 已開授之課程,皆鼓勵學生使用

進展與後續

  1. 已完成一篇稿件初稿 (大型語言模型AI使用之需求與自我效能問卷發展),應可於2月投稿
  2. 數個研究計畫執行中,主要是ChatGPT輔助教學成效驗證
  3. 修飾上述3個研究方向,再寫數個研究計畫--這需再跟團隊討論--或可於過年後聚會中,討論之
  4. 建立 ChatGPT 簡介/操作 videos,做為教材
圖:Aug., 2023 與學系教師分享之內容