瀏覽量0

自然語言處理模型自動判讀反思與回饋品質表現

自然語言處理模型自動判讀反思與回饋品質混淆矩陣

高品質及有效反思回饋比例逐年增加

反思及回饋品質自動判讀模型輔助臨床能力委員會決策工作坊

AI賦能教學創新:運用深度學習自然語言處理提升耳鼻喉科住院醫師反思與臨床教師回饋品質

天主教耕莘醫療財團法人耕莘醫院

臨床決策支援系統 教學研究管理系統 AI人工智慧
簡介
本專案源於能力本位醫學教育(CBME)推動過程中,住院醫師反思與臨床教師回饋內容品質不一、人工判讀耗時且資料過載等問題,影響教學成效與臨床能力評估精準性。為解決此瓶頸,團隊導入深度學習自然語言處理(NLP)技術,結合醫策會Emyway平台,建置自動化文字品質分析系統。系統可即時分析反思與回饋內容之相關性、具體性與行動指引,並進行品質分級,提供客觀量化指標與趨勢回饋。其特色在於採用BERT模型具備高準確度與語意理解能力,可處理中英文夾雜之醫學文本,大幅提升分析效率並降低人力負擔,同時促進教師精準回饋與學員深度反思,推動醫學教育數位轉型與品質提升。
導入效益

本專案於CBME全面推動及Emyway平台導入後,發現反思與回饋品質不穩、人工判讀耗時且資料量快速累積,遂跨領域結合醫學教育與資訊專業,導入深度學習NLP技術進行系統建置。初期以專家雙盲標註建立標準資料集,比較LRSVMBERT模型後,選定表現最佳之BERT進行微調與實際應用,並逐步整合至全國EPA評量資料分析流程,建立可持續運作之智慧化品質監測機制。

在效益方面,系統大幅提升分析效率,10,000筆資料由人工約需2,500分鐘縮短至約2.5分鐘,節省99.9%時間成本;同時顯著提升教學品質,高品質住院醫師心得由70.3%提升至99.5%,高品質教師回饋由50.6%提升至88.9%,三日內完成回饋比例亦由40.1%提升至86.4%,展現對學習動機與教學互動之正向影響。此外,系統可定期回饋量化與質性分析結果至各訓練機構,促進跨院經驗交流與持續品質改善。
 
在延伸應用方面,本專案已支援全國35家訓練醫院、100%住院醫師完成CCC總結信賴評定,並可進一步結合BI儀表板進行即時監測與決策支持。未來亦可擴展至其他專科訓練與醫事人員教育場域,並結合學習歷程分析、AI輔助回饋建議及教學決策系統,建立以數據驅動之醫學教育生態系,持續推動CBME智慧化與精準化發展。

合作夥伴

天主教輔仁大學圖書資訊學系

其他相似解決方案
VITAi系統「慧診全護:可解釋AI驅動
”戴克智慧” 甲狀腺超音波之影像標記輔助
”戴克智慧”心臟超音波之影像標記輔助系統
”戴克智慧” 髖關節超音波之影像標記輔助