簡介

大部分的民眾都會藉由門診的方式來接受醫療行為，而醫療人員也大多會因為看診時的資訊來了解民眾的身體狀況，因此門診互動提供了相當多可貴的資訊。

然而門診時的看診狀況多單靠醫療人員即時做病歷紀錄，且往往因為時間急迫而只能做條列式的簡潔紀錄。但是整個看診狀況能夠提供相當多有用的資訊，若能讓醫療人員可以事後回顧看診狀況或是有即時的決策輔助系統，將能節省醫療人員的時間心力、降低他們的負擔。

本競賽提供從成大醫院合作之門診所收錄而來的門診對話及相關訪談的看診對話資料，由醫師針對該次門診對話進行標註。並將資料分為訓練集、開發集與測試集。

本競賽共有兩個預測任務：（1）決策預判與風險評估, （2）醫病問答。

（1）決策預判與風險評估：從門診對話脈絡，判斷該求診民眾是否需要再進一步評估，例如感染疾病的風險高低、是否需要再回診或檢查。

（2）醫病問答：題目為從門診對話資料擷取出與該次看診狀況有關的問題，從多選項中回答出正確選項為答案。

本競賽以 AUROC 作為（1）決策預判與風險評估的表現評估方法；以 Accuracy 作為（2）醫病問答的表現評估方法。最終將兩個任務的得分做算術平均，成為此次競賽參賽者系統的最終分數。

相關問題諮詢，請洽：ikm.ncku@gmail.com

參賽對象

• 全國各大專院校在學生（含研究生）。
• 全國高中職學生，因報名系統限制，高中學生報名時，請先以業界人士身份進行報名，待名次確認或獲獎時須提供在校證明，以便受獎。
• 業界亦可參加，若名次在前 25% 且超過 basline 之隊伍，經評審委員審定後，僅可獲頒計畫辦公室獎狀，無法受領教育部獎狀和獎金。

競賽方式及評選辦法

本競賽「醫病訊息決策與對話語料分析競賽 - 春季賽」將分為兩項任務：（1）「決策預判與風險評估」係依據主辦單位所提供之語料集，並經由主辦單位聘僱之生物及醫學領域專家所標註的結果，以 AUROC 來評比各參賽隊伍的系統效能和名次。（2）「醫病問答」係依據主辦單位所提供之語料集，並經由主辦單位聘僱之生物及醫學領域專家所標註的結果，以 Accuracy 來評比各參賽隊伍的系統效能和名次。

詳細辦法說明如下：本競賽有三種語料集，分別為訓練集（Training Data）、開發集（Development Data）及測試集（Test Data），其中訓練集與開發集分為兩次釋出，第一次釋出訓練集，第二次釋出開發集。

• 第一階段：主辦單位提供約 20 篇經生物及醫學領域專家標註之範例資料。
• 第二階段：春季賽分次提供訓練集與開發集：第一次提供訓練集，於第二次提供開發集，並提供線上評分排名系統，根據不同任務採用 AUROC 或是 Accuracy 指標評分。須注意每次公布新的資料集，都會清空排名系統，重新進行評分排名。參賽隊伍需從「訓練集」中訓練模型，並以該模型對「開發集」進行預測，上傳「開發集」之預測結果至線上評分排名系統，來進一步調校系統效能。
• 第三階段：主辦單位公布完整的測試集（Test Data）。參賽隊伍需在截止時間前，至平台上傳「完整測試集」的預測結果。
• 第四階段：競賽時間截止，系統會以最後一筆上傳的結果計算測試集的評估分數，並以此測試集的結果為最終排名依據。
• 參賽者必須在分數公布後，於規範時程內上傳系統報告說明文件以及原始程式碼，以茲證明無任何作弊或抄襲之可能。委員們將在此階段一一進行嚴格的文件審查，未上傳隊伍將不列入最後名次與獎項評選名單。
• 評分：決策預判與風險評估任務用 AUROC 來評估參賽隊伍的系統效能，醫病問答任務用 Accuracy 來評估參賽隊伍的系統效能，兩者最終分數公布於 Private Leaderboard，而本春季賽的最終分數為兩項任務分數的算術平均值，委員將以此最終分數的成績高低為依據評估最後獎金賽名次。

※開發集階段每個參賽隊伍最多每日上傳三次，在測試集階段每個參賽隊伍最多只能上傳一次。

獎項

敘獎對象須為報名時具中華民國之在學生，敘獎時需檢附相關證明。

在「醫病訊息決策與對話語料分析競賽 - 春季賽」項目前 15 名的優勝隊伍和兩名創意隊伍將獲得競賽獎金，春季賽獎金共 40 萬：

• 獲獎隊伍經評審委員審定後將獲得教育部獎狀乙紙。
• 各項獎勵名額得視參賽件數及成績酌予調整，參賽作品未達水準時，得由決選評審委員決定從缺，或不足額入選。
• 創意獎項由評審委員根據其方法表現、創新性與做法獨特性等面向評選出至多兩名隊伍。