327

參加人數

議題提供單位

ITRI 工業技術研究院成立於1973年,以科技研發,帶動產業發展,創造經濟價值,增進社會福祉為任務;成立四十多年來,累積近3萬件專利,並新創及育成281家公司。

2021/08/25 得獎名單公布延後

因參賽者所用解題方式非本議題期望之AI評論分析模型,不予敘獎,名次將依序遞補。 得獎名單將延後數日公布,敬請見諒。

2021/08/12 賽後驗證

競賽已結束,平台將對有敘獎資格者進行驗證,驗證如較耗時,公布得獎日期會延後,屆時另行公告。

簡介

情緒分析是現今自然語言處理 (NLP) 最重要的應用之一,藉此可以理解人們文字與言論中的情緒,理解評論的真實走向,幫助資料庫建立更加準確的評論系統。

此議題中蒐集了許多簡短的電影文字評論,參賽者需使用現有的評論,訓練人工智慧模型來分析、判斷類似的文字評論帶有正面或是負面的情緒。


資料來源

[1] https://ai.stanford.edu/~amaas/data/sentiment/
[2] https://paperswithcode.com/dataset/sst

獎項

獲獎條件:在 Private Leaderboard 高於 baseline 0.8 之前三名。

第一名:15,000 元獎金 (含稅) + TWCC 台灣 AI 雲 新台幣 50,000 元的運算額度

第二名:10,000 元獎金 (含稅) + TWCC 台灣 AI 雲 新台幣 30,000 元的運算額度

第三名:5,000 元獎金 (含稅) + TWCC 台灣 AI 雲 新台幣 20,000 元的運算額度

佳作 (數名):TWCC 台灣 AI 雲 新台幣 20,000 元的運算額度


工業技術研究院之相關人員(含員工、實習生、工讀生等)不得敘獎,若已頒發,則追回獎金、獎項。

獲獎相關說明

  • Private Leaderboard 前三名於期限內繳交書面報告者,始具備得獎資格。
  • 逾期未繳交報告視同放棄獲獎資格(報告不會對外公開)。
  • TWCC 運算額度敘獎資格:具備中華民國國籍者。
  • TWCC 使用期限為 6 個月。
  • 使用TWCC運算資源請遵守TWCC臺灣AI雲之規範,務必詳閱其內容(https://iservice.nchc.org.tw/nchc_service/template/member_contract_3_zh_tw.html

 

活動時間

議題進行時間以台灣時間(UTC+8小時)為主,其時程如下:

時間事件
2021/05/13報名開始、開放上傳
2021/08/11 23:59:59上傳截止
2021/08/12公布Private Leaderboard
2021/08/18 23:59:59繳交報告截止
2021/08/25公布得獎名單

評估標準


本議題採用 F1 score [1]。公式如下: $$ F_{1} = {2\cdot {precision \cdot recall \over precision+recall}} \\ $$

Reference
[1] F1 score:
https://en.wikipedia.org/wiki/F1_score

規則

  • 活動評估結果以最後上傳的結果為基準,若評估分數一致時,以上傳時間優先為主。
  • 上傳次數限制為 3 次/天。
  • 工業技術研究院、出題廠商之相關人員(含員工、實習生、工讀生等)不得敘獎,若已頒發,則追回獎金、獎項。
  • 本議題不允許組隊,同一人只能有一組帳號,人員不得重複參加,違者經確認後會取消參賽資格。
  • 參賽作品所使用之資料、技術與程式碼,均屬參賽者之原創或已取得合法授權,若有任何第三者主張侵害智慧財產權或其他違法情事,均由參賽者自行出面處理;若有侵害他人智慧財產權之情事者,主辦單位將取消競賽及得獎資格,參賽者應自行負擔相關法律責任。
  • 參賽成果之智慧財產權歸屬參賽者擁有,其著作授權、專利申請、技術移轉及權益分配等相關事宜,應依相關法令辦理。
  • 主辦單位有權對參賽者進行成績查驗相關措施。
  • 不同帳號禁止交流答案,違者視同舞弊。
  • 若活動發生舞弊行為,則舞弊之參賽者將被取消參加資格,獎項依排名遞補。
  • 測試資料的答案上傳後,將分為兩部份計算:
    • 活動時間截止前,系統僅參照部份測試資料的真實數值(Ground Truth)來驗證與計算分數,並公佈於 Public Leaderboard;此資料佔全部測試資料的 40%。
    • 活動時間截止後,系統將會參照剩餘測試資料(60%)的真實數值(Ground Truth)來驗證與計算分數,並公佈於 Private Leaderboard,以作為最終成績和最後的排名依據。
  • 禁止使用任何人工方式作答。
  • 未來如有任何爭議,主辦單位將保留最終決定權。
  • 主辦單位有權因需要調整賽程及相關規定。