35

參加人數

議題提供單位


ITRI 工業技術研究院成立於1973年,以科技研發,帶動產業發展,創造經濟價值,增進社會福祉為任務;成立四十多年來,累積近3萬件專利,並新創及育成281家公司。

簡介

情緒分析是現今自然語言處理 (NLP) 最重要的應用之一,藉此可以理解人們文字與言論中的情緒,理解評論的真實走向,幫助資料庫建立更加準確的評論系統。

此議題中蒐集了許多簡短的電影文字評論,參賽者需使用現有的評論,訓練人工智慧模型來分析、判斷類似的文字評論帶有正面或是負面的情緒。

資料來源:
[1]https://ai.stanford.edu/~amaas/data/sentiment/

[2]https://paperswithcode.com/dataset/sst


本議題僅開放清華大學教授林嘉文「深度學習」課程專題使用。

活動時間


活動結束於 2023/01/14 午夜 11 時 59 分。

評估標準


評估方式採用採用 F1 score [1]。
公式如下: $$ \text{F1-score}= 2 \times {(Precision \times Recall) \over (Precision + Recall) } $$
Reference
[1]F1 score:
https://en.wikipedia.org/wiki/F1_score

規則

  1. 活動評估結果以最後上傳的結果為基準,若評估分數一致時,以上傳時間優先為主。
  2. 線上評分排名系統無上傳次數限制。
  3. 本議題不允許組隊,同一人只能有一組帳號。
  4. 若活動發生舞弊行為(如:多人私下組隊或交換答案…等違反規定行為),則舞弊之帳號之將無法獲得此專題之成績。
  5. 測試資料的答案上傳後,將分為兩部份計算:
    • 專題截止時間之前,系統僅參照部份測試資料的真實數值(Ground Truth)來驗證與計算分數,並公佈於 Public Leaderboard;此資料佔全部測試資料的 40%。
    • 專題截止時間之後,系統將會參照剩餘測試資料(60%)的真實數值(Ground Truth)來驗證與計算分數,並公佈於 Private Leaderboard,以作為最終成績和最後的排名依據。
  6. 禁止使用任何人工方式作答。