148

參賽隊伍

總獎金 新台幣 0.00 萬元

教育部全國大專校院人工智慧競賽(AI CUP)-機器閱讀紀錄-課程挑戰賽

已結束

競賽說明

如何設計一個系統，能自動閱讀論文摘要後，標註並統整論文裡所涉及的演算法？ 鑑於當今電腦科學的發展日新月異，演算法的更迭與演進以爆炸式的成長，歸納及統整這些演算法所需的人力將不復以往，而爬梳相關文獻所需的時間也往往讓研究者們深感無力。因此，讓機器自動梳理這些不斷推陳出新的演算法，將會是無可避免的嘗試。即便在人力可負擔的情形下，讓機器自動統整相關演算法，將可以讓研究者騰出時間做更有意義的事。

在本系列的競賽中，我們將嘗試以語意分析的技術解決一個令電腦科學研究者頭痛已久的問題：「如何設計一個能自動閱讀論文摘要，標注並統整論文中所發明、使用或用來比較的演算法的系統」。

 

競賽任務 [機器閱讀紀錄-課程挑戰賽]：

從arXiv的電腦科學相關論文摘要，預測出摘要所屬的類別(Theoretical Paper, Engineering Paper, Empirical Paper, Others)。需注意的是摘要可以有多個分類，例如: 摘要可以同時是Theoretical Paper和Engineering Paper。


報名規範

  1. 年滿18歲皆可報名參加，未滿18歲之未成年人經法定監護人同意後可報名參加。（趨勢科技公司員工除外）
  2. 皆為單人參賽，每個參賽隊伍僅限1人。
  3. 參賽者只能加入一個參賽隊伍，一旦加入隊伍後則無法更換隊伍。
  4. 報名截止後，不可再變更團隊成員名單及人數。
  5. 基於學校課程要求而參與比賽的參賽者，隊伍命名方式請依循學校課程之規定，以利課堂評分。

領獎資格與方式

  1. 本次獎項包括：「超越紀錄獎」、「挑戰成功獎」、及「趨勢科技育才加碼獎」。 成績超過競賽運籌單位設定標準者，可獲頒之「超越紀錄獎」或「挑戰成功獎」，惟若人數超過50人，則僅計前50名為得獎者。成績名列前10名者，可獲頒「趨勢科技育才加碼獎」。
    • 超越紀錄獎：Private Score≥0.756之參賽者頒發「超越記錄金質證書」乙份。
    • 挑戰成功獎：Private Score≥0.741之參賽者頒發「挑戰成功銀質證書」乙份。
    • 趨勢科技育才加碼獎：前10名隊伍，每位參賽者致贈Intel Neural Compute Stick 2乙隻 (缺貨則以規格相仿之運算加速設備替代)。
  2. 得獎隊伍同意協助本次競賽運籌單位與贊助單位下列安排，否則喪失領獎資格。
    • 參賽者須具備中華民國國籍、或中華民國工作或學生簽證，並依規定簽署包含稅務、個資使用等相關之文件，方具領獎資格。
    • 得獎隊伍相關指導教授，將由競賽運籌單位發函建請教育行政主管機關學校，本權責予以行政獎勵。惟指導教授不得與學生一同報名，請於通知得獎後告知指導教授名稱。
    • 得獎隊伍需於比賽結束後的指定期限內，繳交實作程式及設計文件，以利敘獎資格審查。
    • 因報名資格審查及頒獎資料審核需求，請確認 T-Brain 註冊帳號之姓名為正確之中文姓名，如有需要可至 T-Brain 帳號之 My Profile 功能中進行修正。

評分標準

  1. 提交檔案內容格式需符合比賽格式規定。
  2. Leaderboard系統會對每次的提交結果進行評測。
  3. 比賽過程中，參賽隊伍會得到 Public Leaderboard 評測的分數做為參考。
  4. 比賽過程中，將同時公佈 Private Dataset 供參賽者進行預測及上傳。比賽結束後公佈 Private Leaderboard 的結果，以最後一次上傳之Private Dataset預測獲得之分數排名。

評分方式

Micro F1 Score

  • TPi : 分類 i 的 True Positive
  • FPi : 分類 i 的 False Positive
  • TNi : 分類 i 的 True Negative
  • FNi : 分類 i 的 False Negative

競賽規則

  1. Public Dataset和Private Dataset預測結果每日提交上限 2 次。
  2. 參賽隊伍可以使用額外資源如語料、字典及套件等來增進模型訓練結果，惟務必使用Machine Learning來進行辨識與分類，禁止使用任何人工標記。若有使用額外資料，需為公開/開源資料或學術資料集，也要提供來源資訊以進行審核。如有爭議，競賽運籌單位保有最終決定權。
  3. 禁止使用非開源Auto Machine Learning 相關之自動建模服務。
  4. 不可私下共享程式及特徵值，但可在官方討論區公開討論。
  5. 如有需要，競賽運籌單位有權在比賽途中調整資料集。
  6. 如有下列情事，競賽運籌單位得無需告知參賽者，逕行取消參賽者資格或領獎資格：
    • 已有具體事證，所屬隊伍有任何抄襲、作弊、或詐欺等行為
    • 已有具體事證，所屬隊伍有侵害他人智慧財產權之情事
    • 已有具體事證，所屬隊伍有對Leaderboard系統進行攻擊
    • 已有具體事證，所屬隊伍影響其他參賽隊伍導致不公平事例發生
    • 已有具體事證，所屬隊伍違反本比賽活動辦法、或「T-Brain AI實戰吧平台服務」 使用條款、或「教育部機器閱讀公開挑戰賽」 參賽者使用條款
  7. 競賽運籌單位保有對活動與競賽規則解釋及裁決的權利。

獎項說明

  • 第一名 獲贈 Intel Neural Compute Stick 2 乙隻
  • 第二名 獲贈 Intel Neural Compute Stick 2 乙隻
  • 第三名 獲贈 Intel Neural Compute Stick 2 乙隻
  • 第四名 獲贈 Intel Neural Compute Stick 2 乙隻
  • 第五名 獲贈 Intel Neural Compute Stick 2 乙隻
  • 第六名 獲贈 Intel Neural Compute Stick 2 乙隻
  • 第七名 獲贈 Intel Neural Compute Stick 2 乙隻
  • 第八名 獲贈 Intel Neural Compute Stick 2 乙隻
  • 第九名 獲贈 Intel Neural Compute Stick 2 乙隻
  • 第十名 獲贈 Intel Neural Compute Stick 2 乙隻

前10名者可獲贈Intel Neural Compute Stick 2乙隻。

超越紀錄獎：分數超過0.756者，可獲頒計畫辦公室獎狀「超越記錄金質證書」乙份。

挑戰成功獎：分數超過0.741者，可獲頒計畫辦公室獎狀「挑戰成功銀質證書」乙份。

競賽時程

項目時程說明
報名時程2020/12/01 - 2020/12/30 開放報名
比賽時程2020/12/01 - 2021/01/06 競賽隊伍可上傳答案，評分系統將開始針對每個隊伍的答案進行評分
結果發佈2021/01/11結果上傳截止後，公佈 Private Leaderboard
文件繳交2021/01/11 - 2021/01/25繳交實作程式及設計文件，公開分享於AI CUP官網，以進行敘獎資格審查，並提供敘獎所需之個人資訊，逾期則依參賽者名次進行遞補
公佈最後名次2020/02/22公佈本次比賽的最終名次

 

競賽運籌單位：教育部人工智慧競賽與標註資料蒐集計畫辦公室

本計畫【人工智慧競賽與標註資料蒐集】為教育部所發起的人工智慧技術及應用人才培育計畫中的其中一項子計畫，透過訂定競賽議題，並每年舉辦AI競賽，藉由搭配學期時間與學校課程合作，老師可審核學生學習一學期後將理論運用在實際問題上的能力，且因競賽資料較貼近生活實際狀況，而非針對教學方便所製作出簡單的數據，學生需要更深入思考才可達到標準，AI競賽將會經過競賽審查委員嚴格審查後頒發獎金及獎狀，以資鼓勵學生們參與培育更多AI人才。


競賽指導單位：教育部資訊及科技教育司

教育部資訊及科技教育司「結合資訊、科技與人文，引領學校邁向永續發展新世紀」之願景，規劃「前瞻人才培育」、「精緻數位學習」、「科研倫理素養」、「數位公義關懷」、「校園環境永續」五大目標，建構以「人」為中心的學習環境，培育具關懷社會與環境之現代公民，強化國家永續發展。

議題提供單位：國立臺灣大學資訊工程學系

民國66年教育部核准臺灣大學成立資訊工程學系，招收學士班學生，隸屬工學院，為臺灣最早以「資訊」命名之系所。民國70年成立研究所招收碩士班學生，民國73年延伸到博士班，從而建立一套完整的高級資訊工程教育體系。民國89年8月資訊系與電機系共同成立電機資訊學院，為全國電機資訊領域的研究重鎮。資訊系與資訊網路與多媒體研究所（民國93年成立）、生醫電子與資訊學研究所生醫資訊組（民國95年成立），共同於電機資訊學院內組成資訊學群。臺大資訊工程學系在優秀的師生與優良的設備之下，學術地位不僅國內領先，也達國際卓越水準。近年來，多次於全世界大專程式競賽ACM ICPC獲得金牌，並於機器學習KDD Cup世界大賽中多次獲得冠軍。

平台贊助單位：趨勢科技

趨勢科技為資訊安全解決方案全球領導廠商，致力建立一個安全的資訊交換世界。我們專為消費者、企業及政府機構設計的創新解決方案，能為資料中心、雲端工作負載、網路、端點裝置提供多層式安全防護。我們的產品皆彼此整合、共享威脅情報，提供環環相扣的威脅防禦與集中式的掌握及調查能力，實現更好、更快的防護。趨勢科技全球共超過 6,000 名員工，遍及 50 個國家，並擁有全世界最先進的全球威脅研究及情報，是企業保護連網環境的最佳夥伴。

Q&A

若對於比賽有任何問題，歡迎在 討論區 提出，或是將問題透過 Email 寄到 t_brain@trendmicro.com。

 

Loading . . .