競賽說明

居家環境中有許多不同類型的聲音，舉凡吸塵器、警報器、門鈴、電視聲等，充斥著我們的生活。由 Tomofun 所開發的 Furbo 狗狗攝影機，結合攝影機、丟零食互動、AI 智慧通知三大功能，成為狗狗的專屬保姆。Furbo 已經在全球成功拯救了超過 1000 隻狗狗的生命，包括避免狗狗誤食、通知家中發生火災、還有通知有陌生人闖入家裡等，以此保護狗狗的安全。AI 產品落地對各家公司來說一直是艱難的考驗，Tomofun 秉持著 “bring joy and innovation to every pet lover in the world” 的精神，開發出 AI 智慧通知功能，第一時間通知主人家中可能發生的狀況，即時掌握毛孩的狀態。

Tomofun 為了致力於讓 Furbo 提供更好的 AI 服務，舉辦了「Tomofun 狗音辨識 AI 百萬挑戰賽」。在本次競賽當中，我們將提供居家環境中可能會發生的聲音，並請參賽者做出居家環境音的識別，藉此讓每個毛小孩家庭更加安全又安心。 本次競賽共包含兩場賽事，分別為「初賽 」和「 」。

• 初賽: 2021/05/10 – 2021/06/10 期間於 T-Brain 平台上傳分類結果，將以預測的分數作為排名依據，並根據繳交的報告，公布晉級決賽之隊伍。
• 決賽: 2021/07/17 於線上進行，將模擬 AI 服務落地的方式舉辦賽事，當天獲得優異成績之隊伍，就有機會獲得高額獎金。
  

報名規範

1. 年滿20歲皆可報名參加，未滿20歲之未成年人經法定監護人同意後可報名參加。
   （Tomofun 友愉股份有限公司、趨勢科技股份有限公司、及Amazon Web Services Taiwan Ltd.之公司員工除外）。
2. 參賽隊伍人數1至5人。
3. 參賽者只能加入一個參賽隊伍，一旦加入隊伍後則無法更換隊伍。
4. 報名截止後，不可再變更團隊成員名單及人數。
5. 比賽期間，隊伍不可合併與分割。
6. 初賽組隊之成員視同為決賽組隊之成員。
7. 出席決賽之人數需至少為初賽報名人數之一半。例如：初賽報名為5人隊伍，則決賽至少需要3人出席。初賽報名為3人隊伍，則決賽至少需要2人出席。

領獎資格與方式

1. 本次獎項之領獎資格依決賽結果評定，初賽無敘獎。初賽前 25 名之隊伍，需於比賽結束後的指定期限內繳交文件給 主辦單位 確認無違規事項，即可取得晉級決賽之資格，放棄則名額不予遞補。
2. 晉級決賽之隊伍隊員需依主辦單位規定，當天報到者需全程參與決賽當日之活動，包括並不限於教育訓練、成果簡報、頒獎典禮等。
3. 隊伍內至少一人須具備中華民國國籍、或中華民國工作或學生簽證，該參賽隊伍方具領獎資格。
4. 獎金以新台幣匯款方式發放，符合報名規範及具領獎資格之得獎隊伍應推派有本地新台幣帳戶之隊員代表受領獎金，並以該隊員為中華民國稅務申報人，依規定簽署包含稅務、個資使用等相關之文件。
5. 因報名資格審查及頒獎資料審核需求，請確認 T-Brain 註冊帳號之姓名為正確之中文姓名，如有需要可至 T-Brain 帳號之 My Profile 功能中進行修正。

評分標準

初賽：預測內容格式需符合比賽格式規定，將以私人測試集作為算分依據，按照分數高低進行排名，前 25 名之參賽隊伍需繳交賽後文件，經主辦方審查後，公布進入決賽之隊伍。

決賽：將以比賽最後 2 小時之 3600 筆資料作為算分依據，按照分數高低進行排名，前 5 名之參賽隊伍需上台分享實作內容，並由評審選出一組評審獎。

評分方式

Prevalence-weighted average of Area Under the ROC Curve (AUC) for multi-class problem (one-vs-rest).

其中:

1. C 為全部類別的集合，在此競賽中，C = {'類別1', '類別2', '類別3', '類別4', '類別5', '類別6'}。
2. Scheme 選擇 one-vs-rest。
3. Average method 選擇 prevalence-weighted，它會根據每個類別的資料數量進行加權平均。

參考資料：
Fawcett, Tom. "Using rule sets to maximize ROC performance." Proceedings 2001 IEEE international conference on data mining. IEEE, 2001.

競賽規則

初賽進行與規則

初賽的進行方式如下：

1. 參賽隊伍於 T-Brain 平台上註冊比賽。
2. 參賽隊伍於 2021/05/10 12:00 比賽開始後可至 T-Brain 平台 Dataset Download 區下載訓練資料集以及公開測試資料集。
3. 開始訓練模型並預測結果。
4. 預測結果每日提交上限為 2 次，提交檔案內容格式須符合比賽格式規定，Public Leaderboard 系統會對每次的提交結果進行評測，參賽隊伍可以依此參考模型的表現。
5. 主辦單位將於 2021/06/08 12:00 公開私人測試集，每日提交上限同樣為 2 次，初賽結束時間為 2021/06/10 12:00，將於隔天 2021/06/11 12:00 公布 Private Leaderboard 的結果，以此結果進行初賽排名。
6. 前 25 名之參賽隊伍需繳交賽後文件 (寄信至: 主辦單位)，可至 Dataset Download 區下載文件範本，在 2021/06/21 23:59 以前交給主辦單位審核，經確認無違規事項或任何人工標記之疑慮後，2021/06/30 12:00 會於 T-Brain 平台公布晉級決賽之資格。

初賽的相關規則如下：

1. 預測結果每日提交上限 2 次。
2. 提交預測結果之內容格式需符合比賽規定(請參閱 Dataset Download 區之文件)。
3. 請於期限內繳交賽後文件，若逾期繳交視同放棄進入決賽之資格。
4. 務必使用Machine Learning來進行辨識與分類，禁止使用任何人工標記。
5. 禁止使用非開源 Auto Machine Learning 相關之服務 (MLOps服務除外)。
6. 禁止使用非開源 Machine Learning Classification/Labeling 相關之服務 (例如:Cognitive Services)。
7. 不可私下共享程式及特徵值，但可在官方討論區公開討論。
8. 資料集僅限於此次比賽使用，參賽者不得為自己或他人利益而洩漏或交付資料集予非參賽者。
9. 參賽隊伍可以使用自行製作之資料，或額外之開源資源來增進模型訓練結果，惟務必使用Machine Learning來進行(測試資料集)辨識與分類，禁止使用任何人工標記。若有使用額外之開源資料，須於比賽結束繳交之書面報告文件中提供相關來源；若有使用自行製作之資料，需於比賽結束後提供該資料內容，以利進行審核。如有爭議，主辦單位保有最終決定權。
10. 如有需要，主辦單位有權在比賽途中調整資料集。
11. 如有下列情事，主辦單位得無需告知參賽者，逕行取消參賽者資格或領獎資格：
• 已有具體事證，所屬隊伍有任何抄襲、作弊、或詐欺等行為
• 已有具體事證，所屬隊伍有侵害他人智慧財產權之情事
• 已有具體事證，所屬隊伍有對Leaderboard系統進行攻擊
• 已有具體事證，所屬隊伍影響其他參賽隊伍導致不公平事例發生
• 已有具體事證，所屬隊伍違反本比賽活動辦法、或「T-Brain AI實戰吧平台服務」 使用條款、或「Tomofun 狗音辨識 AI 百萬挑戰賽」參賽者使用條款
12. 主辦單位保有對活動與競賽規則解釋及裁決的權利。

決賽進行與規則

決賽的進行方式如下：

1. 進入決賽之隊伍，主辦方會提供比賽專用 email 與 AWS 帳號 (包含免費使用額度，參賽者若於額度內使用便不會進行扣款) 作為決賽使用。並於決賽結束後一個月回收此比賽專用 email (參賽者可自行修改 AWS 帳號的 email 設定以繼續使用此 AWS 帳號)。
2. 進入決賽之隊伍，需於 2021/07/03 參加 AWS 線上 Workshop，了解如何操作決賽時將會使用的 AWS 相關服務。
3. 主辦單位將於決賽前 3 天開始透過 endpoint API 打資料，參賽隊伍可利用此 API 測試是否正常運作。
4. 參賽隊伍於競賽當日報到後，現場將有 tutorial 和競賽說明，並於說明結束後開始進行 4 小時的比賽。
5. 比賽過程將模擬 AI 服務落地的實作，主辦單位會發送 HTTP request (POST 方法) 送出音檔（wav檔），以每 2 秒送出一筆音檔的速度進行比賽，參賽隊伍需事先利用 AWS 提供之服務建立好 pipeline 並即時送出模型預測結果 (建議使用 AWS SageMaker 實作，若使用其他做法，僅能使用 AWS 所提供之服務)。
6. 為了模擬 MLOps 之運行，參賽者可使用 AWS GroudTruth 來標記收到的資料，即時重新訓練模型，以提供更好的 AI 服務。
7. 比賽計分方式以最後 2 小時之 3600 筆資料作為算分依據，按照分數高低進行排名。
8. 進入前五名之隊伍需上台分享實作內容，可至 Dataset Download 區下載 PPT 範本。 並由評審選出一組隊伍獲得評審獎。

決賽的相關規則如下：

1. 最後兩小時之 3600 筆資料之算分以當下模型預測之結果為主，不接受事後補上預測結果。
2. timeout 時間為 3 秒，若參賽者 API Server 沒有回應，主辦單位會重新呼叫，最多呼叫 2 次，若皆無回應或是逾時則此題以 0 分計算。
3. 務必使用Machine Learning來進行辨識與分類。
4. 禁止使用非開源 Auto Machine Learning 相關之服務 (MLOps服務除外)。
5. 禁止使用非開源 Machine Learning Classification/Labeling 相關之服務 (例如:Cognitive Services)。
6. 不可私下共享程式及特徵值，但可在官方討論區公開討論。
7. 資料集僅限於此次比賽使用，參賽者不得為自己或他人利益而洩漏或交付資料集予非參賽者。
8. 參賽隊伍可以使用自行製作之資料，或額外之開源資源來增進模型訓練結果，惟務必使用Machine Learning來進行(測試資料集)辨識與分類，禁止使用任何人工標記。若有使用額外之開源資料，須於比賽結束繳交之書面報告文件中提供相關來源；若有使用自行製作之資料，需於比賽結束後提供該資料內容，以利進行審核。如有爭議，主辦單位保有最終決定權。
9. 如有需要，主辦單位有權在比賽途中調整資料集。
10. 如有下列情事，主辦單位得無需告知參賽者，逕行取消參賽者資格或領獎資格：
• 已有具體事證，所屬隊伍有任何抄襲、作弊、或詐欺等行為
• 已有具體事證，所屬隊伍有侵害他人智慧財產權之情事
• 已有具體事證，所屬隊伍影響其他參賽隊伍導致不公平事例發生
• 已有具體事證，所屬隊伍違反本比賽活動辦法、或「Tomofun 狗音辨識 AI 百萬挑戰賽」參賽者使用條款
11. 主辦單位保有活動變動、競賽規則解釋及裁決之權利。若因應政府防疫規定或其他不可抗力之因素，須取消活動或調整活動內容，主辦單位得以參賽者報名時所提供之聯絡方式，提前通知相關活動變動之訊息，並同時公告於本報名頁面。

獎項說明

• 第一名 新台幣 15 萬元 + 獎狀一只 + AWS 獨家獎品
• 第二名 新台幣 10 萬元 + 獎狀一只 + AWS 獨家獎品
• 第三名 新台幣 5 萬元 + 獎狀一只 + AWS 獨家獎品
• 第四名 新台幣 3 萬元 + 獎狀一只 + AWS 獨家獎品
• 第五名 新台幣 2 萬元 + 獎狀一只 + AWS 獨家獎品
• 評審獎 新台幣 5 萬元 + 獎狀一只 + AWS 獨家獎品
• 晉級獎 新台幣 60 萬元 晉級決賽之參賽者每人贈送一台 Furbo，每台價值新台幣 6 千元

決賽得獎名單

晉級名單

競賽時程

線上 Workshop: Running frequent incremental training and real time serving

• 此 workshop 僅開放給決賽參賽隊伍參與，但後續會釋出當天錄影檔

黑客松線上決賽

備註：以上時程皆為UTC+08:00時區。

主辦單位:Tomofun 友愉股份有限公司

Tomofun是一間國際化的寵物科技新創公司，由Victor Chang及Maggie Cheung共同成立，並由趨勢科技創辦人Steve作為Mentor，運用最先進的技術-IoT物聯網、AI人工智慧、雲端大數據等，致力於帶給全世界寵物主人源源不絕的歡樂與創新！

「Furbo狗狗攝影機」是我們推出的第一個革命性產品，讓飼主透過手機隨時隨地與狗狗遠端互動，解決當主人不在寵物身邊時的焦慮，還能進一步追蹤、分析狗狗的行為，真正實踐寵物就是家人、永遠緊緊相依的願景。

Furbo不只在台灣受注目，更在全世界超過五十個國家熱銷，於美國、加拿大、英國及日本等全球10國亞馬遜上，連續三年都是最暢銷的狗狗攝影機，是至今最成功的寵物科技新創品牌。

我們持續開發世界級的產品、拓展國際市場，因而決定擴大延攬擁有企圖心的研發及行銷高手，與我們一同透過創新來改變寵物與主人的生活。目前Tomofun在美國西雅圖、德國慕尼黑、日本東京、台灣台北皆設有辦公室。

協辦單位：Amazon Web Services Taiwan Ltd.

15年以來，Amazon Web Services一直是世界上服務豐富、應用廣泛的雲端服務平台。AWS為客戶提供超過200種功能全面的雲端服務，包括運算、儲存、資料庫、聯網、分析、機器人、機器學習與人工智慧、物聯網、行動、安全、混合雲、虛擬和擴增實境(VR 和AR)、媒體，以及應用開發、部署和管理等方面，遍及25個地理區域內的 80個可用區域(Availability Zones)，並已公佈計畫在澳洲、印度、印尼、西班牙和瑞士建立5個AWS地理區域、15個可用區域。全球超過百萬客戶信任AWS，包含發展迅速的新創公司、大型企業和政府機構。

AWS協助客戶強化自身基礎設施，提高營運上的彈性與應變能力，同時降低成本。欲瞭解更多AWS的相關資訊，請至：aws.amazon.com

平台贊助單位：趨勢科技

趨勢科技為資訊安全解決方案全球領導廠商，致力建立一個安全的資訊交換世界。我們專為消費者、企業及政府機構設計的創新解決方案，能為資料中心、雲端工作負載、網路、端點裝置提供多層式安全防護。我們的產品皆彼此整合、共享威脅情報，提供環環相扣的威脅防禦與集中式的掌握及調查能力，實現更好、更快的防護。趨勢科技全球共超過 6,000 名員工，遍及 50 個國家，並擁有全世界最先進的全球威脅研究及情報，是企業保護連網環境的最佳夥伴。

Q&A

若對於比賽有任何問題，歡迎在討論區提出， 或將問題透過 Email 寄到T-Brain 或 主辦單位。