[Most-ai-contest] FW: 【官方公告】訓練資料更新提醒&多輪對話說明
kysu
kysu於iis.sinica.edu.tw
Wed 3月 11 14:36:52 CST 2020
From: grandchallenge [mailto:grandchallenge at stpi.narl.org.tw]
Sent: Wednesday, March 11, 2020 2:12 PM
To: undisclosed-recipients:
Subject: 【官方公告】訓練資料更新提醒&多輪對話說明
Importance: High
團隊您好,
提醒各位,新版的API文件【API_Specification_v2.docx】參數,之前有公告調整,
其中Input Key:【filePath】已改為【file】。因此請大家注意串接API時要改為
【file】。
O 正確
curl --form file=@檔案所在路徑 --form ...
X 錯誤
curl --form filePath=@檔案所在路徑 --form ...
另外,FGC Training Data 2已更新,請團隊至國網資料市集下載新版(FGC Training
Data 2 v8.7z)。
https://scidm.nchc.org.tw/dataset/fgc-training-data-2
本次更新內容如下:
.更新範例腳本為V3,新增對話中最後一句Agent回覆的範例(標註為紅字)。
在此說明多輪對話中,已經完成訂單的資訊蒐集後,User最後一句對話(比如:謝謝、
不用之類的,不回覆也不影響任務完成的對話),Agent無論回覆或者不回覆,考官仍會
回復參賽隊伍「輸出表單」並完成此對話。
但若Agent有發出回覆,回覆的內容仍應要符合「任務型多輪對話測驗說明」之評分原
則(如下圖表)。
如果Agent出現下列狀況,考官會將其內容評為錯誤,並判斷任務失敗:
(1) 文不對題、句子不完整、語意不明
(2) 詢問已知資訊或重複問題
最後附上任務成功及失敗的範例各2個,供團隊參考。
科技大擂台 敬上
-------------- next part --------------
An HTML attachment was scrubbed...
URL: <http://www.iis.sinica.edu.tw/pipermail/most-ai-contest/attachments/20200311/821a197a/attachment-0001.html>
-------------- next part --------------
A non-text attachment was scrubbed...
Name: not available
Type: image/png
Size: 8023 bytes
Desc: not available
URL: <http://www.iis.sinica.edu.tw/pipermail/most-ai-contest/attachments/20200311/821a197a/attachment-0004.png>
-------------- next part --------------
A non-text attachment was scrubbed...
Name: not available
Type: image/png
Size: 597147 bytes
Desc: not available
URL: <http://www.iis.sinica.edu.tw/pipermail/most-ai-contest/attachments/20200311/821a197a/attachment-0005.png>
-------------- next part --------------
A non-text attachment was scrubbed...
Name: 評分原則.png
Type: image/png
Size: 8023 bytes
Desc: not available
URL: <http://www.iis.sinica.edu.tw/pipermail/most-ai-contest/attachments/20200311/821a197a/attachment-0006.png>
-------------- next part --------------
A non-text attachment was scrubbed...
Name: 多輪對話範例圖.png
Type: image/png
Size: 597147 bytes
Desc: not available
URL: <http://www.iis.sinica.edu.tw/pipermail/most-ai-contest/attachments/20200311/821a197a/attachment-0007.png>
More information about the Most-ai-contest
mailing list