外觀設(shè)計(jì)專利圖像分類挑戰(zhàn)賽

https://mp.weixin.qq.com/s/QyJbbE_V0VFgk5M_N1toLA

第四屆中國模式識(shí)別與計(jì)算機(jī)視覺大會(huì)（The 4th Chinese Conference on Pattern Recognition and Computer Vision, PRCV 2021）將于2021年10月29日至11月1日在北京舉行。PRCV2021由中國圖象圖形學(xué)學(xué)會(huì)（CSIG）、中國人工智能學(xué)會(huì)（CAAI）、中國計(jì)算機(jī)學(xué)會(huì)（CCF）和中國自動(dòng)化學(xué)會(huì)（CAA）聯(lián)合主辦。

1.背景介紹

外觀設(shè)計(jì)專利檢索可以幫助用戶依據(jù)要求找到他們需要的外觀設(shè)計(jì)專利。特別是在企業(yè)研發(fā)新產(chǎn)品時(shí)，可通過外觀專利檢索來避免重復(fù)開發(fā)，同時(shí)也要通過專利檢索來對(duì)必要專利進(jìn)行規(guī)避,其中專利檢索的重要組成部分就包括對(duì)于圖像的分類，因此，加強(qiáng)對(duì)外觀設(shè)計(jì)專利圖像分類是智能檢索系統(tǒng)的研究，在知識(shí)產(chǎn)權(quán)領(lǐng)域具有極強(qiáng)的實(shí)用價(jià)值。當(dāng)前，圖像分類檢索相關(guān)研究發(fā)展迅速，國內(nèi)外研究者眾多，文章方法層出不窮。然而，大多數(shù)研究還主要集中在算法層面，試圖解決圖像分類和檢索模型中面臨的準(zhǔn)確率、查全率低下，查詢速度慢的問題。但目前缺乏公開的外觀設(shè)計(jì)專利方面的數(shù)據(jù)，因?yàn)閷＠麛?shù)據(jù)一般掌握在官方機(jī)構(gòu)，不能被人們輕易獲取。

針對(duì)以上情況，本競賽將提供一個(gè)面向大眾的服裝外觀設(shè)計(jì)專利圖像分類性能評(píng)估基準(zhǔn)。該基準(zhǔn)可以用于對(duì)分類相關(guān)算法進(jìn)行測試評(píng)估，作為一個(gè)公開標(biāo)準(zhǔn)的基準(zhǔn)。同時(shí)，還可以促進(jìn)知識(shí)產(chǎn)權(quán)領(lǐng)域的研究，推動(dòng)人工智能、大數(shù)據(jù)技術(shù)在知識(shí)產(chǎn)權(quán)領(lǐng)域的應(yīng)用。

2.任務(wù)簡介

本次競賽主要任務(wù)是對(duì)外觀設(shè)計(jì)專利圖像進(jìn)行分類，參賽隊(duì)伍根據(jù)外觀設(shè)計(jì)專利圖像特點(diǎn)自行設(shè)計(jì)相關(guān)的算法，利用主辦方所給的服裝外觀設(shè)計(jì)專利圖像數(shù)據(jù)集進(jìn)行模型訓(xùn)練，最終以F1-score分?jǐn)?shù)作為評(píng)價(jià)指標(biāo)衡量參賽隊(duì)伍算法模型性能。

3.數(shù)據(jù)集簡介

數(shù)據(jù)源：30000個(gè)外觀設(shè)計(jì)專利。

數(shù)據(jù)集：每個(gè)專利包含前后2個(gè)視圖，數(shù)據(jù)集共60000張外觀設(shè)計(jì)專利圖像。

圖像大小：提供32*32或224*224像素的JPG格式圖像。

樣本標(biāo)簽：由專家指導(dǎo)進(jìn)行手工標(biāo)記，共10類標(biāo)簽。

訓(xùn)練集為49990張圖片，共10類，其中20張圖片有標(biāo)簽信息，每個(gè)類別均有兩張帶標(biāo)簽信息的圖片。（參賽隊(duì)伍僅可用于算法模型訓(xùn)練）

驗(yàn)證集為10張，包含10個(gè)類別，每個(gè)類別共一張圖片，并攜帶標(biāo)簽信息（參賽隊(duì)伍可用于算法模型參數(shù)調(diào)整）

測試集為10000張，包含10個(gè)類別，每張圖片都攜帶標(biāo)簽信息。（比賽期間不對(duì)外公布，僅供主辦方測試參賽隊(duì)伍的算法模型性能）

4.數(shù)據(jù)集獲取方式：

參賽隊(duì)伍自行注冊(cè)百度網(wǎng)盤ID，每個(gè)隊(duì)伍共用一個(gè)百度網(wǎng)盤賬號(hào)，由此百度網(wǎng)盤ID聯(lián)系工作人員，由工作人員通過百度網(wǎng)盤發(fā)送數(shù)據(jù)集給參賽人員。

注：競賽數(shù)據(jù)集僅供本競賽使用，不得用于商業(yè)產(chǎn)品開發(fā)使用，未經(jīng)許可不得轉(zhuǎn)發(fā)他人使用。

5.競賽評(píng)價(jià)方式

本次競賽的算法評(píng)價(jià)指標(biāo)為macro-F1 score，該指標(biāo)的具體定義如下:

i代表類別i，Pi代表類別i的準(zhǔn)確率，Ri代表類別i的召回率

Nⁱtp代表類別i正類被判斷為正類的個(gè)數(shù),Nⁱfp代表類別i負(fù)類被判斷為正類的個(gè)數(shù)，Nⁱfn代表類別i的正類被判斷為負(fù)類的個(gè)數(shù)。（類別i正類表示類別i，類別i負(fù)類表示除了類別i的其他類別）

F1_i代表類別i的F1分?jǐn)?shù)。

Macro-F1為算法性能的最終評(píng)價(jià)結(jié)果。

6.硬件與系統(tǒng)資源

主辦方所將提供約5臺(tái)GPU工作站負(fù)責(zé)對(duì)參賽團(tuán)隊(duì)提交的算法模型進(jìn)行驗(yàn)證與系統(tǒng)測試。

服務(wù)器配置：

Ø  CPU: Intel(R) Xeon(R) W-2123 CPU @ 3.60GHz

Ø  GPU: NVIDIA GeForce RTX 2080 Ti 11GB

Ø  內(nèi)存:32GB

Ø 操作系統(tǒng): ubuntu

7.結(jié)果提交方式：

◇參賽隊(duì)伍須提供驗(yàn)證集測試結(jié)果以及算法模型代碼。驗(yàn)證集測試結(jié)果的macro-F1分?jǐn)?shù)存儲(chǔ)為txt文件，存儲(chǔ)內(nèi)容格式為:  macro-F1:score（填寫相應(yīng)的結(jié)果）。算法模型代碼用于主辦方在測試集上對(duì)算法模型性能進(jìn)行測試。提交方式同樣是在百度網(wǎng)盤上將相應(yīng)文件發(fā)送給主辦方。

◇每個(gè)隊(duì)伍可提交兩次結(jié)果。（提交第一次之前，建議發(fā)送一份算法代碼文件給主辦方，用于測試是否能在對(duì)應(yīng)環(huán)境下正常運(yùn)行代碼，若不能正常運(yùn)行，則提交內(nèi)容視為無效提交）

◇為了避免參賽隊(duì)伍濫用其他數(shù)據(jù)集或驗(yàn)證集標(biāo)簽信息用于算法訓(xùn)練，參賽隊(duì)伍需提供算法訓(xùn)練時(shí)的相關(guān)參數(shù)，要求該算法結(jié)果可復(fù)現(xiàn)。如果發(fā)現(xiàn)參賽隊(duì)伍使用其他數(shù)據(jù)信息用于訓(xùn)練或算法結(jié)果無法復(fù)現(xiàn)，視為作弊處理，取消參賽資格。

◇每只參賽團(tuán)隊(duì)最多提交2份識(shí)別結(jié)果和2種算法模型。

◇系統(tǒng)只支持python代碼，且運(yùn)行環(huán)境僅為Linux (ubuntu)。

◇請(qǐng)?zhí)峁┛梢哉＿\(yùn)行的模型調(diào)用樣例。

◇僅支持pytorch深度學(xué)習(xí)框架。

◇如果包含自定義Layer，請(qǐng)務(wù)必提供源代碼或封裝好的動(dòng)態(tài)鏈接庫，說明依賴庫等信息。

8.報(bào)名方式

僅接受以團(tuán)隊(duì)形式通過郵件報(bào)名參賽，每個(gè)參賽隊(duì)伍人員不超過5人，每名參賽選手只能參加1個(gè)參賽隊(duì)。參賽團(tuán)隊(duì)簽署競賽協(xié)議書，掃描版發(fā)郵件至競賽聯(lián)系人郵箱leify@gpnu.edu.cn。

• 郵件標(biāo)題格式：“PRCV2021外觀設(shè)計(jì)專利圖像分類挑戰(zhàn)賽 + (參賽隊(duì)名稱)”

• 郵件內(nèi)容包括：團(tuán)隊(duì)基本信息；負(fù)責(zé)人信息；參賽人數(shù)；聯(lián)系方式（手機(jī)及郵箱）；參賽內(nèi)容；競賽協(xié)議書掃描版。

• 報(bào)名截止日期：2021年6月30日23時(shí)59分

• 組織方收到郵件并與報(bào)名者確認(rèn)后，報(bào)名成功。
   

9.比賽賽程 

10.知識(shí)產(chǎn)權(quán)歸屬

參賽團(tuán)隊(duì)提交算法及可執(zhí)行模型的知識(shí)產(chǎn)權(quán)歸參賽團(tuán)隊(duì)所有，圖像數(shù)據(jù)由主辦方所有。

各參賽隊(duì)在賽前需簽訂數(shù)據(jù)使用協(xié)議，承諾本競賽提供的數(shù)據(jù)集僅能用于本競賽，不用于除本競賽外的任何其他用途。

各參賽隊(duì)需要承諾本隊(duì)提交的結(jié)果可重復(fù)，組織方承諾履行保密義務(wù)，并不用于除本比賽外的任何其他用途。

參賽隊(duì)伍應(yīng)保證所提供的方案、算法屬于自有知識(shí)產(chǎn)權(quán)。組織方對(duì)參賽隊(duì)伍因使用本隊(duì)提供完成的算法和結(jié)果而產(chǎn)生的任何實(shí)際侵權(quán)或者被任何第三方指控侵權(quán)概不負(fù)責(zé)。一旦上述情況和事件發(fā)生參賽隊(duì)伍必須承擔(dān)一切相關(guān)法律責(zé)任和經(jīng)濟(jì)賠償責(zé)任并保護(hù)組織方免于承擔(dān)該等責(zé)任。

11.獎(jiǎng)項(xiàng)設(shè)置

項(xiàng)目任務(wù)設(shè)一等獎(jiǎng)1名(獎(jiǎng)金3萬元人民幣)，二等獎(jiǎng)2名(獎(jiǎng)金15000元人民幣)，三等獎(jiǎng)3名(獎(jiǎng)金各10000元人民幣)。（總計(jì)：90000元；獎(jiǎng)金為稅前金額。）

各參賽隊(duì)伍根據(jù)比賽成績均可獲得由計(jì)算機(jī)視覺專委會(huì)、廣東省知識(shí)產(chǎn)權(quán)大數(shù)據(jù)重點(diǎn)實(shí)驗(yàn)室共同頒發(fā)的獲獎(jiǎng)證書和獎(jiǎng)金。

12.挑戰(zhàn)賽論壇

組委會(huì)將舉辦挑戰(zhàn)賽技術(shù)論壇，邀請(qǐng)獲得一、二等獎(jiǎng)的參賽隊(duì)伍參加作特邀技術(shù)報(bào)告。

13.聯(lián)系方式

?賽交流QQ群：828450521

注：如對(duì)競賽內(nèi)容以及規(guī)則有疑問可聯(lián)系郵箱leify@gpnu.edu.cn