因在測試中作弊 百度人工智能被禁賽
今年5月,大規(guī)模視覺識別挑戰(zhàn)賽(ILSVRC)組織方宣布,參賽的一支隊伍使用至少30個帳號向測試服務器進行了至少200次提交,遠超每周只能提交兩次的限制。不過,組織此次挑戰(zhàn)賽的人員并沒有宣布是哪支隊伍違反了這一規(guī)定。
如今,隨著ILSVRC團隊宣布這支隊伍就是中國公司百度(納斯達克股票代碼:BIDU)之后,所有的情況也隨之發(fā)生了改變。ILSVRC已經宣布,百度公司已經被禁止參與這樣的競賽。
據ILSVRC管理方稱,在2014年11月28日至2015年5月13日期間,百度的參賽團隊使用了至少30個帳號向測試服務器進行了至少200次提交,這大大超過了比賽規(guī)定的每周提交兩次的上限。
百度團隊被發(fā)現(xiàn)在今年3月15日至3月19日這短短的5天時間內完成了40多次提交。此次挑戰(zhàn)賽的組織方聲稱,由于百度團隊違反了規(guī)定,因此百度的結果或將無法與其它參賽團隊獲得的結果進行直接比較。
通過以比許可限制更加頻繁的次數向測試服務器提交,從而讓百度團隊能夠基于測試結果的優(yōu)勢來選擇類似的方案,進而分化出最優(yōu)方案,或者是基于測試數據,而不是依賴訓練和數據驗證來選擇研發(fā)方式。
百度團隊已被禁止在未來12個月內向評估服務器或挑戰(zhàn)賽主辦方提交任何內容。