近日,在2020中關村大數據日暨數字經濟融合創新發展論壇上,中關村智用人工智能研究院、百度、浪潮聯合發布了面向產業應用的AI開源評測基準AI-Rank。此基準是在中關村管委會、中國科協科學技術傳播中心的指導下,智用研究院、百度、浪潮聯合發起,基準所采用的評價體系可通過多個指標測試綜合評分,能夠客觀、全面、系統地反映人工智能產業的現狀及其發展方向。
區別于已有評測基準只注重單一速度指標,AI-Rank主指標側重對方案面向產業應用水平的考量,通過多維度擬合給出綜合表現,并提供系列子指標以對系統的技術優勢進行全面展示。具體來講,AI-Rank具備三大特色:面向產業應用進行指標設置,設定更廣泛、系統、實用的量化評價體系;增加軟件賽道,不能單純比拼硬件速度,同時測評面向產業真實應用的軟件能力;支持國產化,考察國產化生態,實現硬件、算法、平臺的一體化協同發展。針對軟件賽道,在同樣的硬件設置上,綜合考慮多種典型硬件配置,考察軟件的綜合表現,例如模型覆蓋率、性能表現等。在硬件賽道,則會在給定的軟件環境和AI任務上,針對不同硬件進行多方位指標的測試,以評價不同硬件的性能表現。(美通社,2020年12月16日北京)