在线免费av网址|国产第一浮力久久|日本有码中文字幕|国产观看视频免费|亚洲熟女一二三区|久草视频免费网站|丰满熟女在线综合|久久久久久久久肛|草草影院浮力视频|亚洲色图激情国产

中文通用大模型基準測試SuperCLUE發(fā)布,訊飛星火認知大模型國內(nèi)第一

5月9日,中文通用大模型綜合性評測基準SuperCLUE正式發(fā)布。該基準測試主要關(guān)注以下問題:中文大模型在不同任務(wù)上的表現(xiàn)如何?與國際代表性模型相比,中文大模型的表現(xiàn)達到了何種程度?中文大模型與人類表現(xiàn)相比如何?

該模型可通過多個層面,考研市面上主流的中文GPT大模型的能力:

基礎(chǔ)能力:包括了常見的有代表性的模型能力,如語義理解、對話、邏輯推理、角色模擬、代碼、生成與創(chuàng)作等10項能力。

專業(yè)能力:包括了中學、大學與專業(yè)考試,涵蓋了從數(shù)學、物理、地理到社會科學等50多項能力。

中文特性能力:針對有中文特點的任務(wù),包括了中文成語、詩歌、文學、字形等10項多種能力。

該機構(gòu)利用SuperCLUE測試基準,對市面上主流的支持中文的通用大模型進行了評測與排名。從排名中我們可以看出,GPT-4一騎絕塵,已經(jīng)非常接近人類的能力。國產(chǎn)大模型中科大訊飛研發(fā)的星火認知大模型總排名第三,國內(nèi)排名第一。

以下為該機構(gòu)公布的各個子項目的具體得分。排行榜會定期更新,并于以下網(wǎng)站進行公示。www.CLUEbenchmarks.com/superclue.html

總榜單

基礎(chǔ)能力榜單

中文特性榜單

最新文章
Copyright ? DoNews 2000-2025 All Rights Reserved
蜀ICP備2024059877號-1