RM新时代有限公司

近日，云從科技從容大模型在綜合評測權威平臺OpenCompass的多模態(tài)評測領(lǐng)域中取得重大進(jìn)展。

最新評測結果顯示，云從科技的從容大模型在該體系中的平均得分為65.5，這一成績(jì)使得從容大模型躋身全球前三，超越了谷歌的Gemini-1.5-Pro和GPT-4v，僅次于GPT-4o（69.9）和Claude3.5-Sonnet（67.9）。而在國內市場(chǎng)，從容大模型的成績(jì)也超過(guò)了InternVL-Chat（61.7）和GLM-4V（60.8），排名首位。

圖1：OpenCompass多模態(tài)榜單

OpenCompass大模型開(kāi)放評測體系是上海人工智能實(shí)驗室推出的完整開(kāi)源可復現的評測框架。OpenCompass多模態(tài)評測方面采用了8個(gè)具有代表性的數據集，從多種視角客觀(guān)量化多模態(tài)大模型的能力，評估維度覆蓋目標檢測、文字識別、動(dòng)作識別、圖像理解和關(guān)系推理、藝術(shù)與設計、商業(yè)、科學(xué)、健康與醫學(xué)、人文與社會(huì )科學(xué)、技術(shù)與工程、數學(xué)推理等多個(gè)方面。

 圖2：從容大模型-2.0多模態(tài)能力示例

在本次測評中，從容大模型在其中的6個(gè)數據集表現優(yōu)異，排名國內第一（MMbench、MMStar、MathVista、HallusionBench、AI2D、OCRBench），尤其是在OCRBench測試集上以取得全球最高的827分（總分為1000分），且高于第二名GLM-4v 13分，進(jìn)一步提升從容大模型在文本識別、以文本為中心的視覺(jué)問(wèn)答、面向文檔的視覺(jué)問(wèn)答、關(guān)鍵信息提取等業(yè)務(wù)場(chǎng)景下的適用性。

圖3：OpenCompass中國大模型多模態(tài)能力展示

從容大模型在此體系中的優(yōu)秀表現，依賴(lài)云從科技自研的高效多模態(tài)處理架構和先進(jìn)的計算技術(shù)，實(shí)現了高效的多模態(tài)數據處理能力，能夠在視覺(jué)和語(yǔ)言任務(wù)之間實(shí)現高效的融合和切換，并最大化利用計算資源，保證在處理大規模多模態(tài)數據時(shí)仍能保持較高的性能和響應速度，使得模型的訓練過(guò)程更加高效，收斂速度更快，性能更穩定。

同時(shí)也得益于云從科技長(cháng)期在視覺(jué)、語(yǔ)言領(lǐng)域的深厚積累和不斷創(chuàng )新。

 圖4：從容大模型-2.0多模態(tài)能力示例

此前，從容大模型已在視覺(jué)、跨模態(tài)領(lǐng)域10次刷新世界紀錄，綜合性能經(jīng)第三方SuperClue、C-Eval等綜合評測，位列全球前五。

作為一家專(zhuān)注于人機協(xié)同技術(shù)研發(fā)的平臺企業(yè)，云從科技一直在積極推動(dòng)AI智能體及大模型技術(shù)的發(fā)展和應用。

隨著(zhù)人工智能技術(shù)的迅猛發(fā)展，多模態(tài)大模型已成為驅動(dòng)產(chǎn)業(yè)變革的核心引擎。此次從容大模型在OpenCompass大模型開(kāi)放評測體系中的出色表現，不僅是對云從科技技術(shù)創(chuàng )新實(shí)力的認可，更在業(yè)界樹(shù)立典范，激勵全球科技企業(yè)在新一輪的人工智能競爭中勇攀高峰。