智源研究院揭曉大模型測評結果，豆包與百川智能大模型表現(xiàn)優(yōu)異
5月18日，北京智源研究院發(fā)布了關于國內(nèi)外各類開/閉源語言及多模態(tài)大模型性能評估的最新研究成果。此項研究覆蓋了140余個語言模型的綜合實力對比，包括其對中文文本理解和多模態(tài)圖文問答等任務的處理能力。
研究發(fā)現(xiàn)，盡管國內(nèi)頭部語言模型在中文環(huán)境中的整體表現(xiàn)已接近國際一流水平，但仍存在能力發(fā)展不平衡的問題。
在多模態(tài)理解圖文問答任務中，開源和閉源模型表現(xiàn)相當，而國產(chǎn)模型則表現(xiàn)出色。此外，在中文語境下的文生圖能力方面，國產(chǎn)多模態(tài)模型與國際一流水平的差距相對較小。
具體到語言模型的排名，在中文語境下，字節(jié)跳動的豆包Skylark2以及OpenAI的GPT-4分別名列第一和第二。值得注意的是，國產(chǎn)大模型在理解中國用戶需求方面具有明顯優(yōu)勢。
在語言模型客觀評價中，OpenAI的GPT-4和百川智能的Baichuan3分列第一和第二。同時，百度的文心一言4.0、智譜華章的GLM-4以及月之暗面的Kimi也躋身語言模型主客觀評價的前五名。
在多模態(tài)理解模型的客觀評價中，圖文問答方面，阿里巴巴的通義Qwen-vl-max和上海人工智能實驗室的InternVL-Chat-V1.5在某些指標上超越了OpenAI的GPT-4，LLaVA-Next-Yi-34B和上海人工智能實驗室的Intern-XComposer2-VL-7B緊隨其后。
聲明：本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人，不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用，如有內(nèi)容侵權或者其他違規(guī)問題，請聯(lián)系本站處理。
舉報投訴
-
開源
+關注
關注
3文章
3407瀏覽量
42713 -
模型
+關注
關注
1文章
3313瀏覽量
49226 -
大模型
+關注
關注
2文章
2549瀏覽量
3169 -
百川智能
+關注
關注
0文章
17瀏覽量
28
發(fā)布評論請先 登錄
相關推薦
百川智能發(fā)布全場景深度思考模型Baichuan-M1-preview
近日，百川智能正式發(fā)布了國內(nèi)首個全場景深度思考模型——Baichuan-M1-preview。這一創(chuàng)新成果標志著我國在人工智能領域取得了重要突破，特別是在語言、視覺和搜索三大領域的推理
百川智能發(fā)布全場景深度思考模型Baichuan-M1-preview
中表現(xiàn)出色，可對標o1-preview。 尤為值得一提的是，該模型解鎖了醫(yī)療循證模式。百川智能自建了涵蓋億級條目的循證醫(yī)學知識庫，能以天為單位進行動態(tài)更新。面對復雜醫(yī)學問題，Baich
字節(jié)跳動豆包大模型1.5 Pro發(fā)布
近日，字節(jié)跳動旗下的豆包大模型迎來了全新的升級——豆包大模型1.5 Pro正式發(fā)布。這款全新模型在知識、代碼、推理、中文等多個
字節(jié)跳動發(fā)布豆包大模型1.5 Pro
字節(jié)跳動正式發(fā)布了豆包大模型1.5 Pro。 全新的Doubao -1.5 - pro模型綜合能力顯著增強，在知識、代碼、推理、中文等多個測評基準上，綜合得分優(yōu)于GPT - 4o、Cl
浪潮信息與智源研究院攜手共建大模型多元算力生態(tài)
近日，浪潮信息與北京智源人工智能研究院正式簽署戰(zhàn)略合作協(xié)議，雙方將緊密合作，共同構建大模型多元算力開源創(chuàng)新生態(tài)。 此次合作旨在提升大模型創(chuàng)新
百川智能發(fā)布Baichuan4-Finance金融大模型
近日，百川智能正式推出了其全鏈路領域增強的金融大模型——Baichuan4-Finance。這一創(chuàng)新產(chǎn)品的發(fā)布，標志著百川智能在金融
百川智能發(fā)布一站式大模型商業(yè)化解決方案
近日，百川智能正式推出了一站式大模型商業(yè)化解決方案，旨在為企業(yè)提供更加全面、高效的大模型應用服務。該解決方案以1+3產(chǎn)品矩陣為核心，包括全鏈路優(yōu)質(zhì)通用訓練數(shù)據(jù)、Baichuan4-Tu
【附實操視頻】聆思CSK6大模型開發(fā)板接入國內(nèi)主流大模型（星火大模型、文心一言、豆包、kimi、智譜glm、通義千問）
輸出的結果進行語音合成實現(xiàn)端側(cè)播報。
目前已經(jīng)接通文心一言、豆包、kimi、智譜glm、通義千問等國內(nèi)主流大模型，詳細模板和操作步驟可以參考附件文檔。
發(fā)表于 08-22 10:12
智能硬件接入主流大模型做語音交互（附文心一言、豆包、kimi、智譜glm、通義千問示例）
本帖最后由 jf_40317719 于 2024-8-21 19:17 編輯
多模態(tài)交互離不開硬件載體，近期有不少開發(fā)者在研究聆思CSK6大模型開發(fā)板除了使用出廠示例自帶的星火大模型，能不能
發(fā)表于 08-21 19:13
摩爾線程攜手智源研究院完成基于Triton的大模型算子庫適配
近日，摩爾線程與北京智源人工智能研究院（簡稱：智源研究院）已順利完成基于Triton語言的高性能算子庫FlagGems的適配工作。得益于摩爾
大模型廠商“輸血”不斷，百川智能完成50億元A輪融資！
有重磅消息曝出：知名大模型公司百川智能已經(jīng)成功收獲了價值50億元的A輪融資。由此，我們不禁感嘆，大模型廠商們的“輸血”和“續(xù)命”之戰(zhàn)，還在激烈的上演著。
百川智能完成50億元A輪融資
近日，國內(nèi)領先的醫(yī)療AI大模型企業(yè)——百川智能，正式宣布完成了高達50億元人民幣的A輪融資，這一里程碑式的融資不僅彰顯了市場對其技術實力與未來發(fā)展?jié)摿Φ母叨日J可，也為公司的后續(xù)發(fā)展奠定了堅實的資金基礎。
亞馬遜云科技接入百川智能和零一萬物基礎模型
近日，亞馬遜云科技在中國峰會上宣布，兩大中文基礎模型——百川智能的Baichuan2-7B和零一萬物的Yi-1.5 6B/9B/34B，即將或已正式登陸中國區(qū)域的SageMaker JumpStart。這一舉措為中國企業(yè)提供了豐
百川智能發(fā)布Baichuan 4大模型及首款AI助手“百小應”
百川智能近日發(fā)布了其新一代基座大模型Baichuan 4，并同步推出了首款AI助手“百小應”。這款AI助手是在Baichuan 4強大能力的基礎上，結合先進的搜索技術精心打造而成。
數(shù)勢聯(lián)動百川，發(fā)布首批大模型聯(lián)合解決方案，推動中國大模型價值落地
近日，行業(yè)領先的數(shù)據(jù)智能產(chǎn)品提供商北京數(shù)勢云創(chuàng)科技有限公司（以下簡稱“數(shù)勢科技”）和國內(nèi)通用大模型廠商北京百川智能科技有限公司（以下簡稱“百川
工商網(wǎng)監(jiān)
評論