浪潮信息重磅發(fā)布“源2.0-M32”開源大模型
浪潮信息近日發(fā)布了一款全新的開源大模型——“源2.0-M32”。這款大模型在“源2.0”系列大模型的基礎(chǔ)上，進(jìn)行了深度的技術(shù)創(chuàng)新與升級。
其核心技術(shù)亮點(diǎn)在于“基于注意力機(jī)制的門控網(wǎng)絡(luò)”技術(shù)的引入。通過這一技術(shù)，浪潮信息成功構(gòu)建了一個包含32個專家的混合專家模型（MoE），該模型不僅結(jié)構(gòu)先進(jìn)，而且算力效率極高。在運(yùn)行時，模型的激活參數(shù)僅為37億，這一數(shù)字在業(yè)界中堪稱領(lǐng)先。
更為值得一提的是，“源2.0-M32”在性能上全面對標(biāo)了擁有700億參數(shù)的LLaMA3開源大模型。在業(yè)界主流基準(zhǔn)評測中，它展現(xiàn)出了卓越的性能，為用戶提供了更為高效、精準(zhǔn)的服務(wù)。
此次“源2.0-M32”的發(fā)布，無疑將進(jìn)一步推動人工智能領(lǐng)域的發(fā)展，同時也彰顯了浪潮信息在技術(shù)創(chuàng)新方面的領(lǐng)先地位。
聲明：本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人，不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用，如有內(nèi)容侵權(quán)或者其他違規(guī)問題，請聯(lián)系本站處理。
舉報(bào)投訴
-
浪潮
+關(guān)注
關(guān)注
1文章
474瀏覽量
24491 -
開源
+關(guān)注
關(guān)注
3文章
3587瀏覽量
43472 -
大模型
+關(guān)注
關(guān)注
2文章
3025瀏覽量
3824
發(fā)布評論請先 登錄
相關(guān)推薦
熱點(diǎn)推薦
浪潮信息與智源研究院攜手共建大模型多元算力生態(tài)
近日，浪潮信息與北京智源人工智能研究院正式簽署戰(zhàn)略合作協(xié)議，雙方將緊密合作，共同構(gòu)建大模型多元算力開源創(chuàng)新生態(tài)。 此次合作旨在提升大模型創(chuàng)新
浪潮信息與智源研究院達(dá)成戰(zhàn)略合作協(xié)議
近日，浪潮信息與智源研究院達(dá)成戰(zhàn)略合作協(xié)議，雙方將緊密協(xié)作共建大模型多元算力開源創(chuàng)新生態(tài)，提升大模型創(chuàng)新研發(fā)的算力效率，降低大
浪潮信息發(fā)布"源"Yuan-EB，刷新RAG檢索最高成績
近日，浪潮信息在AI領(lǐng)域取得了重大突破，成功發(fā)布了其嵌入模型"源"Yuan-EB(Yuan-embedding-1.0)。在備受矚目的C-MTEB榜單中，"
借助浪潮信息元腦企智EPAI高效創(chuàng)建大模型RAG
生成能力，提高生成質(zhì)量和可靠性。但企業(yè)構(gòu)建知識檢索系統(tǒng)并非易事，通常面臨開發(fā)門檻高、生成內(nèi)容差等難題。而借助浪潮信息元腦企智EPAI企業(yè)大模型開發(fā)平臺，企業(yè)僅需三步即可高效創(chuàng)建大模型RAG，讓企業(yè)內(nèi)部積累的大量數(shù)據(jù)得到有效利用，
浪潮信息發(fā)布“源”Yuan-EB助力RAG檢索精度新高
近日，浪潮信息發(fā)布 “源”Yuan-EB（Yuan-embedding-1.0，嵌入模型），在C-MTEB榜單中斬獲檢索任務(wù)第一名，以78.41的平均精度刷新大
浪潮信息發(fā)布KOS AI定制版，大幅提升大模型訓(xùn)練效率
浪潮信息近期推出了“元腦服務(wù)器操作系統(tǒng)KOS AI定制版”，為人工智能領(lǐng)域帶來了革命性的變化。這款定制版操作系統(tǒng)通過簡單的兩步操作，即可實(shí)現(xiàn)大模型訓(xùn)練環(huán)境的快速部署。
浪潮信息AI存儲性能測試的領(lǐng)先之道
MLCommons，一個致力于推動全球 AI系統(tǒng)發(fā)展的頂級工程聯(lián)盟，匯聚了包括谷歌、斯坦福大學(xué)在內(nèi)的眾多頂尖企業(yè)和研究機(jī)構(gòu)。作為該聯(lián)盟的創(chuàng)始成員之一，浪潮信息自2020年起便積極參與其中，共同探索
浪潮信息源2.0大模型與百度PaddleNLP全面適配
近日，浪潮信息宣布其開源大模型源2.0已全面適配百度PaddleNLP。這一舉措標(biāo)志著大模型開發(fā)
浪潮信息發(fā)布元腦企智一體機(jī)
在2024中國算力大會上，浪潮信息正式發(fā)布了其創(chuàng)新的元腦企智一體機(jī)。這款一體機(jī)融合了元腦企智EPAI企業(yè)大模型開放平臺和元腦服務(wù)器，通過軟硬件協(xié)同的一體化設(shè)計(jì)，實(shí)現(xiàn)了快速交付、開箱即用、極致性能和安全高效的大
浪潮信息：元腦企智EPAI助力金融大模型快速落地
近日，2024金融科技應(yīng)用創(chuàng)新發(fā)展大會暨農(nóng)村金融機(jī)構(gòu)信息化發(fā)展創(chuàng)新座談會在上海舉辦。浪潮信息推出元腦企智EPAI企業(yè)大模型開發(fā)平臺，面向金融業(yè)務(wù)場景，實(shí)現(xiàn)7天完成POC驗(yàn)證、2個月上線AI應(yīng)用，通過
源2.0-M32大模型發(fā)布量化版 運(yùn)行顯存僅需23GB 性能可媲美LLaMA3
北京2024年8月23日?/美通社/ -- 近日，浪潮信息發(fā)布源2.0-M32大模型4bit和8bit量化版，性能比肩700億參數(shù)的LLaM
浪潮信息發(fā)布AIStation V5，全面支持大模型開發(fā)流程與高效算力調(diào)度
北京2024年7月11日?/美通社/ -- 7月9日，在"元腦中國行"全國巡展?jié)险旧希?b class='flag-5'>浪潮信息發(fā)布AIStation 人工智能開發(fā)平臺V5升級版，具備全面的大模型流程支持能力，幫助企業(yè)用戶降低構(gòu)建
浪潮信息推出AIGC存儲解決方案
近日，在科技創(chuàng)新的浪潮中，浪潮信息成功舉辦了“元腦中國行”全國巡展的杭州站活動，此次盛會不僅匯聚了業(yè)界的精英與目光，更見證了浪潮信息在AIGC（人工智能生成內(nèi)容）領(lǐng)域的一次重大突破。會上，浪潮
浪潮信息推出基于新一代分布式存儲平臺AS13000G7的AIGC存儲解決方案
6月28日，浪潮信息“元腦中國行”全國巡展杭州站順利舉行。會上，浪潮信息重磅推出基于新一代分布式存儲平臺AS13000G7的AIGC存儲解決方案。通過加持EPAI/AIStation的資源調(diào)度能力
畢昇大模型應(yīng)用開發(fā)平臺+浪潮信息AIStation，讓大模型定制更簡單
北京2024年6月5日?/美通社/ -- 近日，畢昇大模型應(yīng)用開發(fā)平臺與浪潮信息AIStation智能業(yè)務(wù)生產(chǎn)創(chuàng)新平臺完成兼容性互認(rèn)證。基于畢昇和浪潮信息AIStation，用戶通過預(yù)置的畢昇助手
工商網(wǎng)監(jiān)
評論