熱門:
騰訊,最新發(fā)布!
【導(dǎo)讀】最小僅0.5B,騰訊混元推出4款開源模型
持續(xù)開源。
8月4日,騰訊混元宣布開源四款小尺寸模型,其中最小僅0.5B。據(jù)了解,這四個(gè)模型的亮點(diǎn)在于Agent和長文能力,能夠滿足從端側(cè)到云端、從通用到專業(yè)的多樣化需求,“手機(jī)也能跑”。今年以來,開源成為全球大模型領(lǐng)域的重要主題,中國大模型表現(xiàn)尤為亮眼。
騰訊混元推出多款小尺寸開源模型
騰訊混元此次宣布開源的四款小尺寸模型,參數(shù)分別為0.5B、1.8B、4B、7B,消費(fèi)級(jí)顯卡即可運(yùn)行,適用于筆記本電腦、手機(jī)、智能座艙、智能家居等低功耗場(chǎng)景,且支持垂直領(lǐng)域低成本微調(diào)。

“這四個(gè)模型的亮點(diǎn)在于Agent和長文能力,跟此前開源的Hunyuan-A13B模型一樣,技術(shù)上通過數(shù)據(jù)構(gòu)建和強(qiáng)化學(xué)習(xí)獎(jiǎng)勵(lì)信號(hào)設(shè)計(jì),提升了模型在任務(wù)規(guī)劃、工具調(diào)用和復(fù)雜決策以及反思等Agent能力上的表現(xiàn),讓模型實(shí)際應(yīng)用中可以勝任深度搜索、Excel操作、旅行攻略規(guī)劃等任務(wù)?!币晃恢槿私榻B稱。
值得一提的是,模型原生長上下文窗口達(dá)到了256k,意味著模型可以一次性記住并處理相當(dāng)于40萬中文漢字或50萬英文單詞的超長內(nèi)容,相當(dāng)于一口氣讀完3本《哈利·波特》小說,并且能記住所有人物關(guān)系、劇情細(xì)節(jié),還能根據(jù)這些內(nèi)容討論后續(xù)故事發(fā)展。
據(jù)了解,目前四個(gè)模型均在Github和HuggingFace等開源社區(qū)上線,Arm、高通、Intel、聯(lián)發(fā)科技等多個(gè)消費(fèi)級(jí)終端芯片平臺(tái)也都宣布支持部署。
部署上,四個(gè)模型均只需單卡即可部署,部分PC、手機(jī)、平板等設(shè)備可直接接入。并且,模型具有較強(qiáng)的開放性,主流推理框架和多種量化格式均能夠支持。目前四款小尺寸模型已經(jīng)在騰訊多個(gè)業(yè)務(wù)中應(yīng)用。
例如,依托模型原生的超長上下文能力,騰訊會(huì)議AI小助手、微信讀書AI問書AI助手均實(shí)現(xiàn)對(duì)完整會(huì)議內(nèi)容、整本書籍的一次性理解和處理。
目前,四個(gè)模型均在Github和HuggingFace等開源社區(qū)上線,Arm、高通、Intel、聯(lián)發(fā)科技等多個(gè)消費(fèi)級(jí)終端芯片平臺(tái)也都宣布支持部署。
中國大模型加速開源
最近,全球開源領(lǐng)域異常熱鬧,中國大模型表現(xiàn)搶眼。
就騰訊而言,騰訊混元大語言模型也在持續(xù)推進(jìn)開源,其開源模型已覆蓋文本、圖像、視頻和3D生成等多個(gè)模態(tài)。
騰訊官方表示,開源是騰訊混元大模型長期堅(jiān)持的方向,未來騰訊混元也將不斷提升模型能力,繼續(xù)積極擁抱開源,推出更多尺寸、更多模態(tài)的模型,加速產(chǎn)業(yè)落地和應(yīng)用,與開發(fā)者和合作伙伴共建大模型開源生態(tài)。
對(duì)其他科技巨頭而言,阿里近期接連發(fā)布三款重磅大模型,分別斬獲基礎(chǔ)模型、編程模型和推理模型等主流領(lǐng)域全球開源冠軍。
字節(jié)跳動(dòng)旗下的AI Agent開發(fā)平臺(tái)——扣子(Coze)也于近期正式宣布開源其開發(fā)環(huán)境Coze Studio。扣子是由字節(jié)跳動(dòng)公司推出的一款創(chuàng)新型AI Agent開發(fā)平臺(tái),自推出以來,便以其獨(dú)特的低代碼開發(fā)方式和強(qiáng)大的功能模塊,迅速在AI開發(fā)領(lǐng)域占據(jù)了一席之地。作為字節(jié)跳動(dòng)在AI領(lǐng)域的重要布局,扣子平臺(tái)旨在降低AI應(yīng)用開發(fā)的門檻。
小米公司則正式開源聲音理解大模型MiDashengLM-7B,其聲音理解性能在22個(gè)公開評(píng)測(cè)集上刷新多模態(tài)大模型最好成績(SOTA)。
6月30日,百度正式開源文心大模型4.5系列模型,涵蓋47B、3B激活參數(shù)的混合專家(MoE)模型,與0.3B參數(shù)的稠密型模型等10款模型,并實(shí)現(xiàn)預(yù)訓(xùn)練權(quán)重和推理代碼的完全開源。
中型互聯(lián)網(wǎng)公司也在積極行動(dòng)。6月初,昆侖萬維剛剛發(fā)文,宣布推出并開源全新推理大模型Skywork MindLink。據(jù)介紹,這套全新的推理范式,能夠根據(jù)任務(wù)難度自適應(yīng)整合推理和非推理的生成回復(fù),極大減少了推理成本,增強(qiáng)了推理過程的可讀性和有效性。
AI獨(dú)角獸方面,智譜(Zhipu AI)于上周一晚間正式發(fā)布新一代旗艦大模型GLM-4.5,這是一款專為智能體應(yīng)用打造的基礎(chǔ)模型,在復(fù)雜推理、代碼生成及智能體交互等通用能力上實(shí)現(xiàn)融合與技術(shù)突破。
業(yè)內(nèi)認(rèn)為,開源模型將成為推動(dòng)中國人工智能發(fā)展最強(qiáng)勁的引擎。中國科技公司選擇開源路線,不僅是為了與同類型公司展開競(jìng)爭,更是為了加速AI的采用和創(chuàng)新。這一趨勢(shì)不僅將推動(dòng)中國AI領(lǐng)域的快速發(fā)展,甚至可能縮短技術(shù)差距。
(文章來源:中國基金報(bào))
(原標(biāo)題:騰訊,最新發(fā)布!)
(責(zé)任編輯:10)
將天天基金網(wǎng)設(shè)為上網(wǎng)首頁嗎? 將天天基金網(wǎng)添加到收藏夾嗎?
關(guān)于我們|資質(zhì)證明|研究中心|聯(lián)系我們|安全指引|免責(zé)條款|隱私條款|風(fēng)險(xiǎn)提示函|意見建議|在線客服|誠聘英才
天天基金客服熱線:95021 |客服郵箱:vip@1234567.com.cn|人工服務(wù)時(shí)間:工作日 7:30-21:30 雙休日 9:00-21:30
鄭重聲明:天天基金系證監(jiān)會(huì)批準(zhǔn)的基金銷售機(jī)構(gòu)[000000303]。天天基金網(wǎng)所載文章、數(shù)據(jù)僅供參考,使用前請(qǐng)核實(shí),風(fēng)險(xiǎn)自負(fù)。
中國證監(jiān)會(huì)上海監(jiān)管局網(wǎng)址:www.csrc.gov.cn/pub/shanghai
CopyRight 上海天天基金銷售有限公司 2011-現(xiàn)在 滬ICP證:滬B2-20130026 網(wǎng)站備案號(hào):滬ICP備11042629號(hào)-1
- D
- 德邦基金德邦證券資管大成基金東財(cái)基金達(dá)誠基金東方阿爾法基金東方紅資產(chǎn)管理東方基金東莞證券東?;?/a>東海證券東吳基金東吳證券東興基金東興證券第一創(chuàng)業(yè)東證融匯證券資產(chǎn)管理
- G
- 光大保德信基金國都證券廣發(fā)基金廣發(fā)資產(chǎn)管理國海富蘭克林基金國海證券國金基金國聯(lián)安基金國聯(lián)基金格林基金國聯(lián)民生國聯(lián)證券資產(chǎn)管理國融基金國壽安?;?/a>國泰海通資管國泰基金國投瑞銀基金國投證券國投證券資產(chǎn)管理國新國證基金國信證券國新證券股份國信證券資產(chǎn)管理工銀瑞信基金國元證券