-
推理成本最高可降低83%,豆包概念股午后走強(qiáng)
-
周毅是故意的還是不小心?
今日(2月12日)A股市場(chǎng),豆包概念股午后大幅走強(qiáng),創(chuàng)業(yè)板漢得信息拉升封板,廣和通、移遠(yuǎn)通信、潤(rùn)欣科技、博通集成等紛紛大幅沖高。
同花順iFinD
消息面上,2月12日,豆包大模型團(tuán)隊(duì)在其公號(hào)發(fā)布文章《全新超稀疏架構(gòu),推理成本較MoE最高可降83%》。文章稱,近期,字節(jié)跳動(dòng)豆包大模型團(tuán)隊(duì)提出了全新的稀疏模型架構(gòu)UltraMem,該架構(gòu)有效解決了MoE推理時(shí)高額的訪存問題,推理速度較MoE架構(gòu)提升2-6倍,推理成本最高可降低83%。
文章稱,該研究還揭示了新架構(gòu)的Scaling Law,證明其不僅具備優(yōu)異的Scaling特性,更在性能上超越了MoE。實(shí)驗(yàn)結(jié)果表明,訓(xùn)練規(guī)模達(dá)2000萬value的UltraMem模型,在同等計(jì)算資源下,可同時(shí)實(shí)現(xiàn)業(yè)界領(lǐng)先的推理速度和模型性能,為構(gòu)建數(shù)十億規(guī)模value或expert開辟了新路徑。
公眾號(hào)"豆包大模型團(tuán)隊(duì)"
本文系觀察者網(wǎng)獨(dú)家稿件,未經(jīng)授權(quán),不得轉(zhuǎn)載。
- 責(zé)任編輯: 周毅 
-
試過百度DeepSeek等模型后,蘋果AI牽手阿里?
2025-02-12 13:56 人工智能 -
-
-
-
-
哪吒2破90億,光線傳媒20CM漲停
2025-02-12 10:21 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
美團(tuán)跌超5%,京東宣布?xì)⑷胪赓u賽道
2025-02-12 10:18 觀網(wǎng)財(cái)經(jīng)-消費(fèi) -
-
中國平板市場(chǎng)去年出貨增長(zhǎng)超4%,華為超蘋果成第一
2025-02-11 21:37 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
餓了么,重大組織調(diào)整
2025-02-11 19:35 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
ARM CEO談DeepSeek:驚喜,但是……
2025-02-11 18:21 人工智能 -
京東殺入外賣賽道
2025-02-11 17:36 觀網(wǎng)財(cái)經(jīng)-互聯(lián)網(wǎng) -
澳大利亞,中國光伏龍頭又去海外打官司了
2025-02-11 17:36 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
-
“娃哈哈”商標(biāo)將轉(zhuǎn)讓?公司回應(yīng)
2025-02-11 17:14 大公司 -
“OpenAI打響拋棄英偉達(dá)第一槍”
2025-02-11 16:33 觀網(wǎng)財(cái)經(jīng)-科創(chuàng) -
哪吒2票房逼近88億元,卡牌、手辦、圖書等周邊一“吒”難求
2025-02-11 14:50 觀網(wǎng)財(cái)經(jīng)-消費(fèi) -
-
正計(jì)劃前往越南增加建廠?SHEIN否認(rèn)
2025-02-11 13:26 中美關(guān)系 -
《哪吒2》預(yù)測(cè)票房最高已飆升至145億元:海外一票難求
2025-02-11 12:48 觀網(wǎng)財(cái)經(jīng)-消費(fèi)
相關(guān)推薦 -
-
“趁納瓦羅不在,他們沖進(jìn)白宮勸說特朗普暫停關(guān)稅” 評(píng)論 117“中國正投入萬億美元,我們卻在這胡搞” 評(píng)論 128真急了!“白宮擬成立涉華關(guān)稅應(yīng)急工作組” 評(píng)論 295這場(chǎng)貿(mào)易戰(zhàn),美國就是個(gè)“紙老虎” 評(píng)論 114特朗普也直說了:不行,就放棄 評(píng)論 239最新聞 Hot
-
“中國正投入萬億美元,我們卻在這胡搞”
-
真急了!“白宮擬成立涉華關(guān)稅應(yīng)急工作組”
-
黃仁勛訪華盼繼續(xù)合作,特朗普回應(yīng)
-
中國男子在TikTok“神評(píng)”美國關(guān)稅,米爾斯海默秒答:贊同
-
“內(nèi)地電影票房過億那一刻,香港電影就被顛覆了”
-
美國稅局代理局長(zhǎng)剛上任三天就被免,“貝森特抱怨他是馬斯克的人”
-
特朗普也直說了:不行,就放棄
-
“中國深知‘廣場(chǎng)協(xié)議’是致命的,特朗普別想了”
-
“中國稀土,關(guān)乎美國人生死”
-
美軍高官著急:中國速度太快了,是美國3倍
-
德銀:中國客戶減持美債,轉(zhuǎn)頭買歐洲資產(chǎn)
-
美國對(duì)中國再下黑手,“黃仁勛道出最大擔(dān)憂…”
-
跟特朗普談,拿中國當(dāng)籌碼?英財(cái)相:蠢死了
-
加總理揚(yáng)言:除了中美,還有其他人
-
美方將不再斡旋?梅德韋杰夫喊話歐盟:學(xué)著點(diǎn)
-
特朗普“先眨眼”:很多人催我,期待和中國談成
-