2024年更新的部分重點大模型產品,其中采用MoE架構的顯著增多 國內眾多廠商更新產品采用 MoE 架構。2024 年 1 月,MiniMax 發布了國內首個基于 MoE 架構的 abab 6,3 月開始更多新發布或者更新的模型公開其采用了MoE架構,至少有包括階躍星辰、通義千問(Qwen1.5-MoE-A2.7B)、面壁智能(MiniCPM-MoE-8x2B、商湯科技(“日日新 SenseNova 5.0”)、DeepSeek-V2 等,而這些模型在能力水平上也接近或者超過 GPT-4,但在參數量和成本上并未達到很高的水平。 其它 下載Excel 下載圖片 原圖定位