阿里巴巴周一發(fā)布了通義千問3.0(Qwen3)系列模型并開源,。該系列在數(shù)學(xué)和編程等多個方面性能與DeepSeek相當(dāng),,且部署成本顯著降低,。Qwen3支持119種語言,便于Agent調(diào)用,,并集成了兩種思考模式,。
Qwen3系列包括兩個專家混合(MoE)模型和其他六個模型。旗艦?zāi)P蚎wen3-235B-A22B在代碼,、數(shù)學(xué),、通用能力等基準(zhǔn)測試中表現(xiàn)出色,與頂級模型相比具有競爭力,。小型MoE模型Qwen3-30B-A3B的激活參數(shù)數(shù)量僅為QwQ-32B的10%,,但表現(xiàn)更優(yōu)。這些系統(tǒng)通過將任務(wù)劃分為更小的數(shù)據(jù)集來提升整體效率,。
阿里巴巴還開源了Qwen3-235B-A22B和Qwen3-30B-A3B的權(quán)重,,以及六個Dense模型,均在Apache 2.0許可下開源,。Qwen3系列是“混合型”模型,,既能在復(fù)雜問題上進(jìn)行推理,也能快速回答簡單請求,。這種靈活性讓用戶能夠根據(jù)具體任務(wù)控制模型的“思考”程度,,從而實現(xiàn)高效的任務(wù)處理。
Qwen3系列基于近36萬億個token進(jìn)行訓(xùn)練,數(shù)據(jù)量是Qwen2.5的兩倍,。預(yù)訓(xùn)練過程分為三個階段,,逐步增加知識密集型數(shù)據(jù)的比例,并擴(kuò)展上下文長度,。Qwen3 Dense基礎(chǔ)模型的整體性能與更大規(guī)模的Qwen2.5基礎(chǔ)模型相當(dāng),,特別是在STEM、編碼和推理等領(lǐng)域表現(xiàn)優(yōu)異,。后訓(xùn)練階段,,阿里使用多樣化的長思維鏈數(shù)據(jù)對模型進(jìn)行了微調(diào),增強(qiáng)了其探索和鉆研能力,。
阿里通義千問開源負(fù)責(zé)人林俊旸在X上發(fā)文暗示,Qwen3模型有望于4月28日發(fā)布
2025-04-29 21:25:44阿里通義千問模型Qwen3有哪些亮點本報特約記者 劉皓然變法切到了“大動脈”,?連日來,新西蘭議會欲對1840年《威坦哲條約》(又名《懷唐伊條約》)重新修訂一事引發(fā)巨大爭議
2024-11-20 10:51:28民族政策大改