天,豆包大模型1.5 Pro版本正式發(fā)布。
目前,該大模型已在豆包APP灰度上線,開發(fā)者也可在火山引擎直接調(diào)用API。
字節(jié)跳動表示,豆包大模型1.5 Pro增強(qiáng)了綜合能力,在知識、代碼、推理、中文等多個測評基準(zhǔn)上,綜合得分比GPT-4o更高。
全新的豆包實(shí)時語音模型Doubao-1.5-realtime-voice-pro,采用Speech2Speech端到端框架,表現(xiàn)力實(shí)現(xiàn)質(zhì)的飛躍,真正做到會哭會笑、能說方言會唱歌。該模型已在豆包App全量上線。
豆包大模型1.5Pro使用較小的激活參數(shù)進(jìn)行預(yù)訓(xùn)練,訓(xùn)練成本極低,但性能不打折,采用大規(guī)模稀疏MoE架構(gòu),等效7倍激活參數(shù)的Dense模型性能,遠(yuǎn)超業(yè)內(nèi)MoE架構(gòu)約3倍杠桿的常規(guī)效率。
官方強(qiáng)調(diào),模型訓(xùn)練過程中,未使用任何其他模型生成的數(shù)據(jù),扎實(shí)不走“捷徑”。