華為6月30日正式宣布開(kāi)源盤(pán)古70億參數(shù)的稠密模型、盤(pán)古Pro MoE 720億參數(shù)的混合專(zhuān)家模型和基于昇騰的模型推理技術(shù)。這是華為首次開(kāi)源大模型。

目前，盤(pán)古Pro MoE 72B模型權(quán)重、基礎(chǔ)推理代碼，已正式上線開(kāi)源平臺(tái)。基于昇騰的超大規(guī)模MoE模型推理代碼，也已正式上線開(kāi)源平臺(tái)。盤(pán)古7B相關(guān)模型權(quán)重與推理代碼將于近期上線開(kāi)源平臺(tái)。華為邀全球開(kāi)發(fā)者、企業(yè)伙伴及研究人員下載使用。

華為表示，此舉是華為踐行昇騰生態(tài)戰(zhàn)略的又一關(guān)鍵舉措，推動(dòng)大模型技術(shù)的研究與創(chuàng)新發(fā)展，加速推進(jìn)人工智能在千行百業(yè)的應(yīng)用與價(jià)值創(chuàng)造。

達(dá)睿咨詢(xún)創(chuàng)始人馬繼華介紹，盤(pán)古70億參數(shù)的稠密模型是全參數(shù)稠密結(jié)構(gòu)，適合通用場(chǎng)景微調(diào)，能夠靈活部署在邊緣設(shè)備上。盤(pán)古Pro MoE 72B模型，采用混合專(zhuān)家架構(gòu)，在保持推理效率的同時(shí)實(shí)現(xiàn)接近千億級(jí)稠密模型的性能，比較適合高復(fù)雜度任務(wù)。華為差異化模型參數(shù)規(guī)模梯度覆蓋制造業(yè)、金融等不同場(chǎng)景需求，開(kāi)源目的是推動(dòng)大模型的行業(yè)應(yīng)用落地。

馬繼華認(rèn)為，目前來(lái)看，人工智能領(lǐng)域的技術(shù)開(kāi)放與生態(tài)共建非常重要，通過(guò)開(kāi)源能夠迅速形成產(chǎn)業(yè)優(yōu)勢(shì)，從而達(dá)成領(lǐng)跑，讓人工智能飛輪效應(yīng)得以發(fā)揮。

關(guān)鍵詞：