3月16日下午,百度發(fā)布新一代大語言模型、生成式AI產(chǎn)品文心一言。百度創(chuàng)始人、董事長兼首席執(zhí)行官李彥宏表示,文心一言的使用場景主要包含文學創(chuàng)作、商業(yè)文案創(chuàng)作、數(shù)理推算、中文理解和多模態(tài)生成。

同時百度還公布了文心一言的邀請測試方案。3月16日起,首批用戶可通過邀請測試碼,在文心一言官網(wǎng)體驗產(chǎn)品,后續(xù)將陸續(xù)開放給更多用戶。

此外,百度智能云即將面向企業(yè)客戶開放文心一言API接口調(diào)用服務(wù)。3月16日起正式開放預約,搜索“百度智能云”進入官網(wǎng),可申請加入文心一言云服務(wù)測試。

李彥宏在現(xiàn)場多次提及,這類大語言模型還遠未到發(fā)展完善的階段,有賴于通過真實的用戶反饋而逐步迭代。

百度方面表示,文心一言大模型的訓練數(shù)據(jù)包括萬億級網(wǎng)頁數(shù)據(jù)、數(shù)十億的搜索數(shù)據(jù)和圖片數(shù)據(jù)、百億級的語音日均調(diào)用數(shù)據(jù),以及5500億事實的知識圖譜等。

據(jù)百度介紹,文心一言的視頻生成能力則因成本較高,現(xiàn)階段還未對所有用戶開放,未來會逐步接入。

“多模態(tài)是生成式AI一個明確的發(fā)展趨勢�！崩顝┖瓯硎�,“未來,隨著百度多模態(tài)統(tǒng)一大模型的能力增強,文心一言的多模態(tài)生成能力也會不斷提升�！�

百度公司首席技術(shù)官（CTO）王海峰表示,“文心一言”是新一代知識增強大語言模型,是在ERNIE及PLATO系列模型的基礎(chǔ)上研發(fā)的；它的關(guān)鍵技術(shù)包括有監(jiān)督精調(diào)、人類反饋的強化學習、提示、知識增強、檢索增強和對話增強。

王海峰稱,前三項是這類大語言模型都會采用的技術(shù),ERNIE和PLATO中也已經(jīng)有應(yīng)用和積累,在文心一言中又有了進一步強化和打磨；后三項則是百度已有技術(shù)優(yōu)勢的再創(chuàng)新,也是文心一言未來越來越強大的基礎(chǔ)。

李彥宏表示,目前百度是全球大廠中第一個做出對標ChatGPT產(chǎn)品的企業(yè),“無論是哪家公司,都不可能靠突擊幾個月就能做出這樣的大語言模型。深度學習、自然語言處理,需要多年的堅持和積累,沒法速成�！�

他認為,百度是全球為數(shù)不多在“芯片-框架-模型-應(yīng)用”四層進行全棧布局的人工智能公司；而百度AI全棧布局的優(yōu)勢在于,可以在技術(shù)棧的四層架構(gòu)中實現(xiàn)端到端優(yōu)化,大幅提升效率。尤其是框架層和模型層之間,有很強的協(xié)同作用,可以幫助構(gòu)建更高效的模型,并降低成本。

超大規(guī)模模型的訓練和推理,給深度學習框架帶來了很大考驗。為了支持千億參數(shù)模型的高效分布式訓練,百度飛槳專門研發(fā)了4D混合并行技術(shù)。

百度官方信息顯示,自2月份百度官宣“文心一言”以來,已有超過650家企業(yè)宣布接入文心一言生態(tài)。

李彥宏預測,大語言模型將帶來三大產(chǎn)業(yè)機會。

第一類是新型云計算公司,其主流商業(yè)模式從IaaS變?yōu)镸aaS。之前企業(yè)選擇云廠商更多看算力、存儲等基礎(chǔ)云服務(wù)。未來,更多會看框架好不好、模型好不好,以及模型、框架、芯片、應(yīng)用這四層之間的協(xié)同。

第二類是進行行業(yè)模型精調(diào)的公司。這是通用大模型和企業(yè)之間的中間層,他們可以基于對行業(yè)的洞察,調(diào)用通用大模型能力,為行業(yè)客戶提供解決方案。目前百度文心大模型已經(jīng)在電力、金融、媒體等領(lǐng)域,發(fā)布了10多個行業(yè)大模型。

第三類是基于大模型底座進行應(yīng)用開發(fā)的公司,即應(yīng)用服務(wù)提供商。李彥宏斷言,對于大部分創(chuàng)業(yè)者和企業(yè)來說,真正的機會并不是從頭開始做ChatGPT和文心一言這樣的基礎(chǔ)大模型,這很不現(xiàn)實,也不經(jīng)濟。

基于通用大語言模型搶先開發(fā)重要的應(yīng)用服務(wù),這可能才是真正的機會�；�于文本生成、圖像生成、音頻生成、視頻生成、數(shù)字人、3D等場景,可能會出現(xiàn)更多新機會。

“我們相信,人工智能會徹底改變我們今天的每一個行業(yè)。AI的長期價值,對各行各業(yè)的顛覆性改變,才剛剛開始。未來,將會有更多的殺手級應(yīng)用、現(xiàn)象級產(chǎn)品出現(xiàn),將會有更多的里程碑事件發(fā)生�！崩顝┖瓯硎�。