智能制造網(wǎng)APP
智能制造網(wǎng)手機站
智能制造網(wǎng)小程序
智能制造網(wǎng)官微
智能制造網(wǎng)服務號
智能控制
機器人
儀器儀表
物聯(lián)網(wǎng)
3D打印
工業(yè)軟件
回放
品牌
威綸通
8月16日消息，由深度學習技術及應用國家工程研究中心主辦的WAVE SUMMIT深度學習開發(fā)者大會2023在北京舉行。百度首席技術官、深度學習技術及應用國家工程研究中心主任王海峰做了主題演講。王海峰首次對外表示，大語言模型具備了理解、生成、邏輯、記憶等人工智能的核心基礎能力，為通用人工智能帶來曙光。
飛槳開發(fā)者數(shù)已達800萬 模型數(shù)超80萬
WAVE SUMMIT深度學習開發(fā)者大會始于2019年4月。王海峰在首屆大會上提出，深度學習具有很強的通用性，并具備標準化、自動化和模塊化的工業(yè)大生產(chǎn)特征，推動人工智能進入工業(yè)大生產(chǎn)階段。四年來，深度學習技術和應用的發(fā)展充分驗證了這一觀點。深度學習技術的通用性越來越強，深度學習平臺的標準化、自動化和模塊化特征越來越顯著，而預訓練大模型的興起，使得人工智能應用的深度和廣度進一步拓展。人工智能已進入工業(yè)大生產(chǎn)階段。
標準化方面，框架和模型聯(lián)合優(yōu)化，多硬件統(tǒng)一適配，應用模式簡潔高效，大幅降低人工智能應用門檻；自動化方面，從訓練、適配，到推理部署，提升人工智能研發(fā)全流程效率；模塊化方面，豐富的產(chǎn)業(yè)級模型庫，支撐人工智能在廣泛場景的便捷應用。
據(jù)了解，得益于飛槳產(chǎn)業(yè)級深度學習開源開放平臺和文心大模型的互相促進，飛槳生態(tài)愈加繁榮，已凝聚800萬開發(fā)者，服務22萬家企事業(yè)單位，基于飛槳創(chuàng)建了80萬個模型。王海峰闡釋了飛槳開發(fā)者社區(qū)AI Studio中文名“星河社區(qū)”的雋永含義，“文心加飛槳，翩然赴星河”。和所有的開發(fā)者一起，在飛槳和文心的加持下，共建星河社區(qū)，共赴通用人工智能的星辰大海。
大語言模型為通用人工智能帶來曙光
王海峰表示，人工智能具有多種典型能力，理解、生成、邏輯、記憶是其中的核心基礎能力，這四項能力越強，越接近通用人工智能，而大語言模型具備了這四項能力，為通用人工智能帶來曙光。
具體而言，人工智能的典型能力如創(chuàng)作、編程、解題、規(guī)劃等都依賴于理解、生成、邏輯、記憶等核心基礎能力，依賴程度有所不同。以解題為例，從讀懂題目、解答題目到最后寫出答案，需要理解、記憶、邏輯及生成能力的綜合運用。
如何獲得這些能力呢？以文心一言為例，首先從數(shù)萬億數(shù)據(jù)和數(shù)千億知識中融合學習得到預訓練大模型，在此基礎上采用有監(jiān)督精調、人類反饋的強化學習和提示等技術，并具備知識增強、檢索增強和對話增強等技術優(yōu)勢。
進一步地，通過多種策略優(yōu)化數(shù)據(jù)源及數(shù)據(jù)分布、基礎模型長文建模、多類型多階段有監(jiān)督精調、多任務自適應有監(jiān)督精調、多層次多粒度獎勵模型等技術創(chuàng)新，全面提升基礎通用能力。在檢索增強和知識增強的基礎上，通過知識點增強，提升對世界知識的掌握和運用；通過大規(guī)模邏輯數(shù)據(jù)構建、邏輯知識建模、多粒度語義知識組合以及符號神經(jīng)網(wǎng)絡，提升邏輯能力；通過構建數(shù)據(jù)、內容、模型和系統(tǒng)安全的全面安全體系，保障大模型的安全性。
效率方面，通過飛槳端到端自適應混合并行訓練技術以及壓縮、推理、服務部署的協(xié)同優(yōu)化，文心大模型訓練速度達到原來的3倍，推理速度達到原來的30多倍。
應用方面，通過數(shù)據(jù)驅動、提示構建，以及插件增強進行場景適配，協(xié)同優(yōu)化。文心一言已上線百度搜索、覽卷文檔、E 言易圖、說圖解畫、一鏡流影五大插件，使模型具備生成實時準確信息、長文本摘要和問答、數(shù)據(jù)洞察和圖表制作、基于圖片的創(chuàng)作和問答、文生視頻等能力。插件機制擴展了大模型能力邊界，更適應場景需要。王海峰表示，未來百度將與開發(fā)者共建插件生態(tài)，共享技術創(chuàng)新成果。
以大語言模型為代表的人工智能正在深入千行百業(yè)，加速產(chǎn)業(yè)升級和經(jīng)濟增長。在這個進程中，技術創(chuàng)新和應用落地形成良性循環(huán)，理解、生成、邏輯、記憶等能力持續(xù)提升，產(chǎn)業(yè)應用的廣度和深度持續(xù)拓展，大語言模型為通用人工智能帶來曙光。
浙公網(wǎng)安備 33010602000006號
智能制造網(wǎng)APP
智能制造網(wǎng)小程序
微信公眾號
