(CWW)4月17日上午消息,隨著數據井噴、算法進步以及算力的突破,效果好、泛化能力強、通用性強的預訓練大模型(簡稱“大模型”),已成為人工智能發展的新方向。近日,在2021百度認知AI創意賽“AI創意派”決賽現場,百度首次將文心大模型能力向公眾開放,讓每一位對AI感興趣的人,都能夠自上手使用大模型進行創意設計開發。
決賽現場,百度集團副總裁吳甜出席并圍繞大模型行業趨勢、產業價值、落地成果,分享了百度文心大模型的進展。在與新浪科技等媒體溝通中,吳甜指出,數據、算法、算力的發展,為人工智能技術帶來了新的機遇,預訓練大模型正驅動著人工智能的規模化應用,今年是文心大模型應用落地關鍵年。
大模型正驅動AI規模化應用
近年來,國內外科技巨頭如谷歌、微軟、英偉達、百度等,紛紛在AI大模型領域展開相應探索。頻頻獲得國內外科技巨頭關注的背后,大模型真正的魅力在于——人工智能作為新一輪科技革命和產業變革的重要驅動力量,它需要在各行各業深度地綁定融合,才能真正成為驅動產業轉型升級的關鍵力量。
然而,受制于不同行業規則迥異,以及支撐特定場景AI模型訓練的數據獲取難、算力及人力成本高等因素,目前大多數的人工智能技術,往往只能被少數企業開發并用于解決特定領域問題,難以進行場景遷移和規模化復制,通用性和普適效果差。
大模型的出現,大幅降低了人工智能的應用門檻。其通過集中提供通用算法模型,打造技術底座,讓大多數企業能夠“站在巨人的肩膀上”,使標注數據更少、開發效率更高、應用成本更低。
據吳甜介紹,目前百度文心大模型已成為產業級知識增強大模型,包含NLP(自然語言理解)大模型、CV(計算機視覺)大模型、跨模態大模型,既有基礎通用的大模型,也包含面向重點領域、重點任務的大模型,以及豐富的工具與平臺。其中,多個大模型達全球領先水平,例如全球首個百億參數中英文對話大模型PLATO-XL、首個聚焦中英文場景大規模 OCR 結構化預訓練模型 VIMER – StrucText等。
與此同時,為進一步降低AI應用難度,文心大模型還通過與百度飛槳等開源框架結合,為開發者提供了成套的工具平臺,配套易上手的大模型開發、輕量化、部署工具,讓各行各業的開發者都能低門檻地實現AI的應用。
“百度大模型與國產深度學習框架融合發展,打造了自主創新的AI底座,真正發揮大模型驅動AI規模化應用的產業價值。”吳甜表示。
今年是大模型產業落地關鍵年
據吳甜介紹,百度文心大模型的誕生可追溯到2019年3月,當時百度發布的中國首個正式開放的預訓練模型,便是文心大模型的ERNIE1.0版本。該模型不斷升級并取得突破,2021年7月,作為首個在百億級預訓練模型中引入大規模知識圖譜的模型,ERNIE 3.0刷新了五十多個中文NLP任務基準。2021年12月,ERNIE 3.0升級為全球首個知識增強千億大模型,模型數量突破2600億。
從行業角度來看,大模型的參數規模是評估一個模型好壞的關鍵指標,參數越大一般來說意味著大模型具備更多的能力,泛化性、通用性也更加強。目前,文心大模型參數規模達到2600億。“從十億級參數到千億級,可以明確看到模型規模增長和訓練數據增加帶來了顯著效果提升。”吳甜表示。
當然,一味地比拼參數,并不是衡量大模型優劣的唯一標準。模型質量、算力大小等軟硬件協同能力,以及大模型的工程落地能力,也是重要的評價維度。
據吳甜介紹,文心大模型最大的特點是“知識增強”。傳統大模型只從海量的文本中學習,只能死記硬背文本的規律,并不能從本質上理解世界是怎樣運行的,在具體應用時,一些涉及邏輯推理和認知的任務表現較差。為彌補這一缺點,百度引入了知識圖譜,通過“知識增強”的方法,將數據與知識融合,提升了文心大模型的通用性。
在落地運用方面,目前文心大模型已大規模應用于百度內部的各類產品,包含搜索、信息流、小度智能屏、百度地圖等。與此同時,文心大模型通過飛槳開源開放平臺、百度智能云等,已賦能到工業、能源、金融、通信等行業,個人、企業開發者數量已超過6萬。
“在保險領域應用中,文心大模型的智能解析能力,能使文本處理效率提升30倍;在人力資源領域應用中,文心大模型能實現候選人信息智能分類,模型識別準確率達到99%。”吳甜表示,據他介紹,今年是文心大模型產業落地關鍵年,未來百度還將不斷去降低門檻,讓這一系列的創新技術能普惠到更多的人與行業。
在2021百度認知AI創意賽“AI創意派”決賽現場,百度開放了ERNIE 3.0的能力,讓每位對AI感興趣的人,都能夠親自上手使用大模型進行創意開發。據介紹,該比賽自2021年10月正式開啟,目前已吸引近2000名選手參與,收集超過300份創意方案。