深瞳工作室出品
科技日報記者 都芃 劉艷 策劃 劉莉 李坤
大模型展現(xiàn)出的通用智能能力具有重要的現(xiàn)實意義和影響力,是人工智能發(fā)展中里程碑式的進展。大模型帶來的智能革命,將媲美工業(yè)革命和電力革命,深刻改變?nèi)祟惿鐣纳a(chǎn)生活方式。大模型,或許正是開啟智能時代的那一臺“蒸汽機”。
要問今年最熱的科技熱點是什么,許多人會脫口而出——大模型。從年初ChatGPT引發(fā)的大模型浪潮,到相關科技企業(yè)上線自家大模型產(chǎn)品,“百模大戰(zhàn)”不斷升級,它所引發(fā)的人工智能“地震”還在持續(xù)。
進入9月,國內(nèi)科技廠商在大模型領域動作頻頻。9月初,此前一直處于內(nèi)測階段的多款大模型產(chǎn)品完成備案,正式上線,面向公眾開放。9月21日,在華為全聯(lián)接大會2023上,因在眾多領域展示了大模型發(fā)展的更多可能,盤古大模型成為當之無愧的主角。
“百模大戰(zhàn)”也好,“群模起舞”也罷,技術進步和創(chuàng)新噴涌的熱潮中,人們關注的焦點集中于,我們究竟需要什么樣的大模型?何種大模型是通向人工智能的最終答案?
基于大模型的詩歌生成。(視覺中國供圖)
智能時代的“蒸汽機”
現(xiàn)在到底有多少個大模型產(chǎn)品?似乎沒有人能給出準確的答案。
賽迪顧問發(fā)布的《2023大模型現(xiàn)狀調(diào)查報告》顯示,截至2023年7月底,國外累計發(fā)布大模型138個,中國則累計有130個大模型問世。
但這股浪潮的源頭很清楚,正是ChatGPT。
2022年末,由名不見經(jīng)傳的人工智能公司Open AI打造的大語言模型ChatGPT橫空出世,人們可以使用最日常的語言與其對話,讓它回答各種問題、完成各類書面任務,聊天、畫圖、敲代碼……人們第一次如此近距離地感受到人工智能帶來的震撼,也讓“大模型”這個此前只為少數(shù)人工智能領域從業(yè)者所知的專業(yè)概念,成為了被人們掛在嘴邊、反復提及的詞匯。
輸入內(nèi)容、進行計算、產(chǎn)出結果,這是人工智能模型的本質(zhì),但大模型的與眾不同之處正在于其足夠“大”。
巨大的參數(shù)數(shù)量、龐大復雜的算法結構、海量的訓練數(shù)據(jù)以及強大的算力支撐,決定了大模型不同于普通的人工智能模型,其擁有強大的通用智能。
以ChatGPT為例,其早期3.0版本的參數(shù)數(shù)量已達到1750億個,4.0版本的參數(shù)量更是指數(shù)級增加,達到1.8萬億個,訓練數(shù)據(jù)的單位數(shù)量更是達到驚人的13萬億。相比之下,早期如圍棋機器人AlphaGo等專用人工智能模型,其參數(shù)量往往僅為百萬級,與大模型相去甚遠。
海量的參數(shù)、復雜的算法、強大的訓練能力,讓大模型成為具備橫跨多領域學習能力的通用人工智能,實現(xiàn)了所謂的“智能涌現(xiàn)”,即擁有觸類旁通、舉一反三的學習能力。如果說此前的人工智能模型還只是經(jīng)過訓練后可以完成某些特殊任務的“馬戲團猴子”,那大模型則可以說已經(jīng)是一個接受完義務教育的“中學畢業(yè)生”。
在北京智源人工智能研究院院長、北京大學計算機學院教授黃鐵軍看來,大模型展現(xiàn)出的通用智能能力具有重要的現(xiàn)實意義和影響力,是人工智能發(fā)展中里程碑式的進展,放眼人類歷史、展望人類未來,大模型帶來的智能革命,將媲美工業(yè)革命和電力革命,深刻改變?nèi)祟惿鐣纳a(chǎn)生活方式。大模型,或許正是開啟智能時代的那一臺“蒸汽機”。
華為盤古大模型語義理解系統(tǒng)。(視覺中國供圖)
哪條賽道通“羅馬”
ChatGPT引發(fā)的大模型熱潮讓許多科技巨頭坐不住了,紛紛將自家“壓箱底”的大模型成果公之于眾。
谷歌緊隨ChatGPT腳步,發(fā)布了基于自家大語言模型的聊天機器人“Bard”,互動媒體與服務公司Meta也不甘落后,發(fā)布了同類大模型“Llama”。國內(nèi)同樣熱鬧非凡,3月份,百度率先發(fā)布研發(fā)十余年的知識增強大語言模型“文心一言”。隨后,360發(fā)布“360智腦”,阿里巴巴上線“通義千問”,科大訊飛推出“訊飛星火”,騰訊推出“混元”,華為推出“盤古”……一眾科技公司不甘落后地推出了各自的大模型產(chǎn)品。
彼時,面向公眾發(fā)布的大模型產(chǎn)品均為內(nèi)測使用,公眾需提出申請,獲得內(nèi)測資格后才能進行體驗。7月10日,國家網(wǎng)信辦聯(lián)合國家發(fā)改委、教育部、科技部等七部門審議通過并發(fā)布《生成式人工智能服務管理暫行辦法》(以下簡稱《辦法》),該《辦法》8月15日起正式施行?!掇k法》明確規(guī)定,提供具有輿論屬性或者社會動員能力的生成式人工智能服務的,應當按照國家有關規(guī)定開展安全評估,并履行算法備案等手續(xù)。8月底,一批完成算法備案的大模型產(chǎn)品陸續(xù)上線,正式面向公眾開放。
或許是ChatGPT帶來的震撼過于強烈,以自然語言對話為主要功能體驗的大語言模型產(chǎn)品成為許多科技廠商的首選,甚至一度成為大模型的代名詞。首批通過備案上線的大模型產(chǎn)品中有百度的“文心一言”、字節(jié)跳動的“豆包”、智譜華章的“智譜清言”等。截至9月底,已有十余家大語言模型產(chǎn)品官宣上線,大部分均提供聊天對話、創(chuàng)意寫作、代碼生成等服務。
但在大語言模型之外,也有廠商選擇了另一條道路,不“戀戰(zhàn)”大語言模型,而是直面行業(yè)具體問題。
在9月21日舉辦的華為全聯(lián)接大會2023上,華為常務董事、華為云CEO張平安表示,盤古大模型要幫助各行各業(yè)的客戶解最難的題。例如,在礦山領域,精煤產(chǎn)率是困擾業(yè)界多年的難題,山東能源集團已將“盤古”礦山大模型全面應用到采、掘、機、運、通等9大業(yè)務系統(tǒng)、21個場景中。在“盤古”的助力下,濟寧二號煤礦每年能多產(chǎn)出8000噸精煤,精煤產(chǎn)率提升千分之二,增收約2000萬元。
在正在舉辦的亞運會上,也少不了大模型的身影。由浙江移動打造的亞運保障網(wǎng)絡運維大模型在幕后為亞運會保駕護航。它讓保障人員“無論在哪,無論何時”都能以“對話”方式獲取保障情況,全面提升了亞運會保障的工作效率,降低了保障工作的技術門檻。
浙江移動網(wǎng)管中心副總經(jīng)理方煒告訴科技日報記者,無論是面向具體行業(yè)的垂直大模型,還是直面公眾的大語言模型,從底層技術來看,二者并不沖突?!斑@兩種選擇就像是此前的互聯(lián)網(wǎng)發(fā)展,既有改變?nèi)藗兩畹囊苿踊ヂ?lián)網(wǎng),也有改變社會、改變行業(yè)的產(chǎn)業(yè)互聯(lián)網(wǎng)。大模型也是基于通用的底層技術,衍生出了不同用途。比如浙江移動的網(wǎng)絡運維大模型就是使用通用大模型通過微調(diào)和提示工程來滿足亞運網(wǎng)絡保障的場景?!?/p>
垂直大模型和通用大模型,究竟哪條賽道能夠通向終極人工智能的“羅馬城”,答案或許是——條條大路通羅馬。
基于大模型的現(xiàn)代農(nóng)業(yè)模型。(視覺中國供圖)
“萬模群舞”或在不遠的將來
無論是何種類型的大模型,在“百模大戰(zhàn)”的背景下,其功能、用途、場景的重復都無法避免。但在業(yè)內(nèi)人士看來,大模型的發(fā)展還遠未觸及天花板,不僅“百模大戰(zhàn)”不是終點,“萬模群舞”或許就在不遠的將來。
“大模型的研發(fā)是一個拼細節(jié)的過程。從技術路線上看,目前各家基本上都是基于Transformer架構來做,方法很類似,但效果確實不一樣,決定成敗的是細節(jié)?!彬v訊有關負責人接受采訪時說,由于資源投入程度、細節(jié)把握程度的不同,最后不同產(chǎn)品的差異會逐漸顯現(xiàn)。“從應用領域來說,會迎來一個‘百花齊放’的場景,比如有的專注于自然語言處理,有的專注于醫(yī)療領域,有的專注于教育領域等。就目前而言,大模型的天花板還遠遠沒有觸到,技術體系和應用場景都在不斷演進?!彬v訊有關負責人說。
無論是“百模大戰(zhàn)”還是“萬模群舞”,要避免低水平的雷同復制,杜絕“重復造輪子”帶來的資源浪費,關鍵仍在于不斷豐富大模型的應用生態(tài)。今年5月,國際期刊《自然》發(fā)表了一項百度在生物計算領域的突破性研究成果,其提出的mRNA序列優(yōu)化算法LinearDesign,對生物醫(yī)學領域創(chuàng)新具有重要價值,這也是中國互聯(lián)網(wǎng)科技企業(yè)首次以第一完成單位的身份在《自然》正刊發(fā)表成果。而在這背后,是百度在2022年5月便推出的“文心”生物計算大模型。借助大模型,人類能夠快速找到并設計出活性更好、性質(zhì)更優(yōu)的候選藥物分子,從而大幅提升新藥研發(fā)和疫苗設計效率,讓新藥研發(fā)從單點突破的“手工作坊”階段進入到規(guī)模開發(fā)階段。目前,基于“文心”生物計算大模型和飛槳深度學習框架搭建的面向小分子、大分子和RNA的藥物設計平臺——飛槳螺旋槳PaddleHelix,已經(jīng)應用于超過30家醫(yī)藥企業(yè)。
“無論是從技術層面還是產(chǎn)品層面,百花齊放、百家爭鳴對于當下大模型發(fā)展都更加有利。算法研究階段可能五花八門,但到工程選型階段,可能會逐漸聚焦到一個或少數(shù)幾個類型。而到了具體產(chǎn)品選型層面,面向不同市場、不同行業(yè),產(chǎn)品形態(tài)可能又是多種多樣的?!鼻迦A大學計算機系教授唐杰認為,無論哪種大模型都有各自的局限性,各種模型互相學習、競爭,在市場中大浪淘沙是必經(jīng)之路。
中國移動“九天”AI酷玩體驗站。(視覺中國供圖)
基于大模型的住院醫(yī)生站管理系統(tǒng)。(視覺中國供圖)
給大模型發(fā)展更多耐心
“百模大戰(zhàn)”雖然激發(fā)出了更多可能,但也帶來了不少負面影響。當眾多廠商蜂擁而上大模型時,參差不齊的產(chǎn)品讓人眼花繚亂,其中暗藏的法律、道德風險也應引起人們的警惕。
例如,在面向公眾的大語言模型產(chǎn)品中,“一本正經(jīng)胡說八道”現(xiàn)象已經(jīng)多次引發(fā)質(zhì)疑?!拔覀兂Uf大模型會產(chǎn)生‘幻覺’,就是因為大模型的內(nèi)容準確性還不高、專業(yè)性能力不足,如果大模型產(chǎn)生的內(nèi)容直接公開在互聯(lián)網(wǎng),會使當前良莠不齊的互聯(lián)網(wǎng)信息質(zhì)量更加低下?!狈綗樥J為,大模型目前在內(nèi)容安全、版權、主體責任等方面還存在多種風險。
而當深入到具體行業(yè)時,不同行業(yè)的不同特點也對大模型在準確度、安全性、專業(yè)性等方面提出更高要求。360創(chuàng)始人周鴻祎接受采訪時表示,雖然公開的大模型是通用的,甚至是萬能的,但是當深入到具體行業(yè)時仍然面臨著缺乏行業(yè)深度、不懂企業(yè)內(nèi)部知識、易導致企業(yè)內(nèi)部數(shù)據(jù)泄露、無法控制成本等問題。方煒也同意這種說法:“例如大模型應用在通信網(wǎng)絡保障方面時,就不允許有任何差錯,目前準確性還有待提升?!?/p>
除了目前大模型自身仍然存在的缺陷,隨著競爭的逐漸激烈,我國在相關數(shù)據(jù)、算力、算法等方面的困境也逐漸暴露。
例如,在訓練數(shù)據(jù)方面,唐杰指出,目前我國的數(shù)據(jù)開放態(tài)勢并不強,“大多數(shù)機構還是想把數(shù)據(jù)握在自己手里”。但唐杰也坦承,即使機構有數(shù)據(jù)開源的意愿,在目前環(huán)境下,仍然存在多重風險。他建議,我國關于大模型訓練數(shù)據(jù)應用、開源的相關法律法規(guī)還需要進一步細化、健全,讓有開源意愿的機構能夠放心地進行數(shù)據(jù)開源,充分激發(fā)互聯(lián)網(wǎng)精神。
而在算力方面,“百模大戰(zhàn)”對算力的高需求也讓我國本就緊張的算力資源更加捉襟見肘。在“東數(shù)西算”基礎上建立起的算力互聯(lián)網(wǎng)或許有望成為解決這一問題的答案。通過對不同地區(qū)的算力資源進行調(diào)度,實現(xiàn)算力資源的均衡分配。但目前仍然需要在高帶寬、低延遲的算力網(wǎng)絡建設方面突破更多技術瓶頸。
如果說數(shù)據(jù)和算力是大模型的硬件“基礎設施”,算法則體現(xiàn)著更多“人”的因素。小冰公司首席執(zhí)行官李笛認為,就訓練大模型而言,參數(shù)的數(shù)量并不是最重要的,工程化過程中的調(diào)優(yōu)才是真正的考驗?!把邪l(fā)、訓練一個大模型可能只需要一個月,但調(diào)優(yōu)可能需要一年的時間。這個過程格外需要謹慎、細致、耐心,有足夠的定力和專注力,也是一種‘工匠精神’的體現(xiàn)?!?/p>
耐心,是談及大模型發(fā)展時多位業(yè)內(nèi)專家反復提及的關鍵詞?!按竽P筒皇前褦?shù)據(jù)‘喂’進去,算力一跑就有了。這其中有許多復雜細致的工作要做?!碧平鼙硎?,人工智能自20世紀50年代被提出至今,其發(fā)展已經(jīng)歷過多次起伏,任何技術的發(fā)展都不是一蹴而就的,要對其有充分耐心。
相關鏈接