這篇科普讓你Get所有大模型的核心知識點(diǎn)
ChatGPT-4的發(fā)布在各個領(lǐng)域引起了巨大的轟動,因?yàn)樗谌斯ぶ悄芗夹g(shù)中達(dá)到了一個新的高度。從ChatGPT發(fā)布以來,國內(nèi)外都迎來了新一輪大模型浪潮。那么,有科技小白會問:GPT就是大模型嗎?ChatGPT和大模型之間是什么關(guān)系?大模型現(xiàn)狀發(fā)展如何?本篇文章帶來大模型的所有知識點(diǎn)。

什么是AI大模型
AI大模型是“人工智能預(yù)訓(xùn)練大模型”的簡稱,一種機(jī)器學(xué)習(xí)模型,包含了“預(yù)訓(xùn)練”和“大模型”兩層含義,二者結(jié)合產(chǎn)生了一種新的人工智能模式,即模型在大規(guī)模數(shù)據(jù)集上完成了預(yù)訓(xùn)練后無需微調(diào),或僅需要少量數(shù)據(jù)的微調(diào),就能直接支撐各類應(yīng)用。
2021年8月,李飛飛、Percy?Liang等百來位學(xué)者聯(lián)名發(fā)布了文章:On?the?Opportunities?and?Risks?of?Foundation?Models[1],提出“基礎(chǔ)模型”(Foundation?Models)的概念:基于自監(jiān)督學(xué)習(xí)的模型在學(xué)習(xí)過程中會體現(xiàn)出來各個不同方面的能力,這些能力為下游的應(yīng)用提供了動力和理論基礎(chǔ),稱這些大模型為“基礎(chǔ)模型”。簡單理解就是智能化模型訓(xùn)練的底座。具體應(yīng)用場景不同分為小模型和大模型。
AI大模型的發(fā)展歷程
大模型也從2012年的萌芽期,發(fā)展到2016年的AI1.0時期,再到2022年ChatGPT帶來的AI2.0時期,模型參數(shù)均較前一代有數(shù)量級的飛躍,如OpenAI最新發(fā)布的多模態(tài)預(yù)訓(xùn)練大模型GPT-4約有超過2000億參數(shù),谷歌最新推出“通才”大模型PaLM-E,擁全球已公開的最大規(guī)模的5620億參數(shù),能夠表現(xiàn)出更優(yōu)秀的性能和應(yīng)用價(jià)值。目前,國內(nèi)AI大模型研發(fā)和應(yīng)用領(lǐng)域也正迎來高速發(fā)展熱潮,科技部新一代人工智能發(fā)展研究中心也隨即發(fā)布了《中國人工智能大模型地圖研究報(bào)告》,各類?AI?大模型產(chǎn)品層出不窮,“千模大戰(zhàn)”已經(jīng)打響。
AI大模型能做什么?
AI大模型可以學(xué)習(xí)和處理更多的信息,比如圖像、文字、聲音等,也可以通過訓(xùn)練,完成各種復(fù)雜的任務(wù)。比如智能語音助手和圖像識別軟件都會用到AI大模型。
現(xiàn)在國內(nèi)外有哪些公司具有大模型?
國外:
OpenAI:OpenAI是一家人工智能研究公司,擁有多個大型語言模型,包括GPT等。
Google:Google擁有很多大型深度學(xué)習(xí)模型,包括BERT、Transformer等。
Facebook:Facebook擁有很多大型深度學(xué)習(xí)模型,包括XLM-R、RoBERTa等。
Microsoft:Microsoft擁有很多大型深度學(xué)習(xí)模型,包括Turing-NLG、DialoGPT等。
......
國內(nèi):
阿里云自研大模型:“通義千問”
京東集團(tuán)新一代大模型:“ChatJD”
實(shí)在智能自研垂直領(lǐng)域的大語言模型:TARS大模型
華為云:“盤古”大模型
360的人工智能產(chǎn)品矩陣:“360智腦”
騰訊、字節(jié)跳動、同花順等企業(yè)都有著自己的AI大模型產(chǎn)品
國內(nèi)AI大模型現(xiàn)狀及發(fā)展趨勢
一面狂熱,一面冷峻是最好的形容。表面看,市場上正經(jīng)歷著自移動互聯(lián)網(wǎng)浪潮紅利消弭后,久違的狂熱,實(shí)際上,雖然ChatGPT引發(fā)的國內(nèi)外大模型熱潮依然洶涌,但有人跑馬圈地,也不乏有人望而止步。
目前看來,國內(nèi)大模型仍有一些障礙需要掃除,即中國大模型的競爭不在底層,如何深入場景應(yīng)用、建立一個繁榮生態(tài)才是平臺們的重中之重。而在應(yīng)用過程中需要注意的是,堅(jiān)持以人為本,以落地應(yīng)用需求主導(dǎo)技術(shù)能力發(fā)揮,將人的價(jià)值能力與機(jī)器的物質(zhì)能力結(jié)合起來??傊竽P筒荒芨恪盁o人駕駛”,要讓人“駕駛”機(jī)器。