OpenAI 又贏麻了谷歌 DeepMind 創(chuàng)始人剛稱 Gemini 能碾壓 GPT-4
整理 | 褚杏娟,核子可樂(lè)
谷歌在上個(gè)月的開發(fā)者大會(huì)上公布了一系列 AI 新項(xiàng)目,當(dāng)時(shí)首次亮相的 Gemini 曾受到不少嘲諷。但近日,DeepMind 聯(lián)合創(chuàng)始人兼 CEO Demis Hassabis 自曝,工程師們正在使用 AlphaGo 的技術(shù)來(lái)開發(fā) Gemini,其強(qiáng)大程度有望超越 OpenAI 的當(dāng)家花旦 ChatGPT。
在 AlphaGo 的加持下,Gemini 瞬間備受關(guān)注。在 2016 年,谷歌 DeepMind 人工智能實(shí)驗(yàn)室打造的 AlphaGo 程序成功擊敗圍棋世界冠軍,寫下了 AI 發(fā)展史上的一頁(yè)新篇章。
仍在開發(fā)當(dāng)中的 DeepMind Gemini 是一套專門處理文本的大語(yǔ)言模型,其本質(zhì)與 ChatGPT 家族的 GPT-4 相似。根據(jù)此前的介紹,Gemini 一開始就以多模式、高效的工具和 API 集成為目標(biāo)而創(chuàng)建,旨在支持未來(lái)的創(chuàng)新,例如內(nèi)存和規(guī)劃。經(jīng)過(guò)微調(diào)和嚴(yán)格的安全測(cè)試后,Gemini 將提供各種尺寸和功能。
現(xiàn)在,Hassabis 表示,他的團(tuán)隊(duì)將 GPT 技術(shù)與 AlphaGo 的特性加以結(jié)合,希望賦予系統(tǒng)規(guī)劃和解決問(wèn)題的新能力?!皬暮暧^來(lái)講,大家可以把 Gemini 理解為結(jié)合了 AlphaGo 系統(tǒng)優(yōu)勢(shì)與大模型令人驚嘆的語(yǔ)言能力。我們還做出了其他非常有趣的創(chuàng)新?!?/p>
之前谷歌開發(fā)者大會(huì)上,谷歌 CEO Sundar Pichai 也說(shuō)道,“雖然還為時(shí)過(guò)早,但我們已經(jīng)看到了之前型號(hào)中未曾見過(guò)的、令人印象深刻的多模式功能?!?/p> DeepMind:下一代大模型碾壓 GPT-4
要訓(xùn)練出 OpenAI GPT-4 這樣的大語(yǔ)言模型,研究人員需要將書籍、網(wǎng)頁(yè)和其他來(lái)源處的大量精選文本輸入到 Transformer 機(jī)器學(xué)習(xí)軟件當(dāng)中。模型會(huì)利用訓(xùn)練數(shù)據(jù)中表現(xiàn)出的模式,熟練預(yù)測(cè)一段文本之后應(yīng)該出現(xiàn)的一個(gè)個(gè)字母和單詞。這種簡(jiǎn)單的文本預(yù)測(cè)機(jī)制在回答問(wèn)題、生成自然語(yǔ)言 / 代碼方面被證明擁有強(qiáng)大的潛力空間。
要進(jìn)一步開發(fā) ChatGPT 及類似功能的語(yǔ)言模型,DeepMind 認(rèn)為還有另一個(gè)重要的附加步驟,就是使用基于人類對(duì) AI 模型答案做出的反饋,進(jìn)而借助強(qiáng)化學(xué)習(xí)提高其性能。DeepMind 在強(qiáng)化學(xué)習(xí)方面的豐富經(jīng)驗(yàn),也許能讓研究人員為 Gemini 賦予更多新穎能力。
AlphaGo 基于 DeepMind 首創(chuàng)的強(qiáng)化學(xué)習(xí)技術(shù)。這項(xiàng)技術(shù)要求 AI 模型在問(wèn)題之上反復(fù)嘗試并接收關(guān)于性能的反饋,據(jù)此設(shè)計(jì)接下來(lái)將要采取的行動(dòng)(例如圍棋或電子游戲),從而讓軟件一步步學(xué)會(huì)解決棘手問(wèn)題。它還采用所謂“樹搜索”方法,以探索并記住棋盤上可能采取的各種動(dòng)作。如果這一思路能夠幫助語(yǔ)言模型迎來(lái)下一次重大飛躍,則新 AI 或能在互聯(lián)網(wǎng)和計(jì)算機(jī)上執(zhí)行更多種類的任務(wù)。
Hassabis 和他的團(tuán)隊(duì)也許還會(huì)利用 AI 領(lǐng)域的其他思路繼續(xù)增強(qiáng)大語(yǔ)言模型。DeepMind 研究人員的關(guān)注領(lǐng)域涵蓋機(jī)器人、神經(jīng)科學(xué)等諸多方向。本周早些時(shí)候,該公司展示了一種算法,能夠?qū)W習(xí)借助不同類型的機(jī)械手臂完成操作任務(wù)。
人們普遍認(rèn)為,跟人類和其他動(dòng)物一樣,AI 的能力提升也需要從現(xiàn)實(shí)世界中學(xué)習(xí)客觀經(jīng)驗(yàn)。一部分 AI 專家相信,語(yǔ)言模型的最大限制就是只能通過(guò)文本以間接方式了解世界。
Hassabis 坦言,Gemini 目前仍在開發(fā)當(dāng)中,且整個(gè)過(guò)程需要幾個(gè)月時(shí)間,成本則在數(shù)千萬(wàn)到數(shù)億美元之間。OpenAI 公司 CEO Sam Altman 曾有 4 月表示,GPT-4 的開發(fā)成本超過(guò)了 1 億美元。
Hassabis 的任務(wù)就是加快谷歌的 AI 開發(fā)進(jìn)度,同時(shí)管理種種未知的潛在風(fēng)險(xiǎn)。最近一段時(shí)間,語(yǔ)言模型的快速進(jìn)步已經(jīng)令 AI 專家(包括部分算法專家)感到擔(dān)憂,害怕這項(xiàng)技術(shù)被惡意濫用或者變得難以控制。某些內(nèi)部技術(shù)人士甚至呼吁暫停開發(fā)更強(qiáng)大的算法,避免匆忙之中造成重大威脅。
Hassabis 認(rèn)為,AI 技術(shù)的確擁有巨大的潛在助益,例如在健康或氣候等領(lǐng)域推動(dòng)科學(xué)發(fā)現(xiàn),所以人類探索 AI 的腳步絕不能停止。但他也強(qiáng)調(diào),強(qiáng)制叫停研究明顯脫離實(shí)際,基本沒(méi)有可行性?!爸灰幹玫卯?dāng),AI 將成為有史以來(lái)對(duì)人類最有益的技術(shù)成果。我們必須有勇氣去追求這樣的關(guān)鍵成果?!?/p>
這也不是說(shuō) Hassabis 在一味強(qiáng)調(diào)快速開發(fā) AI 技術(shù)。DeepMind 早在 ChatGPT 出現(xiàn)之前,就一直在探索 AI 可能帶來(lái)的各種風(fēng)險(xiǎn)。該公司聯(lián)合創(chuàng)始人之一 Shane Legg 多年來(lái)一直領(lǐng)導(dǎo)一支內(nèi)部“AI 安全”小組。Hassabis 上個(gè)月與其他備受矚目的 AI 領(lǐng)袖一道簽署了一份聲明,警告稱 AI 也許有一天會(huì)引發(fā)與核戰(zhàn)爭(zhēng)或全球流行病相當(dāng)?shù)膰?yán)峻風(fēng)險(xiǎn)。
Hassabis 強(qiáng)調(diào),目前最大的挑戰(zhàn)之一就是確定更強(qiáng)的 AI 具體會(huì)帶來(lái)哪些風(fēng)險(xiǎn)。他解釋道,“我認(rèn)為 AI 領(lǐng)域需要在評(píng)估測(cè)試等方面開展更多研究——這已經(jīng)是一項(xiàng)非常緊迫的任務(wù)”,用以確定新 AI 模型的能力和可控性。為此,DeepMind 可能會(huì)逐步向外部科學(xué)家開放自己的系統(tǒng)?!跋M麑W(xué)術(shù)界能夠盡早接觸到這些前沿模型。”如果此觀點(diǎn)得到落實(shí),也許有助于解決科技巨頭以外的 AI 專家被排除在最新研究之外的擔(dān)憂。
那我們究竟要不要為 AI 大爆發(fā)這樣一個(gè)未來(lái)而擔(dān)憂?Hassabis 安慰道,其實(shí)沒(méi)人真能確定 AI 會(huì)不會(huì)成為一種重大威脅。但他相信,如果 AI 研究繼續(xù)以目前的速度推進(jìn),那業(yè)界確實(shí)沒(méi)什么時(shí)間制定相應(yīng)的保障措施?!拔夷芮猩碛^察到我們?cè)跇?gòu)建 Gemini 時(shí)的一步步進(jìn)展,相信這些成果都將發(fā)揮預(yù)期當(dāng)中的作用?!?/p> OpenAI:入駐 DeepMind 大本營(yíng)
自從 ChatGPT 去年驚艷亮相以來(lái),谷歌很快推出了自己的聊天機(jī)器人 Bard,并將生成式 AI 技術(shù)應(yīng)用至搜索引擎及其他眾多產(chǎn)品當(dāng)中。為了增強(qiáng) AI 研究力度,谷歌公司還于 4 月將 Hassabis 領(lǐng)導(dǎo)的 DeepMind 部門與谷歌另一 AI 實(shí)驗(yàn)室 Brain 合并,建立起一個(gè)新的谷歌 DeepMind。Hassabis 表示,新團(tuán)隊(duì)將匯聚雙方最近一段時(shí)間為奠定 AI 基礎(chǔ)所積蓄的強(qiáng)大力量?!翱v觀我們?cè)?AI 領(lǐng)域的進(jìn)展,就會(huì)發(fā)現(xiàn) 80% 到 90% 的成果都來(lái)自這兩支隊(duì)伍。過(guò)去十年間,雙方也都取得過(guò)輝煌的成就。”
Hassabis 本人曾經(jīng)憑借 AlphaGo 掀起過(guò)一波 AI 熱潮。所以面對(duì)如今這輪技術(shù)巨頭爭(zhēng)相投入的 AI 淘金之風(fēng),他顯得頗有經(jīng)驗(yàn)。但另一方面,其競(jìng)爭(zhēng)對(duì)手 OpenAI 的擴(kuò)張腳步也在繼續(xù)。
幾乎在同一時(shí)間,OpenAI 宣布,將在倫敦開設(shè)其第一個(gè)國(guó)際辦事處。OpenAI 首席執(zhí)行官 Sam Altman 表示,當(dāng) OpenAI 倫敦辦事處將專注于提升“研究和工程能力”,同時(shí)平衡與“當(dāng)?shù)厣鐓^(qū)和政策制定者”的合作。
值得注意的是,倫敦是谷歌最大的人工智能研究部門 DeepMind 的長(zhǎng)期總部基地。鑒于倫敦?fù)碛兄拇髮W(xué)和豐富的學(xué)術(shù)歷史,倫敦也是數(shù)據(jù)科學(xué)人才的源泉。OpenAI 這次海外擴(kuò)張,將與谷歌在同一個(gè)城市近距離競(jìng)技。
自 2015 年成立以來(lái),OpenAI 一直沒(méi)有擴(kuò)展到舊金山總部以外的地方。Altman 在一份聲明先中表示,這次擴(kuò)張是一次吸引世界級(jí)人才的機(jī)會(huì)。據(jù)報(bào)道,Altman 也提出將波蘭和法國(guó)作為該辦事處的替代選擇。其中,法國(guó)也被視為人工智能領(lǐng)域的領(lǐng)導(dǎo)者,谷歌和 Meta 都在巴黎設(shè)立了人工智能實(shí)驗(yàn)室。
此時(shí),正值 OpenAI 致力于創(chuàng)造利潤(rùn)之際。運(yùn)行人工智能基礎(chǔ)設(shè)施并不便宜,半導(dǎo)體研究公司 Semianalysis 層估計(jì) OpenAI 每天的成本約為 700,000 美元??紤]到這一點(diǎn),英國(guó)的企業(yè)稅比美國(guó)和其他歐洲國(guó)家低。
廣義上講,倫敦也正在成為人工智能初創(chuàng)企業(yè)蓬勃發(fā)展的中心。根據(jù)最近的一份報(bào)告,截至 2021 年,倫敦有超過(guò) 1,300 家人工智能公司,就風(fēng)投資金而言,倫敦也是英國(guó)資金最多的城市。
對(duì)于 OpenAI 等大量投資人工智能的科技公司來(lái)說(shuō),倫敦也有很重要的政治地位,這些公司試圖說(shuō)服英國(guó)管理機(jī)構(gòu)對(duì)人工智能進(jìn)行寬松的監(jiān)管。
在最近的一次游說(shuō)之旅中,Altman 出現(xiàn)在倫敦大學(xué)學(xué)院,并呼吁“平衡”監(jiān)管。Altman 威脅稱,如果公司無(wú)法滿足歐盟目前正準(zhǔn)備出臺(tái)的新人工智能(AI)立法規(guī)定,OpenAI 可能會(huì)“停止在歐盟的運(yùn)營(yíng)”。據(jù)悉,該法案是人工智能行業(yè)第一套綜合法規(guī)之一。后來(lái),Altman 收回了這些評(píng)論。
有趣的是,DeepMind 創(chuàng)始人中的 Demis Hassabis 和 ShaneLegg 就是相識(shí)于倫敦大學(xué)學(xué)院生命科學(xué)系的蓋茨比計(jì)算神經(jīng)科學(xué)小組。
如今,OpenAI 在倫敦的辦事處正在大量招聘,涉及各類研發(fā)、政策安全等崗位,是否會(huì)引發(fā)人才流動(dòng)還未可知。但可以預(yù)見,OpenAI 與 谷歌 DeepMind 之間的競(jìng)爭(zhēng)將會(huì)愈發(fā)激烈。
參考鏈接:
https://www.wired.com/story/google-deepmind-demis-hassabis-chatgpt/
https://techcrunch.com/2023/06/28/openai-brings-the-competition-to-deepminds-doorstep-with-new-london-office/
活動(dòng)推薦OpenAI 推出的 ChatGPT 帶來(lái)了革命性的變化,整個(gè) IT 生態(tài)面臨大模型(LLM)的洗牌和洗禮。在這個(gè)過(guò)程中,架構(gòu)師、工程師會(huì)遇到前所未有的挑戰(zhàn)和機(jī)遇。
在 7 月 21 - 22 日深圳站 ArchSummit 架構(gòu)師峰會(huì)上,我們邀請(qǐng)了出門問(wèn)問(wèn)工程 VP 李維博士來(lái)會(huì)議現(xiàn)場(chǎng)分享最新的研究成果。讓你放下焦慮,找到解決思路。點(diǎn)擊「閱讀原文」查看專題詳情。