最美情侣中文字幕电影,在线麻豆精品传媒,在线网站高清黄,久久黄色视频

歡迎光臨散文網(wǎng) 會員登陸 & 注冊

文心一言對比ChatGPT4.0,差距比我想象的還大....

2023-03-21 10:05 作者:思哲與創(chuàng)富  | 我要投稿

昨天看到一篇國金證券的研報(bào),其中對GPT4.0、3.5和文心一言做了一組詳細(xì)測試。

最后立下的結(jié)論大致是這樣:


從研報(bào)結(jié)論來看,國金證券說這三算是互有勝負(fù),總體上GTP-4略勝一籌。

不過我仔細(xì)瞅了眼對比結(jié)果,感覺研報(bào)說的還是太委婉了...

尤其是在數(shù)字、代碼、歸納和推理這些能力,GPT4幾乎把文心一言給完爆。

我放一些研報(bào)中的案例,大家可以直觀感受一下模型的差距~

第一個是簡單數(shù)學(xué)問題,求線性方程組:

文心一言的回答,直接跳過計(jì)算流程,給了個錯誤答案,因?yàn)闆]有流程,連錯哪兒都不知道


相比之下GPT4.0把算法流程給講的比較清楚,也很細(xì)節(jié)。


重點(diǎn)是國金證券竟然說GPT4.0的Y值算錯了,說GPT3.5算的Y=3/7是正確答案,看的我一臉疑惑。


大家看看,難道是我多年不做題,數(shù)學(xué)退化了?

其次就是文學(xué)創(chuàng)作這塊,這倆也是有一些差距:

比如寫一個劉紅發(fā)大財(cái)?shù)墓适?/strong>,文心一言理解成人物是劉紅發(fā)。


而且GPT4.0在故事的形象度、豐富度和生動度上來說要牛X不少,感覺已經(jīng)有寫小說的潛力了。

文心一言雖然故事也湊合,但細(xì)節(jié)度方面上看暫時被完爆…

接著看邏輯推理能力。

這環(huán)節(jié)文心一言又錯了,直接順推說,點(diǎn)了沙拉就一定點(diǎn)了牛排。

而事實(shí)上就是純粹的錯誤。

GPT4.0給了正確的答案。


此外邏輯推理環(huán)節(jié)還有一個。

就是問“為什么我總是在最后一個地方找到丟失的物品”。

實(shí)際上這是給AI挖了個坑,本質(zhì)上這是個謬論。

然而文心一言也壓根沒注意到這個問題,然后說了一通沒有邏輯的解釋。


而GPT4一開始就說出了問題的本質(zhì),“丟失的物品肯定是最后一個地方找到的”。

不過后面的解釋我感覺沒有必要,屬于是明明說對了又強(qiáng)行解釋一遍...


不過文心一言也不是完全沒有優(yōu)點(diǎn),在一些中文類目,他經(jīng)常會給出一些實(shí)操案例。

先不說能不能行,但它起碼也算是有自己的特色了,敢于推薦...

比如同樣都是問如何賺100萬,文心一言給出了一些具體的實(shí)操案例,而不是空話,比較有趣。


這估計(jì)也和模型的調(diào)教方式有關(guān)哈。

GPT4在些問題里邊回答的就比較像是套用模板,感覺過于死板。


然后就是在投資理財(cái)這塊,直接問想買一個年化4%的理財(cái),文心一言竟然給了一款具體名稱的銀行理財(cái)(其實(shí)是貨幣基金)


先不說合不合規(guī),貨基4%現(xiàn)在是肯定不可能做到的。

目前它最新的7日年化也只有2%左右,我也不知道文心一言哪來的結(jié)論。

不會以后問我想看個什么病,然后給我推薦莆田的某醫(yī)院吧~

相比之下GPT要嚴(yán)謹(jǐn)很多,雖然說的也是空話為主,但涉及金融投資這塊GPT似乎都是這個樣,沒法。


不過文心一言有一個案例挺牛,在揣摩男女情感心思上,這輪贏麻了。


這次是解釋“你沒有錯,都是我的錯”這句話,文心一言在男女吵架后對反話的理解完全到位,點(diǎn)贊。

不過后面補(bǔ)充這塊就有點(diǎn)瞎扯了,大家自行判斷。

而GPT的話,說的就是傳統(tǒng)的字面意義觀點(diǎn),顯然還是沒完全理解我們中國特色表達(dá)方式。

但后面GPT也補(bǔ)救了一下,說不能完全確定,要看具體情況,算是挽回一些場子。

總的來說,研報(bào)中的測試大概就這些,對比結(jié)果一目了然,GPT4.0更嚴(yán)謹(jǐn),“智商”似乎也更高一些。

不過文心一言在“情商”方面也算能打,有更多中文數(shù)據(jù)訓(xùn)練的優(yōu)勢,至少對話一些日常問題能應(yīng)付。

好比GPT更像邏輯思維縝密的直男,而文心一言更像一個心直口快,大大咧咧的人。

只不過面對高難度題目來說,智商明顯還不夠,畢竟技術(shù)差距擺在那,慢慢來吧。

大概就說這些,大家還有啥觀點(diǎn),留言區(qū)也可以說說。


文心一言對比ChatGPT4.0,差距比我想象的還大....的評論 (共 條)

分享到微博請遵守國家法律
临猗县| 耒阳市| 昭平县| 徐州市| 福安市| 分宜县| 龙岩市| 宝山区| 和顺县| 新河县| 久治县| 铜梁县| 云安县| 元谋县| 通江县| 兖州市| 宝山区| 九龙坡区| 许昌市| 如东县| 麻阳| 固始县| 南开区| 都匀市| 大邑县| 兰州市| 新竹市| 广南县| 蕉岭县| 乐至县| 革吉县| 宜兴市| 崇仁县| 专栏| 灵石县| 澜沧| 筠连县| 松潘县| 扎兰屯市| 西丰县| 贡觉县|