三個開源大模型(chatglm2-6B, moss, llama)-chatglm2的測試
?
chatglm2-6B 是清華大學開源的一款支持中英雙語的對話語言模型。經(jīng)過了 1.4T 中英標識符的預訓練與人類偏好對齊訓練,具有62 億參數(shù)的 ChatGLM2-6B 已經(jīng)能生成相當符合人類偏好的回答。結(jié)合模型量化技術(shù),用戶可以在消費級的顯卡上進行本地部署(INT4 量化級別下最低只需 6GB 顯存)。
在個人PC上安裝 chatglm2-6B后的測試情況給大家介紹一下。分別從用戶身份、編程計算能力、和推理能力等幾個方面進行測試。和chatgpt3.5做一個對比,在中文方面咯有優(yōu)勢,在推理能力上稍弱一些。
### 比如以不同的角色來寫一首詩
####? 如果你是一個大學生,寫一首春天的詩
ChatGLM:
春意盎然,世界新生,
嫩綠的嫩芽,悄悄地生長。
繽紛的花朵,綻放的盛況,
春雨的滋潤,細心的呵護。
遠處的山林,柔和的微風,
拂過臉龐的溫暖,
似乎在呢喃,也在呢喃。
春天的大學,充滿了生機,
知識的海洋,探索的樂園,
每一個角落,都充滿了光芒,
每一個靈魂,都充滿了希望。
青春在這里,綻放在這里,
愿我們都能,在這里收獲果實。
春天的大學,春天的青春,
愿我們都能,在這里放飛自己的夢想。
#### 如果你是一個小學生,寫一首春天的詩
ChatGLM:
萬物生長,鳥兒歌唱,
春風拂面,花兒綻放。
太陽升起,光芒四溢,
微風拂過,心情歡暢。
大自然恩賜一切,
讓我們享受,欣欣向榮。
春天是個寶藏,
蘊藏無限奧秘。
讓我們一起,共同探索,
感受春天的美好!
翻譯:
Spring has come, and all things are awakening,
Misty rain, nourishing the earth.
All things grow, birds sing,
Spring breeze, flowers bloom.
The sun rises, and the light shines bright,
微風吹過, and one is happy and bright.
Nature has given us everything we need,
Let us enjoy, and flourish together.
Spring is a treasure trove,
A secret world of endless wonders.
Let's explore together, and see,
How nature's beauty blooms this year.
### 計算和編程能力測試
####? 5*4/10 等于多少
ChatGLM:5*4/10 = 20/10 = 2
#### 用戶:用python 寫一段程序,? 計算 5*4/10 等于多少
ChatGLM:以下是一段 Python 程序,可以計算并輸出 5*4/10 的結(jié)果:
```python
# 計算并輸出 5*4/10 的結(jié)果
result = 5 * 4 / 10
print(result)
```
輸出結(jié)果為:
```
2
```
### 中文推理能力測試
#### 猴子數(shù)量計算測試
用戶:樹上有7只猴子,? 地上有1只猴子 , 一共幾只猴子??
ChatGLM:樹上有7只猴子,地上有1只猴子,一共是8只猴子。
用戶:地上1只猴子被趕走了,還剩下幾只猴子?
ChatGLM:如果地上最后一只猴子被趕走了,那么還剩下6只猴子。