mirror of https://github.com/THUDM/ChatGLM-6B
Update README.md
parent
9853cd2c97
commit
ba93cafa7d
|
@ -27,7 +27,7 @@ ChatGLM-6B 使用了和 ChatGPT 相似的技术,针对中文问答和对话进
|
||||||
| **量化等级** | **最低 GPU 显存**(推理) | **最低 GPU 显存**(高效参数微调) |
|
| **量化等级** | **最低 GPU 显存**(推理) | **最低 GPU 显存**(高效参数微调) |
|
||||||
| -------------- | ------------------------- | --------------------------------- |
|
| -------------- | ------------------------- | --------------------------------- |
|
||||||
| FP16(无量化) | 13 GB | 14 GB |
|
| FP16(无量化) | 13 GB | 14 GB |
|
||||||
| INT8 | 10 GB | 11 GB |
|
| INT8 | 8 GB | 9 GB |
|
||||||
| INT4 | 6 GB | 7 GB |
|
| INT4 | 6 GB | 7 GB |
|
||||||
### 环境安装
|
### 环境安装
|
||||||
|
|
||||||
|
|
Loading…
Reference in New Issue