


看你跑多大的模型Backfire 发表于 2025-11-11 00:23
看你跑多大的模型
Cstudent 发表于 2025-11-11 00:42
70B及以下
xy3666 发表于 2025-11-11 01:01
你这个太难了,量化24g显存跑个14b可能差不多
笔记本显存大的就5090 4090 16g 3万多,我感觉性价比不高建 ...
还是远程调用吧kingground 发表于 2025-11-11 11:00
如果你的预算有限,就不要考虑大显存方案
我在amd 9700x + 4070 super 12G上跑过70b的模型,速度是慢,但 ...
| 欢迎光临 全球主机交流论坛 (https://hostloc.gdisk.cf/) | Powered by Discuz! X3.4 |