请问此配置如何加速 ollama ds-r1 32b 的速度,好慢
五分钟才生成以下图片回答
windows 利用情况
nvida 版本 : 24.21.13.9793
GPU : NVIDIA Quadro P2000
内存

请问此配置如何加速 ollama ds-r1 32b 的速度,好慢
五分钟才生成以下图片回答
windows 利用情况
nvida 版本 : 24.21.13.9793
GPU : NVIDIA Quadro P2000
内存

|
jr55475f112iz2tuMar 18, 2025
1
你先把驱动改成 Studio 驱动 试试
|
|
2
@czfy 大老,我查看 https://www.nvidia.com/en-us/drivers/details/241085/ 好像没有 studio 驱动,请问是我找的方式不对吗
|
|
tool2dxMar 18, 2025 via Android
3
你这显存完全没有动起来,都是 CPU 在推理,肯定慢的。
换 m40 显卡,买二手的几百块,显存够大够用。 |
|
4
https://zhuanlan.zhihu.com/p/645580165
我用 nvidia-smi -dm 0 -i 0 设置成 WDDM 模式,速度加快了! |