赞
踩
使用1panel安装ollama,启动模型默认在CPU上跑,模型稍大,速度就很慢,以下是解决办法:
1、暂停ollama容器
2、删除ollama镜像
3、进入安装路径
4、查看路径
5、已GPU运行ollama得docker命令
其中/opt/1panel/apps/ollama为自己得安装路径
docker run --gpus all -d -v /opt/1panel/apps/ollama:/root/.ollama -p 11434:11434 --name ollama ollama/ollama
6、运行模型查看是否在GPU运行
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。