当前位置:   article > 正文

Ubuntu 环境安装和使用Ollama_3ubuntu ollama phi

3ubuntu ollama phi

参考官方git安装即可  ollama/docs/linux.md at main · ollama/ollama · GitHub

如果打不开,我这里大概列出来。

  • 自动安装

命令如下:

curl -fsSL https://ollama.com/install.sh | sh
  • 手动安装

  • 因为我的主磁盘空间不够,也不想开机就启动ollama,只想玩玩,尝试一下效果,因此选择手动安装
执行下载到指定目录:

sudo curl -L https://ollama.com/download/ollama-linux-amd64 -o /usr/bin/ollama

命令解释:`-o` 是 `curl` 命令中的一个选项,它用于指定下载后的文件的保存位置和文件名。在你提供的命令中,`-o` 后面跟着 `/usr/bin/ollama`,这意味着下载的文件将被保存在 `/usr/bin` 目录下,并以名为 "ollama" 的文件名保存。

sudo chmod +x /usr/bin/ollama

命令解释:赋予ollama可执行的权限

下载完成后,可以看到大小大约为 292m

设置环境变量,修改模型保存的位置

默认模型保存位置如下:

  • macOS: ~/.ollama/models
  • Linux: /usr/share/ollama/.ollama/models
  • Windows: C:\Users\%username%\.ollama\models

但是我的系统盘空间不够,想使用挂载的磁盘,就需要更改位置。按照官网的提示。就可以修改环境变量OLLAMA_MODELS

但是我尝试了一下,没有成功的。而且发现启动的时候,发现目录不是 usr/share/ollama/.ollama

而是在当前用户目录~的.ollama下或许时候因为我使用ubuntu的原因?因此我使用了软连接来解决这个问题。

ln -s /disk2t/mjy/ollama/.ollama /home/ryq/.ollama

表示 /home/ryq/.ollama 的实际地址为  /disk2t/mjy/ollama/.ollama

 ./ollama serve 启动 ollama app。

./ollama run llama3 下载模型并启动模型

如果希望开机启动,需要参考官网配置 并使用systemctl启动:

ollama/docs/linux.md at main · ollama/ollama · GitHub

下载成功后,就可以测试了对于简单的问题,回答得还是比较快的,但是还是一不小心就使用英文回答。

  • 常用命令:

有时候我们需要看一看本地GPU的使用情况,nvidia的可以使用

 watch -n 1 nvidia-smi

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/不正经/article/detail/634851
推荐阅读
相关标签
  

闽ICP备14008679号