当前位置: 首页 > news >正文

Linux 离线部署Ollama和DeepSeek-r1模型

都在复制粘贴联网状态下linux部署deepseek,离线状态下需要下载Ollama和DeepSeek模型,然后将下载包上传到linux中。

1、下载Ollama

https://github.com/ollama/ollama/releases

注意:如果CentOS7建议安装V0.5.11版本,V0.5.13需要GNU libc 2.27版本,避免C库版本要求过高!!!

ldd --version

下载地址:

ollama-linux-amd64.tgz

2、下载DeepSeek-r1模型

在有网的服务器上下载ollama run deepseek-r1:1.5b或其他模型,然后将模型文件打包导出来,复制到离线linux中。

默认模型目录为

/usr/share/ollama/.ollama/models

将models目录打包复制出来即可。

3、相关命令

默认安装目录:
/usr/share/ollama/.ollama/models

配置文件路径:
/etc/systemd/system/ollama.service

创建新的模型存储目录:以当前用户创建目录
sudo mkdir -p /data/ollama/models

更改目录权限:注意权限加给普通用户
sudo chown -R root:root /data/ollama/models
sudo chmod -R 775 /data/ollama/models

解压安装:
sudo tar -C /usr -xzf ollama-linux-amd64.tgz

指定新的模型路径:
Environment="OLLAMA_MODELS=/data/ollama/models"

配置信息:
[Unit]
Description=Ollama Service
After=network-online.target
[Service]
ExecStart=/usr/local/bin/ollama serve
User=root
Group=root
Restart=always
RestartSec=3
Environment="PATH=/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin"
Environment="OLLAMA_MODELS=/data/ollama/models"
[Install]
WantedBy=default.target</font>


查看端口:不是localhost11434或者127.0.0.1就行
 sudo netstat -tul


启动服务:
sudo systemctl restart ollama.service

查看服务状态:
sudo systemctl status ollama

查看版本:
ollama --version

关闭服务:
sudo systemctl stop ollama或sudo systemctl disable ollama.service

查看拉取的镜像:
ollama list

启动模型:
ollama run deepseek-r1:1.5b

测试问题:
who are you?
How to solve slow SQL?


http://www.mrgr.cn/news/93889.html

相关文章:

  • 零基础掌握Linux SCP命令:5分钟实现高效文件传输,小白必看!
  • IO学习---->线程
  • QT系列教程(20) Qt 项目视图便捷类
  • 『PostgreSQL』PGSQL备份与还原实操指南
  • 【测试框架篇】单元测试框架pytest(4):assert断言详解
  • 【Linux内核系列】:深入理解缓冲区
  • 《平面几何强化训练题集》第2章5到9题
  • [GHCTF 2025]SQL??? 【sqlite注入】
  • uniapp+Vue3 开发小程序的下载文件功能
  • 选择排序算法OpenMP并行优化
  • 从新手到专家:嵌入式代码空间优化技巧
  • 【组件安装】Rocky 8.10 安装Local License Server 25.03.0 for Linux
  • C/C++中使用CopyFile、CopyFileEx原理、用法、区别及分别在哪些场景使用
  • 从零构建逻辑回归: sklearn 与自定义实现对比
  • [数据结构]并查集--C++版本的实现代码
  • sparkTTS window 安装
  • 数据集构建与训练前准备
  • OpenHarmony5.0分布式系统源码实现分析—软总线
  • C++蓝桥杯皮亚诺曲线距离求解
  • Cline使用MCP-TypeScript版本