当前位置: 首页 > news >正文

(一)DeepSeek大模型安装部署-Ollama安装

大模型deepseek安装部署

(一)、安装ollama

curl -fsSL https://ollama.com/install.sh | sh
sudo systemctl start ollama
sudo systemctl enable ollama
sudo systemctl status ollama

(二)、安装ollama遇到网络问题,请手动下载 ollama-linux-amd64.tgz

curl -L https://ollama.com/download/ollama-linux-amd64.tgz -o ollama-linux-amd64.tgz
修改install.sh部署文件

执行安装命令
sh install.sh
>>> Installing ollama to /usr/local
>>> Downloading Linux amd64 bundle
>>> Creating ollama user...
>>> Adding ollama user to video group...
>>> Adding current user to ollama group...
>>> Creating ollama systemd service...
>>> Enabling and starting ollama service...
Created symlink from /etc/systemd/system/default.target.wants/ollama.service to /etc/systemd/system/ollama.service.
>>> NVIDIA GPU installed.

(三)、安装deepseek大模型

访问ollama网址

https://ollama.com/library

可以支持下载 1.5b 7b 8b 14b 32b 70b 671b模型

安装deepseek-r1:32b模型

ollama run deepseek-r1:32b

 (四)、deepseek大模型资源推荐

模型名称

参数量

激活参数量

上下文窗口

推理资源推荐

DeepSeek-V3

671B

37B

128K

多机分布式部署,节点数量:2个,单节点配置:HCCPNV6 机型

DeepSeek-R1

671B

37B

128k

多机分布式部署,节点数量:2个,单节点配置:HCCPNV6 机型

DeepSeek-R1-Distill-Qwen-1.5B

1.5B

-

-

12C44GB 1卡A10

DeepSeek-R1-Distill-Qwen-7B

7B

-

-

12C44GB 1卡A10

DeepSeek-R1-Distill-Llama-8B

8B

-

128K

12C44GB 1卡A10

DeepSeek-R1-Distill-Qwen-14B

14B

-

-

16C96G 1卡A100

DeepSeek-R1-Distill-Qwen-32B

32B

-

-

32C192G 2卡A100

DeepSeek-R1-Distill-Llama-70B

70B

-

128K

164C948G 8卡A100

http://www.lryc.cn/news/532583.html

相关文章:

  • 【大数据技术】搭建完全分布式高可用大数据集群(ZooKeeper)
  • 前端学习-tab栏切换改造项目(三十一)
  • 高性能 AI 处理器亲和性调度算法实现
  • mq消息丢了,有哪些现象?有什么补救措施
  • Java面试场景题分享
  • 《ISO/SAE 21434-2021 道路汽车--网络安全工程》标准解读
  • 【BUUCTF逆向题】[MRCTF2020]Transform
  • 漏洞挖掘 | 基于mssql数据库的sql注入
  • Java 中 LinkedList 的底层源码
  • 使用服务器部署DeepSeek-R1模型【详细版】
  • k8s,1.修改容器内主机名和/etc/hosts 文件,2.root特权容器,3.pod安全策略(基于名称空间
  • MSPFN 代码复现
  • 除了console.error,还有什么更好的错误处理方式?
  • 力扣.270. 最接近的二叉搜索树值(中序遍历思想)
  • Yageo国巨的RC系列0402封装1%电阻库来了
  • wait/notify/join/设计模式
  • Windows Docker笔记-Docker拉取镜像
  • 七大排序思想
  • intra-mart实现简易登录页面笔记
  • SpringBoot整合RocketMQ
  • 深入理解 YUV Planar 和色度二次采样 —— 视频处理的核心技术
  • 项目顺利交付,几个关键阶段
  • 第七天 开始学习ArkTS基础,理解声明式UI编程思想
  • windows C++ Fiber (协程)
  • 游戏引擎学习第89天
  • 2025新鲜出炉--前端面试题(一)
  • 教程 | i.MX RT1180 ECAT_digital_io DEMO 搭建(一)
  • Pyecharts系列课程04——折线图/面积图(Line)
  • 变压器-000000
  • 凝思60重置密码