一、DeepSeek R1本地部署

1、下载ollama下载地址



本人是Mac电脑,所以选第一项,下面都是以Mac环境介绍部署,下载好把ollama运行起来即可启动Ollama服务。

Ollama默认监听本地11434端口,您可以通过浏览器访问

http://localhost:11434来管理模型。

2、下载并运行指定参数的R1版本

目前有以下参数供选择

1.5b/7b/8b/14b/32b/70b/671b(“b” 表示 “Billion”,即 “十亿”)

请根据自己电脑的配置情况合理选择合适参数,以下是参考配置

模型参数 CPU要求 内存要求 硬盘要求 显卡要求
1.5B 最低4核(推荐多核处理器) 8GB+ 3GB+存储空间(模型文件约1.5-2GB) 非必需(纯CPU推理),若GPU加速可选4GB+显存(如GTX 1650)
7B 8核以上(推荐现代多核CPU) 16GB+ 8GB+(模型文件约4-5GB) 推荐8GB+显存(如RTX 3070/4060)
8B 与7B相近,略高10-20% 与7B相近,略高10-20% 与7B相近,略高10-20% 与7B相近,略高10-20%
14B 12核以上 32GB+ 15GB+ 16GB+显存(如RTX 4090或A5000)
32B 16核以上(如AMD Ryzen 9或Intel i9) 64GB+ 30GB+ 24GB+显存(如A100 40GB或双卡RTX 3090)
70B 32核以上(服务器级CPU) 128GB+ 70GB+ 多卡并行(如2xA100 80GB或4xRTX 4090)
671B 64核以上(服务器集群) 512GB+ 300GB+ 多节点分布式训练(如8xA100/H100)
举个栗子:苹果截止2025年2月最强大的Mac Pro主机的最高配(售价近10W),配置如下:

Apple M2 Ultra (24 核中央处理器、76 核图形处理器和 32 核神经网络引擎)

192GB 统一内存

8TB 固态硬盘

这个主机上建议运行的参数如下:

DeepSeek-R1-8B:可以轻松运行,性能表现良好。

DeepSeek-R1-32B:可以运行,但需要监控内存使用情况,避免过载。

DeepSeek-R1-70B:理论上可以运行,但建议谨慎尝试,因为可能会遇到内存和 CPU 性能瓶颈。

也就是说32B可以胜任,70B就勉强凑活了,一般的普通电脑配置的,可以部署1.5b练练手,自信点的配置可以尝试7b或者8b。
  • 确定好要部署的参数(用1.5b举例),命令行执行下面的命令
ollama run deepseek-r1:1.5b

// 其他参数改数字即可,例如32B则 ollama run deepseek-r1:32b

安装好其实已经可以在这个终端里进行对话了。

Ollama is running

3、使用Cherry Studio客户端集成本地部署的deepseek-r1

下载Cherry Studio下载地址

下载安装好以后,左下角设置里进行配置api地址:http://localhost:11434

配置好以后就可以聊天了,注意箭头指向模型选择你下载的[deepseek-r1:参数量级 | Ollama]

体验过官网满血版deepseek r1的小伙伴应该是不能忍受1.5b量级的回复

本地部署的优点是反应速度是相当快,且不会出现网络繁忙的提示了,这是本地部署的优势,另外一个优势是数据更安全,因为没有放到别人家的服务器上。

想要更好效果的可以尝试7b或者8b的试试,或者接着看下面的满血版R1的搭建。

// 拉取 deepseek-r1:7b 模型
ollama pull deepseek-r1:7b
Tip1:如果是局域网其他电脑想访问这台主机的deepseek R1的API,本地部署的主机可以如下操作:
export OLLAMA_HOST=0.0.0.0:11434
ollama serve

然后其他电脑下载安装Cherry Studio,并在设置里的API配置为你的ip地址:11434即可

Tip2:如果ollama输入任何命令出现如下错误
Error: something went wrong, please see the ollama server logs for details

主要是网络问题导致的,尤其是代理环境变量(终端FQ)有两种解决办法:

方法一:

# 检查http_proxy变量是否存在
echo $http_proxy # 检查https_proxy变量是否存在
echo $https_proxy

如果输出内容了,请移除

# 移除HTTP代理环境变量
unset http_proxy # 移除HTTPS代理环境变量
unset https_proxy
# 再检查http_proxy变量是否存在
echo $http_proxy # 再检查https_proxy变量是否存在
echo $https_proxy

输出为空,再试试ollama命令应该就可以了。

如果你希望永久移除这些代理环境变量,可以编辑你的终端配置文件,例如编辑你的.zshrc文件(这是zsh的配置文件),并删除或注释掉其中设置代理变量的行。例如:

// 注释掉类似下面的内容
export http_proxy="http://your-proxy-server:port"
export https_proxy="http://your-proxy-server:port" // 保存文件后再执行
source ~/.zshrc

然后稳妥起见再重启下终端,再试试ollama命令应该就可以了。

方法二:如果不想修改自己的代理环境变量,可以直接通过API操作命令代替ollama命令

官方api操作手册如下:https://github.com/ollama/ollama/blob/main/docs/api.md

举例来说:

// 终端直接运行下面命令来pull模型
curl http://你的电脑ip地址:11434/api/pull -d '{"model": "deepseek-r1:1.5b"}' // 获取正在运行的模型
curl http://你的电脑ip地址:11434/api/ps

也就是说通过api也能操作ollama

二、满血版DeepSeek R1搭建

学会了上面的本地部署,满血版搭建就更简单了,步骤如下:

1、下载Cherry Studio,已下载请忽略 下载地址

2、登录/注册「硅基流动」,新用户会赠送 2000 万 Token 额度。 注册地址

3、点击左侧列表里的API密钥,右上角创建一个密钥,并复制

4、打开Cherry Studio,按照下图顺序填入API密钥

注意先填入API密钥,再点一下旁边的检查按钮,然后选择要检查的模型,提示连接成功就可以了

5、进入Cherry Studio聊天页面,选择DeepSeek R1模型

6、开始聊天

DeepSeek R1本地与线上满血版部署:超详细手把手指南的更多相关文章

  1. 如何解析本地和线上XML文件获取相应的内容

    一.使用Dom解析本地XML 1.本地XML文件为:test.xml <?xml version="1.0" encoding="UTF-8"?> ...

  2. vue本地和线上环境(域名)配置

    vue本身为运行脚手架项目自家搭载了一个nodejs后台环境,本地可通过proxyTable来处理跨域问题,但是上线(或生产环境)之后改域名真是一件麻烦的事情,所以进行一些配置. config/ind ...

  3. Filezilla Xshell SecureFX Win10等无法拖放文件(本地或线上)解决办法

    一.win10系统Filezilla Xshell SecureFX等无法拖放文件到线上服务器解决办法: 1.按窗口键+R,打开“运行”对话框:输入regedit回车 2.在注册表编辑器地址栏输入以下 ...

  4. tp5.1 本地正常, 线上route.php不起作用的问题

    由于本项目 的.htaccess文件是放在根目录的, 上传没有覆盖,重新编辑 <IfModule mod_rewrite.c> Options +FollowSymlinks -Multi ...

  5. scp 从本地往线上传文件

    scp /home/wwwroot/default/tf_ment.sql root@IP:/home/wwwroot/default/

  6. yii2上传七牛图片(超详细)

    前期准备 1.在七牛注册账号https://portal.qiniu.com/signup/choice 2.创建空间https://portal.qiniu.com/bucket(记住存储空间名称和 ...

  7. Springboot拦截器线上代码失效

    今天想测试下线上代码,能否正常的执行未登录的拦截.所以把拦截器的代码给开放出来,但是没想到线上代码addInerceptors(InterceptorRegistry registry) 这个方法一直 ...

  8. 线上服务的FGC问题排查,看这篇就够了!

    线上服务的GC问题,是Java程序非常典型的一类问题,非常考验工程师排查问题的能力.同时,几乎是面试必考题,但是能真正答好此题的人并不多,要么原理没吃透,要么缺乏实战经验. 过去半年时间里,我们的广告 ...

  9. git线上操作

    选择线上仓库 """ 1.注册码云账号并登录:https://gitee.com/ 2.创建仓库(课堂截图) 3.本地与服务器仓库建立连接 ""&qu ...

  10. 线上服务的FGC问题排查

    转载:https://blog.csdn.net/g6U8W7p06dCO99fQ3/article/details/106088467 线上服务的GC问题,是Java程序非常典型的一类问题,非常考验 ...

随机推荐

  1. 指针, C语言的精髓

    指针, C语言的精髓 莫队先咕几天, 容我先讲完树剖 (因为后面树上的东西好多都要用树剖求 LCA). 什么是指针 保存变量地址的变量叫做指针. 这是大概的定义, 但是Defad认为这个定义不太好理解 ...

  2. VTK 显示3D模型的网格线(线框/wireframe)

    在VTK9.1.0在Windows10+VS2019+Qt 5.15.2环境下编译安装的Qt例子中,想显示球体表面的网格线(线框/wireframe),设置actor的EdgeVisibilityOn ...

  3. Redis应用—5.Redis相关解决方案

    大纲 1.数据库与缓存一致性方案 2.热key探测系统处理热key问题 3.缓存大value监控和切分处理方案 4.Redis内存不足强制回收监控告警方案 5.Redis集群缓存雪崩自动探测 + 限流 ...

  4. Sublime Text 4143 激活码

    1 .Windows激活方法 安装地址:Download - Sublime Text 使用浏览器打开hexed.it(https://hexed.it/) 点击"打开文件",选择 ...

  5. 一套分布式IM即时通讯系统的技术选型和架构设计

    本文由冰河分享,作者博客 binghe.gitcode.host,原题"这套分布式IM即时通讯系统如何写到简历上?我给你整理好了!",本文有修订和改动. 1.引言 分布式IM即时通 ...

  6. 实时音视频入门学习:开源工程WebRTC的技术原理和使用浅析

    本文由ELab技术团队分享,原题"浅谈WebRTC技术原理与应用",有修订和改动. 1.基本介绍 WebRTC(全称 Web Real-Time Communication),即网 ...

  7. 为什么 .NET8线程池 容易引发线程饥饿

    一:背景 1. 讲故事 最近时间相对比较宽裕,多写点文章来充实社区吧,这篇文章主要还是来自于最近遇到的几例线程饥饿(Task.Result)引发的一系列的反思和总结,我觉得.NET8容易引发饥饿的原因 ...

  8. Selenium Python 问题汇总

    1. 在自动化打开浏览器后会长时间加载,此时使用如下命令解决: driver.set_page_load_timeout(20) # 设置浏览器超时加载时间 driver.set_script_tim ...

  9. Mac terminal proxy

    cat >> ~/.bash_profile << EOF function proxy_on() { export http_proxy=http://127.0.0.1:7 ...

  10. React基础笔记1

    官网:https://react.docschina.org/ 一.认知React 概述 React 起源于 Facebook(脸书) 的内部项目,它是一个用于构建用户界面的 javascript 库 ...