新年好!给大家拜年了!最近,我的朋友圈被 DeepSeek-R1 相关的消息“刷屏”了!相信大家也都听说了咱们国产开源大模型——DeepSeek。网上关于如何本地部署 DeepSeek-R1 的教程已经不少了,今天咱们就来点不一样的,结合实际案例,手把手带你玩转DeepSeek-R1,看看它到底有多强大!
本期主要分享下如何使用本地的DeepSeekR1来接入微信做一个微信智能聊天机器人!实现步骤一共分三大部分:本地部署Ollama、接入微信、修改配置。
这是接入的效果!全部本地化!不用接入DeepSeek的api。
整套流程不难,大约花费10分钟左右。我已经将所有复杂的工作封装好了,大家只需要下载后直接安装运行即可!
本地部署DeepSeek-R1
首先需要将 DeepSeek-R1 部署到本地。本地无法安装 DeepSeek-R1 请移步:使用免费 GPU 算力在线部署 DeepSeek-R1 开源模型
这里需要说明的是,目前开放出来的1.5B、7B、8B之类的是Qwen/llama那些借助R1推理强化调出来的“蒸馏”版本,不是真正的R1,你可以简单理解为不是纯血R1,体验效果是Qwen2.5-1.5B或者llama+R1的混合,不全是R1。671B全量版才是真R1,当然咱们一般消费级显卡是带不动671B全量版本的,所以先用蒸馏版本玩玩。
安装Ollama
这里我们用到Ollama这个工具,我已经放到网盘里,你也可以去官网下载
官网
https://ollama.com/
下载windows版本(这里说下,目前由于微信的限制,接入微信,只支持windows平台)
设置安装以及模型路径
打开安装程序进行安装,默认是安装到C盘的。你可以通过命令行输入再加上/DIR=
来指定安装路径。
OllamaSetup.exe /DIR="D:ollama"
如果你已经在C盘安装过Ollama,但是想要修改安装目录。
将这个路径下的Ollama
文件夹移动到你想要安装的目录
C:Users你的用户名AppDataLocalProgramsOllama
比如
E:Ollama
移动的时候可能会遇到下面这个问题,这是因为安装后Ollama
已经默认启动了。
需要在任务管理器中找到Ollama
和ollama.exe
这两个进程,右键结束任务
。需要先关闭Ollama
再关闭ollama.exe
。
然后接下来需要修改环境变量
打开设置-高级系统设置-环境变量-找到Path,双击进入编辑
找到C盘的这个Ollama
路径
修改为你指定的目录
再添加一个新的用户变量OLLAMA_MODELS
,这个是下载的模型储存的位置,如果不设置的话,默认在C盘user文件夹下。
以上都设置完毕后,命令行输入ollama -v
验证下是否成功。
下载模型
https://ollama.com/library/deepseek-r1:1.5b
进入页面可以看到目前关于R1的所有模型
下面是运行模型需要对应的显存。
- deepseek-r1:1.5b——1-2G显存
- deepseek-r1:7b——6-8G显存
- deepseek-r1:8b——8G显存
- deepseek-r1:14b——10-12G显存
- deepseek-r1:32b——24G-48显存
- deepseek-r1:70b——96G-128显存
- deepseek-r1:671b——需要496GB显存以上
根据你电脑的配置选择对应的模型,在命令行中粘贴命令并执行,模型会自动下载。例如我这里执行的是ollama run deepseek-r1:14b
我也在网盘目录中准备了1.5B的模型和14B的模型,网速不太好的同学直接解压到你的模型路径下即可运行,无需再用ollama
下载。
部署BOT接入微信
当你执行到这一步时,距离成功已经越来越接近了!剩下的步骤非常简单!
我们需要用到NGCBot
这个项目来将本地的DeepSeek
接入微信
项目地址:
https://github.com/ngc660sec/NGCBot
原项目支持接入例如讯飞星火、kimi、gpt、deepseek等平台的api,但是对于本地的DeepSeek接入并不支持,我在原项目的基础上进行了以下修改,并开放源代码!欢迎大家一起维护!
- 支持本地deepseek
- 屏蔽think
- 支持上下文对话
将网盘中的NGCBot.zip
进行解压
解压后双击启动器即可打开项目
项目会自动打开你的微信,此时会提示:只支持64位微信
或者是当前微信版本不支持
这是因为我们电脑上安装的微信版本太新了,NGCBot
需要安装特定版本。
安装我准备好的微信版本,然后重新打开NGCBot
项目,扫码登录微信,搞定!
当启动器上显示以下内容,证明已经服务已经初始化成功。
这个时候我们对登录的微信发送一条消息进行测试。
搞定!
修改BOT配置
呐,机器人搞定了!别急着高兴!你还需要了解下NGCBot
的配置设置!
打开NGCBot
项目根目录的Config/Config.yaml
文件
这里只介绍两个必要的设置,其他的设置可以查看官方的详细介绍。
第一个是修改超级管理员配置
,这里填入你另一个微信,也就是管理员微信的id。
id可以用其他微信号发送给机器人这个微信号任意一条消息,拷贝获取。
第二个地方是修改localDeepSeek
下的deepSeekmodel
中的模型名称。
你用ollama安装的是哪个模型,这里就填入哪个模型。
完成以上步骤,那么恭喜你,拥有了一个本地版本的DeepSeek-R1微信聊天机器人。
一些问题
- 问:MAC能接入吗?
- 答:不能,
NGCBot
项目只支持windows,不过可以部署Ollama。 - 问:需要一直挂着微信?不能关机吗?
- 答:是的,相当于登录了windows版本的微信,手机可以正常聊天,但是关机后肯定无法正常运行。如果要持续运行,建议用云服务器进行部署。
- 问:这个跟之前的
chatgpt-on-wechat
有什么不一样? - 答:协议不一样,前段时间微信封了
chatgpt-on-wechat
使用的接口,所以目前这个基于Hook的NGCBot
项目还是十分稳定的。
整合包获取
写到最后
年前有接到私信说chatgpt-on-wechat
这个项目接口被微信官方屏蔽了,本来打算结合COZE
分享下NGCBot
这个项目,哈哈哈正好DeepSeek-R1
横空出世!于是....COZE先往后放放吧!祝大家新年快乐,我吃饺子去了.....