新年好!给大家拜年了!最近,我的朋友圈被DeepSeek相关的消息“刷屏”了!相信大家也都听说了咱们国产开源大模型——DeepSeek。网上关于如何本地部署DeepSeek的教程已经不少了,今天咱们就来点不一样的,结合实际案例,手把手带你玩转DeepSeek-R1,看看它到底有多强大!

前排提示,文末有大模型AGI-CSDN独家资料包哦!

本期主要分享下如何使用本地的DeepSeekR1来接入微信做一个微信智能聊天机器人!实现步骤一共分三大部分:本地部署Ollama、接入微信、修改配置。

这是接入的效果!全部本地化!不用接入DeepSeek的api。

整套流程不难,大约花费10分钟左右。我已经将所有复杂的工作封装好了,大家只需要下载后直接安装运行即可!

本地部署DeepSeek-R1

首先需要将DeepSeekR1部署到本地。

这里需要说明的是,目前开放出来的1.5B、7B、8B之类的是Qwen/llama那些借助R1推理强化调出来的“蒸馏”版本,不是真正的R1,你可以简单理解为不是纯血R1,体验效果是Qwen2.5-1.5B或者llama+R1的混合,不全是R1。671B全量版才是真R1,当然咱们一般消费级显卡是带不动671B全量版本的,所以先用蒸馏版本玩玩。

安装Ollama

这里我们用到Ollama这个工具,我已经放到网盘里,你也可以去官网下载

官网

https://ollama.com/

下载windows版本(这里说下,目前由于微信的限制,接入微信,只支持windows平台)

设置安装以及模型路径

打开安装程序进行安装,默认是安装到C盘的。你可以通过命令行输入再加上/DIR=来指定安装路径。

OllamaSetup.exe /DIR="D:\ollama"   

如果你已经在C盘安装过Ollama,但是想要修改安装目录。

将这个路径下的Ollama文件夹移动到你想要安装的目录

C:\Users\你的用户名\AppData\Local\Programs\Ollama   

比如

E:\Ollama   

移动的时候可能会遇到下面这个问题,这是因为安装后Ollama已经默认启动了。

需要在任务管理器中找到Ollamaollama.exe这两个进程,右键结束任务。需要先关闭Ollama再关闭ollama.exe

然后接下来需要修改环境变量

打开设置-高级系统设置-环境变量-找到Path,双击进入编辑

找到C盘的这个Ollama路径

修改为你指定的目录

再添加一个新的用户变量OLLAMA_MODELS,这个是下载的模型储存的位置,如果不设置的话,默认在C盘user文件夹下。

以上都设置完毕后,命令行输入ollama -v验证下是否成功。

下载模型

https://ollama.com/library/deepseek-r1:1.5b

进入页面可以看到目前关于R1的所有模型

下面是运行模型需要对应的显存。

  • deepseek-r1:1.5b——1-2G显存

  • deepseek-r1:7b——6-8G显存

  • deepseek-r1:8b——8G显存

  • deepseek-r1:14b——10-12G显存

  • deepseek-r1:32b——24G-48显存

  • deepseek-r1:70b——96G-128显存

  • deepseek-r1:671b——需要496GB显存以上

根据你电脑的配置选择对应的模型,在命令行中粘贴命令并执行,模型会自动下载。例如我这里执行的是ollama run deepseek-r1:14b

我也在网盘目录中准备了1.5B的模型和14B的模型,网速不太好的同学直接解压到你的模型路径下即可运行,无需再用ollama下载。

部署BOT接入微信

当你执行到这一步时,距离成功已经越来越接近了!剩下的步骤非常简单!

我们需要用到NGCBot这个项目来将本地的DeepSeek接入微信

项目地址:

https://github.com/ngc660sec/NGCBot

原项目支持接入例如讯飞星火、kimi、gpt、deepseek等平台的api,但是对于本地的DeepSeek接入并不支持,我在原项目的基础上进行了以下修改,并开放源代码!欢迎大家一起维护!

  • 支持本地deepseek

  • 屏蔽think

  • 支持上下文对话

将网盘中的NGCBot.zip进行解压

解压后双击启动器即可打开项目

项目会自动打开你的微信,此时会提示:只支持64位微信或者是当前微信版本不支持

这是因为我们电脑上安装的微信版本太新了,NGCBot需要安装特定版本。

安装我准备好的微信版本,然后重新打开NGCBot项目,扫码登录微信,搞定!

当启动器上显示以下内容,证明已经服务已经初始化成功。

这个时候我们对登录的微信发送一条消息进行测试。

搞定!

修改BOT配置

呐,机器人搞定了!别急着高兴!你还需要了解下NGCBot的配置设置!

打开NGCBot项目根目录的Config/Config.yaml文件

这里只介绍两个必要的设置,其他的设置可以查看官方的详细介绍。

第一个是修改超级管理员配置,这里填入你另一个微信,也就是管理员微信的id。

id可以用其他微信号发送给机器人这个微信号任意一条消息,拷贝获取。

第二个地方是修改localDeepSeek下的deepSeekmodel中的模型名称。

你用ollama安装的是哪个模型,这里就填入哪个模型。

完成以上步骤,那么恭喜你,拥有了一个本地版本的DeepSeek-R1微信聊天机器人。

一些问题

  • 问:MAC能接入吗?

  • 答:不能,NGCBot项目只支持windows,不过可以部署Ollama。

  • 问:需要一直挂着微信?不能关机吗?

  • 答:是的,相当于登录了windows版本的微信,手机可以正常聊天,但是关机后肯定无法正常运行。如果要持续运行,建议用云服务器进行部署。

  • 问:这个跟之前的chatgpt-on-wechat有什么不一样?

  • 答:协议不一样,前段时间微信封了chatgpt-on-wechat使用的接口,所以目前这个基于Hook的NGCBot项目还是十分稳定的。

如何学习AI大模型 ?

“最先掌握AI的人,将会比较晚掌握AI的人有竞争优势”。

这句话,放在计算机、互联网、移动互联网的开局时期,都是一样的道理。

我在一线互联网企业工作十余年里,指导过不少同行后辈。帮助很多人得到了学习和成长。

读者福利:如果大家对大模型感兴趣,这套大模型学习资料一定对你有用

对于0基础小白入门:

如果你是零基础小白,想快速入门大模型是可以考虑的。

一方面是学习时间相对较短,学习内容更全面更集中。
二方面是可以根据这些资料规划好学习计划和方向。

包括:大模型学习线路汇总、学习阶段,大模型实战案例,大模型学习视频,人工智能、机器学习、大模型书籍PDF。带你从零基础系统性的学好大模型!

😝有需要的小伙伴,可以保存图片到wx扫描二v码免费领取【保证100%免费】🆓
在这里插入图片描述

👉AI大模型学习路线汇总👈

大模型学习路线图,整体分为7个大的阶段:(全套教程文末领取哈)

第一阶段: 从大模型系统设计入手,讲解大模型的主要方法;

第二阶段: 在通过大模型提示词工程从Prompts角度入手更好发挥模型的作用;

第三阶段: 大模型平台应用开发借助阿里云PAI平台构建电商领域虚拟试衣系统;

第四阶段: 大模型知识库应用开发以LangChain框架为例,构建物流行业咨询智能问答系统;

第五阶段: 大模型微调开发借助以大健康、新零售、新媒体领域构建适合当前领域大模型;

第六阶段: 以SD多模态大模型为主,搭建了文生图小程序案例;

第七阶段: 以大模型平台应用与开发为主,通过星火大模型,文心大模型等成熟大模型构建大模型行业应用。

👉大模型实战案例👈

光学理论是没用的,要学会跟着一起做,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。

在这里插入图片描述

👉大模型视频和PDF合集👈

观看零基础学习书籍和视频,看书籍和视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
在这里插入图片描述
在这里插入图片描述

👉学会后的收获:👈

• 基于大模型全栈工程实现(前端、后端、产品经理、设计、数据分析等),通过这门课可获得不同能力;

• 能够利用大模型解决相关实际项目需求: 大数据时代,越来越多的企业和机构需要处理海量数据,利用大模型技术可以更好地处理这些数据,提高数据分析和决策的准确性。因此,掌握大模型应用开发技能,可以让程序员更好地应对实际项目需求;

• 基于大模型和企业数据AI应用开发,实现大模型理论、掌握GPU算力、硬件、LangChain开发框架和项目实战技能, 学会Fine-tuning垂直训练大模型(数据准备、数据蒸馏、大模型部署)一站式掌握;

• 能够完成时下热门大模型垂直领域模型训练能力,提高程序员的编码能力: 大模型应用开发需要掌握机器学习算法、深度学习框架等技术,这些技术的掌握可以提高程序员的编码能力和分析能力,让程序员更加熟练地编写高质量的代码。

👉获取方式:

😝有需要的小伙伴,可以保存图片到wx扫描二v码免费领取【保证100%免费】🆓
在这里插入图片描述

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐