deepseek 是由国内顶尖 ai 团队「深度求索」开发的多模态大模型,具备数学推理、代码生成等深度能力,被誉为"ai界的六边形战士"。
DeepSeek 拥有许多标签,其中最具代表性的有以下两个:
低成本(不挑硬件、开源) 高性能(推理能力极强、回答准确)
一、为什么要在本地部署 DeepSeek?使用 DeepSeek 时,许多用户会遇到以下问题:
这是因为 DeepSeek 火爆后访问量激增,再加上来自国外的持续恶意攻击,导致其服务器不稳定。因此,在本地部署 DeepSeek 大模型就显得尤为重要。
此外,对于一些敏感数据,用户不希望将其上传到网络,安全性是首要考虑的因素。本地大模型运行在用户自己的电脑上,完全不受网络影响,数据保存在本地,隐私性更高。同时,本地大模型可以根据用户需求进行定制,使用灵活性极强。
二、如何在本地部署大模型?在本地部署 DeepSeek 只需以下三步:
安装 Ollama。部署 DeepSeek。使用 DeepSeek:这里我们使用 ChatBox 客户端操作 DeepSeek(此步骤非必须)。Ollama、DeepSeek 和 ChatBox 之间的关系如下:
Ollama 是“大管家”,负责将 DeepSeek 安装到用户的电脑上。DeepSeek 是“超级大脑”,在 Ollama 搭建的环境中运行,帮助用户完成各种任务。ChatBox 是“聊天工具”,让用户更方便地与 DeepSeek 交流。安装 OllamaOllama 是一个开源的大型语言模型服务工具,主要帮助用户在本地快速运行大模型。它简化了在 Docker 容器中部署和管理大语言模型(LLM)的过程。
PS:Ollama 就是大模型界的“Docker”。
Ollama 的优点包括:
易于使用:即使是没有经验的用户也能轻松上手,无需开发即可直接与模型进行交互。轻量级:代码简洁,运行时占用资源少,能够在本地高效运行,不需要大量的计算资源。可扩展:支持多种模型架构,并易于添加新模型或更新现有模型,还支持热加载模型文件,无需重新启动即可切换不同的模型,具有较高的灵活性。预构建模型库:包含一系列预先训练好的大型语言模型,可用于各种任务,如文本生成、翻译、问答等,方便在本地运行大型语言模型。Ollama 官网:https://www.php.cn/link/838dc9de386130f83f625a98d1ea561f
下载并安装 Ollama:下载地址:https://www.php.cn/link/838dc9de386130f83f625a98d1ea561f
用户根据自己的操作系统选择对应的安装包,然后安装 Ollama 软件即可。
安装完成后,电脑上会出现一个 Ollama 应用:
点击应用即可运行 Ollama,此时在电脑状态栏可以看到 Ollama 的小图标。要测试 Ollama 是否安装成功,使用命令窗口输入“ollama -v”指令,如果能正常响应并显示 Ollama 版本号,就说明安装成功了,如下图所示:

部署 DeepSeekOllama 支持的大模型列表:https://www.php.cn/link/838dc9de386130f83f625a98d1ea561flibrary
选择 DeepSeek 大模型版本,如下图所示:

DeepSeek 版本介绍
例如,安装并运行 DeepSeek:ollama run deepseek-r1:1.5b

使用 DeepSeek这里我们使用 ChatBox 调用 DeepSeek 进行交互,ChatBox 是一个前端工具,用于方便地对接各种大模型(包括 DeepSeek),并且它支持跨平台,使用直观易用。
ChatBox 官网地址:https://www.php.cn/link/de487db7a08250a136f966ead11da262
点击下载按钮获取 ChatBox 安装包:




安装完 Chatbox 后,需要配置 DeepSeek 到 Chatbox,如下界面所示:



使用 DeepSeek,如下图所示:

三、扩展知识:本地 DeepSeek 集成到 IDEA安装 CodeGPT 插件

配置 OllamaOllama API 默认调用端口号:11434
检查相应的配置,如下所示:


使用 Ollama

四、优缺点分析本地大模型的优缺点分析
优点:
隐私性高:数据都在本地,不用担心泄露问题,对于一些敏感数据处理来说,这是最大的优势。稳定性强:不受网络影响,只要电脑不坏,模型就能稳定运行,不用担心中途卡顿或者断线。可定制性强:可以根据自己的需求进行调整和优化,想让它做什么功能就做什么功能,灵活性很高。缺点:
硬件要求高:大模型对电脑的性能要求不低,如果电脑配置不够,可能会运行很卡,甚至跑不起来。部署复杂:对于小白来说,一开始可能会觉得有点复杂,需要安装各种东西,还得配置参数,不过只要按照教程来,其实也没那么难。维护成本高:如果模型出了问题,可能需要自己去排查和解决,不像在线工具,有问题直接找客服就行。