当前位置: 首页> 腾云互助> 正文

使用宝塔面板部署一个属于自己的 DeepSeek

各位亲爱的麻瓜朋友们(对,说的就是那个盯着终端界面瑟瑟发抖的你),今天我们要玩一场麻瓜也能轻松通关的魔法仪式——用宝塔面板在本地服务器召唤出那个让代码圈闻风丧胆的”深度摸鱼”神器DeepSeek!想象一下:当别人还在苦哈哈地敲着黑底白字的命令行,把头发薅成地中海时,你已经翘着二郎腿,喝着肥宅快乐水,用鼠标点点点就建好了AI大模型的老巢。这感觉就像别人在徒手造火箭,而你却从四次元口袋掏出了任意门——别怀疑,宝塔面板就是这个次元壁突破器!准备好迎接这场”作弊级”的部署之旅了吗?让我们先把SSH咒语、Docker符箓这些吓人的玩意暂时收进抽屉,毕竟今天我们要用的是连你家喵星人都能看懂的图形化操作。系好安全带,三分钟后,你的服务器就要开始吞吐AI智慧的星光啦!✨

本文将指导你在服务器上使用宝塔面板部署DeepSeek,让你轻松享受AI大模型的快乐。

前提条件

  • 已安装宝塔面板

操作步骤

DeepSeek 可以使用CPU进行推理,但是推荐使用NVIDIA GPU加速,文末将介绍如何使用NVIDIA GPU加速。

  1. 登录宝塔面板,点击左侧菜单栏中的Docker,进入Docker容器管理界面。Docker

  2. 首次使用Docker需要先安装Docker,点击安装。安装Docker

  3. 在Docker-应用商店-AI/大模型分类中找到Ollama,点击安装。安装Ollama

  4. 配置默认即可,点击确定。配置Ollama

  5. 等待安装完成,状态变为运行中。运行中

    如您需要使用NVIDIA GPU加速,请参考文末的使用NVIDIA GPU加速配置完成后再继续。

  6. 在宝塔面板-Docker-容器界面中找到Ollama容器,点击终端。终端

  7. 在弹出shell类型选择bash,点击确认。选择bash

  8. 在终端界面中输入ollama run deepseek-r1:1.5b,回车运行DeepSeek-R1模型。运行DeepSeek-R1

    DeepSeek-R1模型有多个版本,可以根据需要选择不同版本,例如ollama run deepseek-r1:671b,详情如下(模型参数越大,需要配置越高):

    BASH
    1234567891011121314# DeepSeek-R1ollama run deepseek-r1:671b# DeepSeek-R1-Distill-Qwen-1.5Bollama run deepseek-r1:1.5b# DeepSeek-R1-Distill-Qwen-7Bollama run deepseek-r1:7b# DeepSeek-R1-Distill-Llama-8Bollama run deepseek-r1:8b# DeepSeek-R1-Distill-Qwen-14Bollama run deepseek-r1:14b# DeepSeek-R1-Distill-Qwen-32Bollama run deepseek-r1:32b# DeepSeek-R1-Distill-Llama-70Bollama run deepseek-r1:70b
  9. 等待下载并运行,当看到如下提示表示DeepSeek-R1模型运行成功。运行成功

  10. 你可以在界面中输入文本并回车,开启与DeepSeek-R1模型的对话。对话

  11. 你可以在界面中输入/bye并回车,退出DeepSeek-R1模型。

    在终端内对话看起来是不是有点麻瓜?别担心,接下来让我们来安装OpenWebUI,在浏览器中更直观地与DeepSeek-R1模型对话

  12. 在宝塔面板-Docker-容器界面中找到Ollama容器,点击Ollama右侧的管理,进入容器管理界面,获取容器IP,保存备用。容器IP

  13. 在宝塔面板Docker-应用商店-AI/大模型分类中找到OpenWebUI,点击安装。安装OpenWebUI

  14. 按一下说明,配置相关信息,点击确定。

    配置OpenWebUI

    • web端口:访问OpenWebUI的端口,默认为3000,根据需要自行修改

    • ollama地址:填写http://刚刚获取的Ollama容器IP:11434,例如http://172.18.0.2:11434

    • WebUI Secret Key:用于 API 访问的密钥,可以自定义,例如123456其他配置默认即可

  15. 配置完点击确认,等待安装完成,状态变为运行中。

    由于OpenWebUI启动后需要加载相关服务,请在状态变为运行中后等待5-10分钟再访问。

  16. 在浏览器中输入http://服务器IP:3000,例如http://43.160.xxx.xxx:3000,进入OpenWebUI界面。

    请在访问前确保云厂商服务器防火墙已放行3000端口,可以在云厂商控制台中设置。

    OpenWebUI

  17. 点击开始使用,设置管理员相关信息,并点击创建管理员账号。创建管理员账号

  18. 创建完成后会自动进入管理界面,现在你可以在浏览器中更直观地与DeepSeek-R1模型对话了。对话对话

    1. 你可以在左上角切换模型,选择不同模型进行对话,也可以在左侧菜单栏中查看历史对话记录。

    2. 你可以在右上角点击头像,进入管理员面板,在设置-模型中查看当前模型列表,或添加新模型。

使用NVIDIA GPU加速

DeepSeek 可以使用NVIDIA GPU加速,提高推理速度,下面将介绍如何在宝塔面板中使用NVIDIA GPU加速。

前提条件

  • 服务器已安装NVIDIA GPU驱动

操作步骤

  1. 点击左侧导航栏中的终端,进入终端界面。终端

  2. 在终端界面中输入nvidia-smi,回车查看NVIDIA GPU信息。nvidia-smi

    如果提示nvidia-smi: command not found,请先安装NVIDIA GPU驱动。

  3. 安装NVIDIA Container Toolkit,以便于Docker容器访问NVIDIA GPU,安装教程请参考NVIDIA Container Toolkit官方文档

  4. 安装完成后,运行如下命令,配置docker支持使用NVIDIA GPU。

    BASH
    12sudo nvidia-ctk runtime configure --runtime=dockersudo systemctl restart docker
  5. 配置完成后,执行如下命令,验证docker是否支持NVIDIA GPU。

    BASH
    1sudo docker run --rm --runtime=nvidia --gpus all ubuntu nvidia-smi

    如果输出如下信息表示配置成功:nvidia-smi

  6. 在宝塔面板-Docker-应用商店-已安装中找到Ollama,点击文件夹图标进入安装目录。安装目录

  7. 在安装目录中找到docker-compose.yml文件,双击编辑。编辑docker-compose.yml

  8. 在docker-compose.yml文件中找到resources,回车换行,添加如下内容:

    YAML
    123reservations:          devices:            - capabilities: [gpu]

    完整示例如下:

    YAML
    1234567891011121314151617181920212223242526services:  ollama_SJ7G:    image: ollama/ollama:${VERSION}    deploy:      resources:        limits:          cpus: ${CPUS}          memory: ${MEMORY_LIMIT}        reservations:          devices:            - capabilities: [gpu]    restart: unless-stopped    tty: true    ports:      - ${HOST_IP}:${OLLAMA_PORT}:11434    volumes:      - ${APP_PATH}/data:/root/.ollama    labels:      createdBy: "bt_apps"    networks:      - baota_net    runtime: nvidianetworks:  baota_net:    external: true
  9. 保存文件,返回宝塔面板-Docker-应用商店-已安装界面,点击重建。

    重建将导致容器数据丢失,重建后需要重新添加模型。

    重建

  10. 等待重建完成,状态变为运行中,至此即可使用NVIDIA GPU加速大模型运行。

结语

文章作者: 小泽

文章链接: https://r2wind.cn/articles/20250203.html

版权声明: 本博客所有文章除特别声明外,均采用 CC BY-NC-SA 4.0 许可协议。转载请注明来源 归去如风!