当前位置: 首页 > news >正文

【GPT入门】第52课 openwebui安装与使用

【GPT入门】第52课 openwebui安装与使用

  • 1. openwebui是什么
  • 2.openwebui如何使用
  • 3.注意事项

1. openwebui是什么

官网: https://docs.openwebui.com/
官方介绍:

Open WebUI is an extensible, feature-rich, and user-friendly self-hosted AI platform designed to operate entirely offline. It supports various LLM runners like Ollama and OpenAI-compatible APIs, with built-in inference engine for RAG, making it a powerful AI deployment solution.
  • 官网介绍翻译

Open WebUI 是一个可扩展、功能丰富且用户友好的自托管人工智能平台,旨在完全离线运行。它支持多种大语言模型运行器,如 Ollama 和兼容 OpenAI 的 API,并内置了用于检索增强生成(RAG)的推理引擎,是一款功能强大的人工智能部署解决方案。

2.openwebui如何使用

  • 准备环境
    默认安装目录:
    conda create -n open-webui python==3.11
    指定数据盘目录,避免占用巨大的系统盘空间,导致磁盘空间不足:
    conda create --prefix /root/autodl-tmp/conda_envs/open-webui python=3.11

  • 安装
    source /etc/network_turbo (autodl服务器用于学术加速)
    pip install open-webui

  • 启动服务
    open-webui serve

  • auto中增加端口转发,端口是8080, 如果是本地电脑,不需要端口转发
    在这里插入图片描述

  • 打开webui
    http://localhost:8080/
    在这里插入图片描述

3.注意事项

如果是微调的llm,微调的llm可能与openwebui的不一致,并且就算部署时指定模板,openwebui会每次与模型交互式,强势刷新对话模板
用的对话模板:不是模型自带的

  • openwebui 查微调后的模型,回复会乱七八糟
    在这里插入图片描述
  • 问原始模型 qwen3.0b
    在这里插入图片描述
  • qwen3.0b下载方法
    在这里插入图片描述
http://www.dtcms.com/a/343005.html

相关文章:

  • Zynq中级开发七项必修课-第三课:S_AXI_GP0 主动访问 PS 地址空间
  • 通信算法之317:基于Xilinx FPGA平台的符号同步算法(接收序列与本地序列互相关-不共轭乘)
  • ODDR实现多bit单边沿采样数据转为多bit双沿采样数据
  • 前端-Vue笔记(核心语法)
  • linux内核 - 内存分配机制介绍
  • MySQL 8.4.6 LTS 安装教程 windows
  • 如何在mac玩windows游戏?3个工具推荐,不用换电脑!
  • MiniGPT-4
  • 在Excel和WPS表格中合并多个单元格这样最快
  • 第14章 结构和其他数据形式
  • 数据分类分级的关键难点以及应对之道
  • Go1.25的源码分析-src/runtime/runtime1.go(GMP)g
  • U盘安装 CentOS Stream 10 实战复盘:三大常见问题与解决方法
  • 通义千问VL-Plus:当AI“看懂”屏幕,软件测试的OCR时代正式终结!
  • Java 项目中 MySQL 数据向 Redis 迁移的技术实践与深度剖析
  • JVM 性能监控工具全解析:从命令行到可视化全方位指南
  • 图像形态学:膨胀、腐蚀和边缘检测与绘制
  • Java后端面试场景题大全:2025年高频考点深度解析
  • 大模型部署
  • 造成云手机闪退的原因有哪些?
  • 使用VBA宏批量修改Word中表格题注格式
  • HYPE分布式水文模型建模方法与案例分析实践技术应用
  • AI 时代的数字伦理选择题
  • Mac 电脑 IDEA 执行 Maven 出现 No route to host 问题
  • Django REST框架核心:GenericAPIView详解
  • 【力扣 买股票的最佳时机II Java/Python】
  • rt-thread使用sfud挂载spi flash, 并使用spi驱动st7789 lcd的trace分析(使用spi dma)
  • 生信分析自学攻略 | R语言函数与参数介绍
  • kylin v10只允许kylin用户登录解决办法
  • 雅菲奥朗SRE知识墙分享(四):『AI已开始重塑劳动力市场,美国年轻科技从业者首当其冲』