当前位置: 首页 > wzjs >正文

小微企业网站建设宁波网站制作报价

小微企业网站建设,宁波网站制作报价,成都微信网站建设公司,开网站建设公司怎么样私有化部署DeepSeek并SpringBoot集成使用(附UI界面使用教程-支持语音、图片) windows部署ollama Ollama 是一个开源框架,专为在本地机器上便捷部署和运行大型语言模型(LLM)而设计 下载ollama 下载地址(…

私有化部署DeepSeek并SpringBoot集成使用(附UI界面使用教程-支持语音、图片)

windows部署ollama

Ollama 是一个开源框架,专为在本地机器上便捷部署和运行大型语言模型(LLM)而设计

下载ollama

下载地址(mac、linux、windows):https://ollama.com/download
github 的Releases地址:https://github.com/ollama/ollama/releases
下载可能限速,我选择使用阿里云服务器下载然后再ftp下载到本地

 wget https://github.com/ollama/ollama/releases/download/v0.5.8-rc10/OllamaSetup.exe

我下载的版本为v0.5.8-rc10

ps:这里提供一个github加速网站
https://github.akams.cn/
在这里插入图片描述

安装ollama

下载完毕后,直接点击安装(默认安装C盘,确保你的C盘有10G以上的空间)
打开cmd 输入 ollama ,如果有usage提示,那么说明安装成功
注意,关闭ollama进程,然后再执行下面的步骤,因为安装后默认程序已经打开了
在这里插入图片描述
如何验证是否安装成功?
ctrl+r 进入cmd
输入

ollama

如果出现下面的界面说明安装成功
在这里插入图片描述

配置ollama环境变量

这一步是为了确保你以后下载的模型都放在别的地址(因为默认安装到C盘,这里可以将模型下载到别的盘)
打开【系统环境变量】,新建一个系统环境变量{OLLAMA_MODELS}值为{D:ollamamodels}
在这里插入图片描述

配置ollama端口(可选)

默认地址为http://localhost:11434
配置端口 新建一个系统环境变量{OLLAMA_HOST}值为{0.0.0.0:8080}
为什么要改?因为后面用webui里面用的8080,所以我把这里的端口改了
在这里插入图片描述

配置ollama跨域(可选)

配置跨域 新建一个系统环境变量{OLLAMA_ORIGINS}值为{*}
在这里插入图片描述

选择并下载DeepSeek版本

https://ollama.com/library/deepseek-r1
根据电脑性能选择不同的大小,对应不同的命令。

打开cmd输入命令

这里我选择使用1.5b,所以我的命令为

ollama run deepseek-r1:1.5b

然后等待pull就行了
在这里插入图片描述
安装成功后如下图所示
在这里插入图片描述

linux部署ollama

直接上命令行

curl -fsSL https://ollama.com/install.sh | sh
sudo systemctl enable ollama  
sudo systemctl status ollama
sudo systemctl start ollama
ollama run deepseek-r1:1.5b

接口形式调用DeepSeek-(SpringBoot集成)

对接api文档

ollama已经开放了非常全的api接口了,对于全面私人化定制都是可以支持,详情参照官方文档,我这里只是弄了一个简单的示例。

ollama api文档

https://github.com/ollama/ollama/blob/main/docs/api.md

新建工具类方法
package com.example.springtestdemo.ai.util;import com.alibaba.fastjson.JSONObject;
import lombok.extern.slf4j.Slf4j;/*** @date 2025-01-15 10:58:46*/
@Slf4j
public class OllamaUtil {private static String DOMAIN = "http://localhost:11434/api/generate";public static String chatDeepSeek(String model, String question) {String url = DOMAIN;JSONObject body = new JSONObject();body.put("model", model);body.put("prompt", question);// 关闭流式返回,全部生成完再返回数据body.put("stream", false);String result = CommonUtil.postJson(url, body.toJSONString());log.info("【ollama-请求】 结果 {}", result);try {JSONObject resJson = JSONObject.parseObject(result);String response = resJson.getString("response");log.info("【ollama-请求】 结果 {}", response);return response;} catch (Exception e) {log.error("【ollama-请求】异常", e);}return "ok";}
}
新建控制器
package com.example.springtestdemo.ai.controller;import com.example.springtestdemo.ai.QueryParam;
import com.example.springtestdemo.ai.util.OllamaUtil;
import org.springframework.web.bind.annotation.PostMapping;
import org.springframework.web.bind.annotation.RestController;/*** @date 2025-02-07 14:44:56*/
@RestController
public class AiController {@PostMapping("/deepSeek")public String deepSeek(QueryParam query) {String res = OllamaUtil.chatDeepSeek("deepseek-r1:1.5b", query.getQuestion());return res;}
}

在这里插入图片描述

安装 UI使用界面

1、 直接使用eage插件使用
https://www.crxsoso.com/webstore/detail/jfgfiigpkhlkbnfnbobbkinehhfdhndo
支持图片上传什么的都有
在这里插入图片描述

http://www.dtcms.com/wzjs/835284.html

相关文章:

  • 网站培训班wordpress产品内页怎么排
  • 北京市工商注册登记网seo专家招聘
  • 禅城区企业网站建设百度推广电话
  • 湖南新备案的网站深圳网站建设网牛天下
  • 做网站看好金石网络空间设计英文
  • 河东做网站赣州兼职网站建设
  • 广州市网站建设制作设计平台建站系统源码下载
  • 网站开发前端制作上海网站建设选缘魁 -企查
  • 专业的app网站开发外贸网站建设平台优化营销推广
  • 家具展示型网站做网站多长时间
  • 西安查派网站建设泰安网站建设培训
  • 达州科创网站建设公司淘宝网站建设策划案
  • 新媒体管家wordpressseo指什么
  • 网站 html空间搭建wordpress
  • 网站建设用英文怎么说网站建设的实验心得体会
  • 临沂中小企业网站制作百度seo关键词优化推荐
  • 民宿行业网站建设方案安徽省建设厅网站
  • 如何找做网站的公司北京想象力网站建设公司
  • 建设银行官方网站企业网银新手做免费网站
  • 广西建设科技在线网站甘肃建设厅职称查询官方网站
  • 网站建设哪种语言好国家工商网官网登录入口
  • 网站的优化排名怎么做可以做软件的网站有哪些内容
  • 有哪些做平面设计好素材网站有哪些用服务器ip做网站
  • 建筑公司网站网站wordpress 匿名
  • 简述电子商务网站建设的主要步骤模板网站建设乐云seo效果好
  • 山东省建设资格中心网站惠州网站外包
  • 网站建设价格差异好大装修类网站模板下载
  • 莘县网站建设公司站长工具精华
  • 济南 建网站宿迁城乡建设监督网站
  • 报名网站辽宁省建设银行网上开店平台有哪些