当前位置: 首页 > news >正文

SpringAi接入DeepSeek大模型

文章目录

  • 前言
  • 一、SpringAi
  • 二、SpringAi特性
  • 三、引入依赖
    • 3.1 SpringAi整合DeepSeek示例
    • 3.2 yml配置文件
    • 3.3 配置类
    • 3.4 聊天代码示例
    • 3.5 实现回话记忆功能
  • 总结


前言

持续更新SpringAI

一、SpringAi

Spring AI 是一个用于 AI 工程的应用程序框架。 其目标是将 Spring 生态系统设计原则(如可移植性和模块化设计)应用于 AI 领域,并将使用 POJO 作为应用程序的构建块推广到 AI 领域。

二、SpringAi特性

在这里插入图片描述

三、引入依赖

3.1 SpringAi整合DeepSeek示例

需要Jdk17+
Spring AI 最低支持Spring Boot 3.4.x

<dependency><groupId>org.springframework.ai</groupId><artifactId>spring-ai-starter-model-openai</artifactId>
</dependency>

3.2 yml配置文件

spring:ai:openai:base-url: https://api.deepseek.comapi-key: 自己在deepseek创建的api keychat:options:model: deepseek-chat 聊天模型,可以更换

3.3 配置类

@Configuration
public class AiConfiguration {@Beanpublic ChatClient chatClient(OpenAiChatModel model, ChatMemory chatMemory) {return ChatClient.builder(model).defaultSystem("你是一个热心的、可爱的智能助手,你的名字叫小团团,用小团团的语气来实现对话").defaultAdvisors(new SimpleLoggerAdvisor(),new MessageChatMemoryAdvisor(chatMemory)) //可以记录对话的输出日志.build();}
}

3.4 聊天代码示例

@Data
public class Dto {private String message;private String timestamp;private String type;private String id;
}

Controller

@RestController
@RequestMapping("/api")
@RequiredArgsConstructor
public class ChatController {private final ChatClient chatClient;@PostMapping(value = "/chat", produces = "text/event-stream;charset=utf-8")public Flux<String> chat(@RequestBody Dto dto) {return chatClient.prompt().user(dto.getMessage()) //前端用户输入的文字,与大模型进行沟通.stream()//使用流式输出,可以配合前端 实现打字机效果.content();//得到大模型响应的内容}
}

3.5 实现回话记忆功能

在SpringAi中,有一个接口ChatMemory,默认实现类为InMemoryChatMemory,如果每次的id都相同,那么SpringAi会在内存中记录我们这个id对应的对话历史记录(可以将本次页面的唯一标识id传输过来),可以实现历史记忆功能和历史对话联动功能。

如果想把历史回话存储到redis或者其他方案存储,那么我们需要自定义一个类来实现ChatMemory接口,重写方法即可。

话不多说,上实现代码

import lombok.RequiredArgsConstructor;
import org.springframework.ai.chat.client.ChatClient;
import org.springframework.web.bind.annotation.*;
import reactor.core.publisher.Flux;import static org.springframework.ai.chat.client.advisor.AbstractChatMemoryAdvisor.CHAT_MEMORY_CONVERSATION_ID_KEY;@RestController
@RequestMapping("/api")
@RequiredArgsConstructor
public class ChatController {private final ChatClient chatClient;@PostMapping(value = "/chat", produces = "text/event-stream;charset=utf-8")public Flux<String> chat(@RequestBody Dto dto) {return chatClient.prompt().user(dto.getMessage()).advisors(advisorSpec -> advisorSpec.param(CHAT_MEMORY_CONVERSATION_ID_KEY,dto.getId()))//此处将id相同的数据都会存储到内存中.stream().content();}
}

实现效果

  1. 当我们第一次访问时,我们定义dto中的id为1,我们问AI知道我是谁吗?SpringAI默认的内存存储容器为空,所以联想不到我们是谁
    在这里插入图片描述

在这里插入图片描述
2. 当我们给AI进行对话后,透露我们的名字,我们来看一看容器大小
在这里插入图片描述
id为1的value中有一个list集合,一次访问对话,一次请求内容,一次响应内容,都会被记录到这个id为1下的list集合中存储一次对话会在list集合中存储两条记录
在这里插入图片描述
3. 我们再次询问AI知道我们是谁吗,我们来看看AI如何回答
在这里插入图片描述

在这里插入图片描述
4. 那么当我们把传入的id设置为2再尝试问一下AI知道我们是谁吗
在这里插入图片描述
在这里插入图片描述

debug发现id为2的容器中没有之前的历史记录存储,AI回答时就不能检索到id为1的历史回话数据
在这里插入图片描述


总结

相关文章:

  • FreeSwitch Windows安装
  • node.js为什么产生?
  • 双列集合——map集合和三种遍历方式
  • Java学习手册:SQL 优化技巧
  • 【PostgreSQL数据分析实战:从数据清洗到可视化全流程】4.1 日期时间标准化(时区转换/格式统一)
  • SpringMVC——第四章:三个域对象
  • MATLAB中tabulate函数——先验概率的简单估计
  • 【Redis】Java操作Redis之SpringDataRedis
  • 高并发?多线程?是一个东西吗?
  • LeetCode 热题 100 189. 轮转数组
  • 【PostgreSQL数据分析实战:从数据清洗到可视化全流程】3.3 异常值识别(Z-score法/IQR法/业务规则法)
  • PostgreSQL 的 ANALYZE 命令
  • R绘图|3分钟复现瑞士“苏黎世大学”Nature全球地图——基于R包ggplot2+sf等
  • 【Linux系统】条件变量
  • gitblit安装教程,搭建一个属于自己的Git版本仓库
  • 湖北理元理律师事务所:法律科技融合下的债务管理实践
  • Unity与Unreal Engine(UE)的深度解析及高级用法
  • 【网络】什么是串口链路(Serial Link)?
  • 文学与社会学是否只是在做解释的工作?
  • 【c++深入系列】:万字详解vector(附模拟实现的vector源码)
  • 申活观察|演出场次破纪录、入境游导游档期忙,上海文旅商“热力”拉满
  • 全红婵/陈芋汐夺得跳水世界杯总决赛女子双人10米台冠军
  • 旅游特种兵们,这个五一“躲进”书吧
  • 长三角议事厅| AI作曲时代:长三角如何奏响数字音乐乐章
  • 5月起,这些新规将施行
  • 伊朗外长:伊美第四轮间接谈判将于5月3日举行