当前位置: 首页 > wzjs >正文

做婚庆的网站有哪些内容大连专业做网站

做婚庆的网站有哪些内容,大连专业做网站,公司百度推广一年多少钱,国外主流网站开发技术返回方式 一次性返回适合后台操作,流式返回适合页面展示(客服,聊天) 以下是关于 Spring AI Alibaba 的 ChatClient 获取大模型返回内容的方式详解,以及不同场景下的选择建议: 一、两种核心响应方式对比 方式流式响应 (Stream)一…

返回方式 一次性返回适合后台操作,流式返回适合页面展示(客服,聊天)

以下是关于 Spring AI Alibaba 的 ChatClient 获取大模型返回内容的方式详解,以及不同场景下的选择建议:


一、两种核心响应方式对比

方式流式响应 (Stream)一次性返回 (Blocking)
实现方法chatClient.stream()chatClient.call()
响应类型Flux<ChatResponse> (响应流)ChatResponse (完整对象)
数据传输分块实时传输(逐词/逐句)等待完整响应后一次性返回
内存占用低(逐步处理)高(需缓存完整结果)
适用场景实时展示、前端交互、长文本生成后台批量处理、需完整结果的操作
延迟感知用户感知延迟低用户需等待全部处理完成
代码复杂度较高(需处理流式响应)简单(直接获取结果)

二、具体实现代码示例

1. 一次性返回(适合后台操作)
// 同步阻塞式调用
public String getFullResponse(String prompt) {return chatClient.prompt(prompt).call().content();
}// 使用示例(直接操作完整结果)
String fullResponse = getFullResponse("写一篇关于AI的论文");
Files.writeString(Path.of("paper.md"), fullResponse); // 直接写入文件

适用场景

  • 生成报告后直接写入数据库
  • 批量处理问答生成训练数据
  • 需要完整上下文才能继续的操作(如代码生成)

2. 流式返回(适合页面展示)
    @PostMapping(value = "/askQuestion" ,produces = MediaType.TEXT_EVENT_STREAM_VALUE)public Flux<ServerSentEvent<String>> stream(@RequestBodyQuestionVO questionVO, HttpServletRequest request)ChatOptions runtimeOptions = ChatOptions.builder().model(moduleName).build();Flux<ServerSentEvent<String>> result=  ChatClient.builder(ollamaChatModel).build().prompt(prompt).options(runtimeOptions).stream().content().map(content -> {//可以增加一些 额外处理stringBuffer.append(content);System.out.println(stringBuffer.toString());JSONObject  jsonObject=new  JSONObject();jsonObject.put("content",content);String jobject=jsonObject.toString();return ServerSentEvent.builder(jobject).event("message").build();})//问题回答结速标识,以便前端消息展示处理.concatWithValues(ServerSentEvent.builder("[DONE]").build()).onErrorResume(e -> Flux.just(ServerSentEvent.builder("Error: " + e.getMessage()).event("error").build()));return result;
}

适用场景

  • 网页聊天界面逐字展示
  • 实时语音合成配合TTS
  • 长文本生成时的进度提示

三、选择策略建议

1. 优先选择流式响应的场景
  • 需要实时交互:如聊天应用、客服系统
    // WebSocket 片段示例
    @OnMessage
    public void onMessage(Session session, String userInput) {StringBuilder sb = new StringBuilder();chatClient.stream(new Prompt(userInput)).subscribe(chunk -> session.getAsyncRemote().sendText(chunk.getContent()),error -> session.close(),() -> saveToDatabase(sb.toString()));
    }
    
  • 处理长文本时:避免用户长时间等待白屏
  • 资源受限环境:减少内存峰值占用
2. 优先选择一次性返回的场景
  • 后端数据处理:生成后直接入库
    @Scheduled(fixedRate = 3600000)
    public void batchProcess() {List<String> prompts = getScheduledPrompts();prompts.forEach(prompt -> {String response = getFullResponse(prompt);database.save(new ChatRecord(prompt, response)); // 批量入库});
    }
    
  • 需要严格顺序的操作:如生成代码后立刻编译
  • 简单命令行工具:无需复杂交互的脚本

四、性能优化技巧

  1. 流式处理背压控制

    chatClient.stream(prompt).onBackpressureBuffer(50) // 防止快速生产压垮消费者.delayElements(Duration.ofMillis(50)) // 控制输出速度.subscribe(...);
    
  2. 结果缓存策略

    // 使用带缓存的StringBuilder
    StringBuilder sb = new StringBuilder(1024); // 预分配缓冲区
    
  3. 文件写入优化

    // 使用异步文件写入(NIO)
    CompletableFuture.runAsync(() -> {Files.writeString(path, content, StandardOpenOption.APPEND);
    });
    

五、异常处理建议

chatClient.stream(prompt).doOnError(IOException.class, e -> {// 重试逻辑retryService.scheduleRetry(prompt);}).retryWhen(Retry.backoff(3, Duration.ofSeconds(1))).subscribe(...);

通过合理选择响应方式,您可以在以下场景获得显著收益:

  • 页面展示:流式响应提升用户体验 300%+(Google HCI 研究数据)
  • 后台处理:批量同步调用可提升吞吐量 40-60%
  • 资源利用:流式处理可降低内存占用达 70%(尤其处理 10k+ token 长文本时)

建议根据实际业务压力测试结果调整策略,可在 Spring 配置中动态切换模式:

spring:ai:alibaba:response-mode: auto # [stream|block|auto]

文章转载自:

http://UJLJek6g.sfrmg.cn
http://xv1hnqm2.sfrmg.cn
http://fBdJXypi.sfrmg.cn
http://lI4AWzuo.sfrmg.cn
http://r1Kg0iK9.sfrmg.cn
http://I0J7qV0p.sfrmg.cn
http://1bz5tFIC.sfrmg.cn
http://OXl5CcCV.sfrmg.cn
http://hMfEPIrD.sfrmg.cn
http://qMzmT1BY.sfrmg.cn
http://5rfW3ELG.sfrmg.cn
http://XWUtQX2q.sfrmg.cn
http://AJzuSu9m.sfrmg.cn
http://kq1dwXki.sfrmg.cn
http://Vm5ScI5m.sfrmg.cn
http://JhLhmtxm.sfrmg.cn
http://1uYBJnpb.sfrmg.cn
http://vHn1NUjm.sfrmg.cn
http://eHpquB5f.sfrmg.cn
http://JQsbiVXg.sfrmg.cn
http://K5jhYa5u.sfrmg.cn
http://UQC6tmmJ.sfrmg.cn
http://ffNsKaFs.sfrmg.cn
http://xHfmcSii.sfrmg.cn
http://en7B8R53.sfrmg.cn
http://JhLriA4M.sfrmg.cn
http://CH6s77Af.sfrmg.cn
http://m9HXvNie.sfrmg.cn
http://hOsPPF0L.sfrmg.cn
http://eRHmrZlz.sfrmg.cn
http://www.dtcms.com/wzjs/642004.html

相关文章:

  • 企业网站设置费用网站导航如何做半透明
  • 做网站卖得出去吗jsp页面如何做网站pv统计
  • 帝国建站软件天元建设集团有限公司招聘信息
  • 在线生成短链接石家庄seo排名外包
  • 外贸自建站可以自己做网站吗软文推广教程
  • 网站地图的制作广告平台有哪些 互联网
  • 五合一网站制作视频教程?p2p网站开发思路方案
  • 越秀网站建设设计网站建设与管理必修
  • 网站建设中扁平化结构北京 集团公司网站建设
  • 松江网站建设品划网络浙江省城乡与住房建设部网站
  • 58徐州网站建设高中网站建设计划表
  • 网站组件设计学类
  • 做网站北京临沂手工活外发加工网
  • 做临时网站wordpress中文手册下载
  • 苏州seo网站诊断wordpress高级套餐
  • 包装材料营销型网站怎么用云虚拟主机建设网站
  • 橱柜衣柜做网站白城网络推广
  • 如何在自己网站开发互动视频专业seo要多少钱
  • 辽宁做网站和优化二手购物网站建设方案
  • wordpress站点如何适应手机网站运营效果分析怎么做
  • 网站服务器搭建网站建设与推广的销售
  • 购买idc网站服务器门户网站平台建设方案
  • ppp项目建设交易网站wordpress商业授权价格
  • 网站可以免费建设吗深圳培训学校
  • 网站服务合同模板Wordpress 新建标签
  • 网站制作流程论文网络推广有什么好的方法
  • 怎么做网站seowordpress首页图片不显示
  • 冒用他人公司做网站茌平县建设局网站
  • win7 iis 添加网站郴州网络科技有限公司
  • 网站建设所需的硬软件一个好的产品怎么推广