当前位置: 首页 > news >正文

AI智能体(Agent)大模型入门【6】--编写fasteAPI后端请求接口实现页面聊天

目录

前言

安装fastapi框架及初始化和部署

创建聊天接口的请求接口

示例代码(初版)

示例代码(升级版)

运行演示

后言


前言

根据之前的专栏文章,想必你也学习到了如何在编译软件内使用大模型对话了,我们现在需要在页面实现对话,那么就需要创建聊天的请求接口。

本篇章很简单,将会教学如何实现fastapi接口实现页面对话的请求接口。只写后端代码,不写前端界面,因为大语言模型的重要点都是在后端的请求接口和代码的处理上,前端可以使用ai辅助工具进行编写。

如果你是刚接触这篇文章的,对之前的内容不太了解,可以查看本专栏内的文章内容,或者点击该链接进行快速创建原始框架文件:AI智能体(Agent)大模型入门【2】--基于llamaindx部署本地的聊天模型。-CSDN博客

安装fastapi框架及初始化和部署

安装指令

pip install fastapi

光有fastapi框架的话还不行,还需要一个用来启动的服务部署模块

     pip install uvicorn

也可以通过一下指令进行两个快速安装。

     pip install fastapi uvicorn

初始化

from fastapi import FastAPI, Form, UploadFile, File, Depends,Request
from fastapi.middleware.cors import CORSMiddleware
import uvicorn

需要导入以上的模块包

然后创建fastapi实例化对象及配置全局域

app = FastAPI()# 配置 CORS
app.add_middleware(CORSMiddleware,allow_origins=["*"],allow_credentials=True,allow_methods=["*"],allow_headers=["*"],
)

创建服务启动

if __name__ == '__main__':uvicorn.run(app, host="127.0.0.1", port=8060)

那么我们的fastapi也就初始化完成了,接下来就是创建聊天请求接口了

创建聊天接口的请求接口

关于对话的就是使用llamindex框架的几句话进行优化编写

也就是如何对这几句话进行处理和编写

不过目前还不需要你们编写文件和创建向量节点,所以总的来说你该如何创建聊天引擎和请求的方式来进行响应输出。

示例代码(初版)

我这里编写了请求代码的初版

llm = qwen_llm()class ChatRequest(BaseModel):message: strclass ChatResponse(BaseModel):reply: str@app.post("/chat_post")
async def chat_post(request: ChatRequest):msg = ChatMessage(role="user", content=request.message)response = await llm.achat([msg])return ChatResponse(reply=response.message.content)    

没错就是导入聊天引擎,创建聊天请求类,然后进行接受,然后响应返回输出。

这代码很简单,但实际上我们页面传递的数据不可能是这么简单的处理,参考市面上的ai应用kimi,qwen,deepseek,我们还需要对传入的数据进行存储,以便于查看历史对话。

OK那么我们就需要使用mysql来进行聊天接口的升级。

示例代码(升级版)

关于数据库的链接和创建我就不赘述了,直接上代码

class ChatRequest(BaseModel):session_id: int | None =  Nonemessage: strclass ChatResponse(BaseModel):session_id: intreply: str@app.post("/chat_post")
async def chat_post(session_id: int | None = Depends(parse_session_id),message: str = Form(...)):"""最基本的聊天模式请求,只调用了大模型,进行简单的会话处理不支持文件上传回答:param request::return:"""with closing(get_conn()) as conn:with conn.cursor() as cur:# --- 1. session ---if session_id is None:title = message[:15] + "..." if len(message) > 15 else messagecur.execute("INSERT INTO ChatList (title) VALUES (%s)", (title,))session_id = cur.lastrowid# 对于新会话,也需要调用模型生成回复msg = ChatMessage(role="user", content=message)response = llm.chat([msg])reply = response.message.content# 保存用户消息cur.execute("INSERT INTO ChatHistory (chat_list_id, msg_seq, role, message) ""VALUES (%s,%s,'user',%s)",(session_id, 1, message))# 保存助手回复cur.execute("INSERT INTO ChatHistory (chat_list_id, msg_seq, role, message) ""VALUES (%s,%s,'assistant',%s)",(session_id, 2, reply))else:session_id = session_id# --- 2. seq ---cur.execute("SELECT MAX(msg_seq) mx FROM ChatHistory WHERE chat_list_id=%s", (session_id,))seq = (cur.fetchone()["mx"] or 0) + 1# --- 3. 用户消息 ---cur.execute("INSERT INTO ChatHistory (chat_list_id, msg_seq, role, message) ""VALUES (%s,%s,'user',%s)",(session_id, seq, message))# --- 4. 调模型(同步方法) ---msg = ChatMessage(role="user", content=message)response = llm.chat([msg])reply = response.message.content# --- 5. 助手消息 ---cur.execute("INSERT INTO ChatHistory (chat_list_id, msg_seq, role, message) ""VALUES (%s,%s,'assistant',%s)",(session_id, seq + 1, reply))cur.execute("UPDATE ChatList SET updated_at = NOW() WHERE id = %s",(session_id,))conn.commit()return ChatResponse(session_id=session_id, reply=reply)

代码很简单,在上一版的代码进行了升级,进行了角色的区分,以及插入的顺序啊,为之后的聊天读取什么的方式进行了预留。

运行演示

在fastapi的docs服务端页面,进行接口的调用

结果

后言

本篇幅很长,但是内容很简单,只是稍加理解就能实现,主要是对后续的思考和前端界面的对接需要考虑一扇门方式进行参数的传递,以及该对话接口是很初始的。需要思考如何进行对文件读取,以及依据文件来进行思考回答和处理,集中于后续的升级处理。

http://www.dtcms.com/a/453356.html

相关文章:

  • 广西 南宁 微信微网站开发虚拟主机使用教程
  • 电子商务网站开发 当当网网站优化关键词怎么做
  • 学习日报 20251007|深度解析:基于 Guava LoadingCache 的优惠券模板缓存设计与实现
  • 什么是MOE?
  • 大模型-扩散模型(Diffusion Model)原理讲解(4
  • 【深度学习新浪潮】入门Flash Attention:从原理到Python手搓实现
  • 不做“KPI牛马“,回归真生活——双节沉思录
  • Java接口中实现多线程并行处理,大数据量查询实战,成倍提效、性能分析,笔记01
  • AI学习日记——参数的初始化
  • 数字信号处理 第七章(FIR数字滤波器设计)
  • 网站建设公司实力网站建设死人接单
  • 河南住房与建设厅网站杭州网站建设交易
  • 岳池建设局网站什么是网络设计的前提
  • GDB Stub定义及命名由来解析
  • 男人最爱上的做网站网页制作开版费
  • FreeRTOS_API模块综合应用篇(八)
  • tuchuang_myfilesshare文件列表_共享文件
  • GJOI 10.4/10.5 题解
  • C语言入门教程(第2讲):数据类型与变量详解与实战讲解
  • 哪些网站建设公司wordpress悬浮联系表
  • 5g互联如何取消网站备案中山seo代理商
  • 生成式人工智能对学习生态的重构:从“辅助工具”到“依赖风险”的平衡难题
  • 电商推广联盟大型网站技术架构演进与性能优化
  • short-term memory 和long-term memtory有什么区别
  • 公司网站建设与维护工作计划网站建设背景及意义
  • 技术支持上海网站建设广州做网站哪个平台好
  • 企业如何在网站上做宣传wordpress移动站点
  • 13.排序(下)
  • 软考 系统架构设计师系列知识点之杂项集萃(171)
  • 医院网站优化策划网站这么做301