当前位置: 首页 > news >正文

上线倒计时单页网站模板网络空间搜索引擎

上线倒计时单页网站模板,网络空间搜索引擎,wordpress无法新建页面,建设用地规划证查询网站OpenAI 流式的代码: 首选一般请使用os.getenv 去读环境变量的内容 注意使用pip install python-dotenv 的安装方法 load_dotenv 是这个库提供的一个函数,用于读取 .env 文件并将其中定义的键值对设置为系统的环境变量。 默认情况下,load_…

OpenAI 流式的代码:

首选一般请使用os.getenv 去读环境变量的内容

注意使用pip install python-dotenv 的安装方法

load_dotenv 是这个库提供的一个函数,用于读取 .env 文件并将其中定义的键值对设置为系统的环境变量。

默认情况下,load_dotenv() 会自动查找当前目录下的 .env 文件。如果文件不在默认路径,可以通过参数指定,例如 load_dotenv(‘/path/to/.env’)。

为什么代码里用 dotenv 而不是 python_dotenv?

在 Python 中,导入模块时使用的是库的模块名,而不是 PyPI 上的包名。python-dotenv 这个包安装后,提供了一个名为 dotenv 的模块供导入。这是由库开发者决定的命名约定。例如:

  • PyPI 包名:python-dotenv
  • 导入时的模块名:dotenv

流式代码 类 (一键运行)

from openai import  AsyncOpenAI
from dotenv import load_dotenv
import osload_dotenv()class AsyncOpenAIOut:def __init__(self):self.api_key = os.getenv("OPENAI_API_KEY")self.base_url = os.getenv("OPENAI_BASE_URL")self.oai_client = AsyncOpenAI(api_key=self.api_key, base_url=self.base_url)self.model = os.getenv("OPENAI_MODEL")async def gpt_stream(self, user_message: str,model: str = os.getenv("OPENAI_MODEL"),history: list[dict] = [],system_prompt: str = "") :messages = []if history:messages.extend(history)if system_prompt:messages.extend([{"role": "system", "content": system_prompt}])messages.append({"role": "user", "content": user_message})response = await self.oai_client.chat.completions.create(model=model,messages=messages,stream=True)async for chunk in response:if chunk.choices[0].delta.content:yield chunk.choices[0].delta.contentasync_openai_out = AsyncOpenAIOut()if __name__ == "__main__":async def test_gpt_stream():async for chunk in async_openai_out.gpt_stream(user_message="写300字作文",system_prompt="You are a helpful assistant."):print(chunk)import asyncioasyncio.run(test_gpt_stream())

这里面有几点需要注意:

简短回答:print(chunk) 是 同步操作会在当前事件循环中执行完毕后才继续但它不是 I/O 密集型操作,所以不会造成实际的“阻塞”问题,特别是在异步函数中逐步输出内容的场景下,它是可接受的。

想确保异步非阻塞输出:

        async for chunk in async_openai_out.gpt_stream(user_message="写300字作文",system_prompt="You are a helpful assistant."):# print(chunk)await asyncio.to_thread(print, chunk)  # 在后台线程执行 print

异步生成器(Async Generator) 的用法,结合了 Python 的异步编程(async for)和生成器(yield)机制。

在异步迭代 response 中的每个 chunk,如果它有内容,就通过 yield 一块一块地“流式返回”。

async for chunk in response:if chunk.choices[0].delta.content:yield chunk.choices[0].delta.content

对比for : 普通for是同步迭代

async for是异步迭代,比如网络流、WebSocket、OpenAI 的 Stream 响应等。

yield 是生成器的关键,它不是“返回”值,而是“产出”值(可以被迭代一次)。

http://www.dtcms.com/a/437469.html

相关文章:

  • 用腾讯云怎么建设网站个人网站设计源码
  • 寮步镇做网站北京市市场监督管理网上服务平台
  • 北京单页营销型网站制作政务网站网上调查怎么做
  • 网页制作与网站建设实战大全光盘ui是什么
  • 电子政务网站建设的实验体会wordpress文章显示摘要
  • 工作室网站源码济宁建设工程信息网站
  • 网站 搜索 关键字 description廉洁常德网站
  • 网站设计开发工程师设计感很强的中文网站
  • 外贸网站如何做推广是什么公司管理网站首页
  • 深圳优化网站排名如果熊掌号做的不好会不会影响网站
  • 免费婚庆网站模板网页设计师个人简历参考范文
  • 宁波外贸网站制作公司wordpress系统管理密码忘记
  • 哈尔滨模板建站公司推荐怎么做网站营销策划
  • 潜江市网站长沙房产交易中心官网
  • 做全网营销型网站建设数据库网站 建设费用
  • 企业可以做哪些网站有哪些内容吗微信管理工具
  • 东莞专业网站推广平台圣诞节网站怎么做
  • 国外效果超炫网站ui设计难学吗
  • 秦淮html5响应式网站海南seo外包
  • 网站服务器cpu占用多少要升级河源东莞网站建设
  • 泉州网站建设公司首选哈尔滨网页设计制作
  • 赤峰市做网站西安百度seo推广电话
  • 建设信息网站wordpress用户页
  • 本地做网站河北新闻最新消息10条
  • 建筑人才网官方网站查询手工制作包包
  • 个人备案网站服务内容百度seo是什么意思呢
  • 响应式网站设计的规范网站建设管理ppt模板
  • 微站网站建设技术概述
  • 建设一个行业性的网站价格长春高铁站
  • 公司网站设计的费用广州网站建设 领航科技