当前位置: 首页 > wzjs >正文

镇江网站建设价位许昌网络推广公司

镇江网站建设价位,许昌网络推广公司,网络营销人员招聘信息,保定网站建设培训班Eino 旨在提供基于 Golang 语言的终极大模型应用开发框架。 它从开源社区中的诸多优秀 LLM 应用开发框架,如 LangChain 和 LlamaIndex 等获取灵感,同时借鉴前沿研究成果与实际应用,提供了一个强调简洁性、可扩展性、可靠性与有效性&#xff0…

Eino 旨在提供基于 Golang 语言的终极大模型应用开发框架。 它从开源社区中的诸多优秀 LLM 应用开发框架,如 LangChain 和 LlamaIndex 等获取灵感,同时借鉴前沿研究成果与实际应用,提供了一个强调简洁性、可扩展性、可靠性与有效性,且更符合 Go 语言编程惯例的 LLM 应用开发框架。

Eino 提供的价值如下:

  • 精心整理的一系列 组件(component) 抽象与实现,可轻松复用与组合,用于构建 LLM 应用。
  • 强大的 编排(orchestration) 框架,为用户承担繁重的类型检查、流式处理、并发管理、切面注入、选项赋值等工作。
  • 一套精心设计、注重简洁明了的 API
  • 以集成 流程(flow) 和 示例(example) 形式不断扩充的最佳实践集合。
  • 一套实用 工具(DevOps tools),涵盖从可视化开发与调试到在线追踪与评估的整个开发生命周期。

Eino 可在 AI 应用开发周期中的不同阶段,规范、简化和提效:

  • Development: 开箱即用的 AI 相关组件;常见的 Flow 范式;对并发、异步、流式友好的图编排;完善的流处理能力等。这些均可对 AI 应用的开发提供很大助力。
  • Debugging: 可对图编排的应用,进行可视化的开发调试
  • Deployment: 提供丰富的对 AI 应用的评测能力
  • Maintenance: 提供丰富的切面对 AI 应用进行观测、监控

Demo

/** Copyright 2024 CloudWeGo Authors** Licensed under the Apache License, Version 2.0 (the "License");* you may not use this file except in compliance with the License.* You may obtain a copy of the License at**     http://www.apache.org/licenses/LICENSE-2.0** Unless required by applicable law or agreed to in writing, software* distributed under the License is distributed on an "AS IS" BASIS,* WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.* See the License for the specific language governing permissions and* limitations under the License.*/package mainimport ("context""github.com/cloudwego/eino-ext/components/model/ollama""github.com/cloudwego/eino-ext/components/model/openai""github.com/cloudwego/eino/components/model""github.com/cloudwego/eino/components/prompt""github.com/cloudwego/eino/schema""io""log""os"
)func main() {ctx := context.Background()// 使用模版创建messageslog.Printf("===create messages===\n")messages := createMessagesFromTemplate()log.Printf("messages: %+v\n\n", messages)// 创建llmlog.Printf("===create llm===\n")cm := createOpenAIChatModel(ctx)// cm := createOllamaChatModel(ctx)log.Printf("create llm success\n\n")log.Printf("===llm generate===\n")result := generate(ctx, cm, messages)log.Printf("result: %+v\n\n", result)log.Printf("===llm stream generate===\n")streamResult := stream(ctx, cm, messages)reportStream(streamResult)
}func createMessagesFromTemplate() []*schema.Message {template := createTemplate()// 使用模板生成消息messages, err := template.Format(context.Background(), map[string]any{"role":     "程序员鼓励师","style":    "积极、温暖且专业","question": "我的代码一直报错,感觉好沮丧,该怎么办?",// 对话历史(这个例子里模拟两轮对话历史)"chat_history": []*schema.Message{schema.UserMessage("你好"),schema.AssistantMessage("嘿!我是你的程序员鼓励师!记住,每个优秀的程序员都是从 Debug 中成长起来的。有什么我可以帮你的吗?", nil),schema.UserMessage("我觉得自己写的代码太烂了"),schema.AssistantMessage("每个程序员都经历过这个阶段!重要的是你在不断学习和进步。让我们一起看看代码,我相信通过重构和优化,它会变得更好。记住,Rome wasn't built in a day,代码质量是通过持续改进来提升的。", nil),},})if err != nil {log.Fatalf("format template failed: %v\n", err)}return messages
}func createOpenAIChatModel(ctx context.Context) model.ChatModel {key := os.Getenv("OPENAI_API_KEY")chatModel, err := openai.NewChatModel(ctx, &openai.ChatModelConfig{Model:  "gpt-4o", // 使用的模型版本APIKey: key,      // OpenAI API 密钥})if err != nil {log.Fatalf("create openai chat model failed, err=%v", err)}return chatModel
}func reportStream(sr *schema.StreamReader[*schema.Message]) {defer sr.Close()i := 0for {message, err := sr.Recv()if err == io.EOF {return}if err != nil {log.Fatalf("recv failed: %v", err)}log.Printf("message[%d]: %+v\n", i, message)i++}
}func createOllamaChatModel(ctx context.Context) model.ChatModel {chatModel, err := ollama.NewChatModel(ctx, &ollama.ChatModelConfig{BaseURL: "http://localhost:11434", // Ollama 服务地址Model:   "llama2",                 // 模型名称})if err != nil {log.Fatalf("create ollama chat model failed: %v", err)}return chatModel
}func createTemplate() prompt.ChatTemplate {// 创建模板,使用 FString 格式return prompt.FromMessages(schema.FString,// 系统消息模板schema.SystemMessage("你是一个{role}。你需要用{style}的语气回答问题。你的目标是帮助程序员保持积极乐观的心态,提供技术建议的同时也要关注他们的心理健康。"),// 插入需要的对话历史(新对话的话这里不填)schema.MessagesPlaceholder("chat_history", true),// 用户消息模板schema.UserMessage("问题: {question}"),)
}func generate(ctx context.Context, llm model.ChatModel, in []*schema.Message) *schema.Message {result, err := llm.Generate(ctx, in)if err != nil {log.Fatalf("llm generate failed: %v", err)}return result
}func stream(ctx context.Context, llm model.ChatModel, in []*schema.Message) *schema.StreamReader[*schema.Message] {result, err := llm.Stream(ctx, in)if err != nil {log.Fatalf("llm generate failed: %v", err)}return result
}

支持的模型:

  • openai: ChatModel - OpenAI
  • ark: ChatModel - ARK
  • ollama: ChatModel - Ollama

官网地址:Eino: 概述 | CloudWeGo

http://www.dtcms.com/wzjs/42333.html

相关文章:

  • 做文学网站需要石家庄疫情最新消息
  • 厦门响应式网站制作如何做好百度推广
  • 如何做网站流量报告推广app是什么工作
  • 做亚马逊一个月挣10万seo排名优化方法
  • 个人网站建设赚取流量费网络seo关键词优化技术
  • 教做美食的网站百度号注册官网
  • 福州市城乡建设发展总公司网站东莞seo计费管理
  • 网站建设是前端吗南京网页搜索排名提升
  • 展馆网站建设百度推广客户端app下载
  • wordpress图片乱码上海高端seo公司
  • 厂房装修多少钱一个平方米北京seo培训
  • 我是怎么做网站架构的汕头seo全网营销
  • 云盘网站建设逆冬seo
  • 无锡装饰网站建设必应搜索推广
  • 素材网站怎么推广代写文章兼职
  • 湛江手机网站建设网络营销的原理
  • oss做下载网站如何注册域名网站
  • 网站空间怎样设置用户名和密码网店营销策划方案
  • 网站搭建和网站开发网站排名优化服务
  • 搭设企业网站教程最近新闻报道
  • 中国建设银行重庆网站上海seo公司哪家好
  • 茂名企业建站程序谷歌seo排名工具
  • 建设优秀企业网站山东网络推广网站
  • centos wordpress 空白重庆网站seo外包
  • 做设计的搜素材上什么网站好官网优化 报价
  • 新手如何自己做网站app2023年新闻小学生摘抄
  • 北京欢迎你网站制作公司网站建设制作免费
  • 泸州住房和城乡建设厅网站sem推广是什么
  • 大连开发区招聘网站百度推广营销怎么做
  • 上海景观设计公司网站推广优化的方法