当前位置: 首页 > news >正文

网站开发实例教程解封后中国死了多少人

网站开发实例教程,解封后中国死了多少人,智慧团建登录app,嘉盛建设集团官方网站📝 LangChain.js 是一个快速开发大模型应用的框架,它提供了一系列强大的功能和工具,使得开发者能够更加高效地构建复杂的应用程序。LangChain.js 实战系列文章将介绍在实际项目中使用 LangChain.js 时的一些方法和技巧。 统计调用大模型的 to…

📝 LangChain.js 是一个快速开发大模型应用的框架,它提供了一系列强大的功能和工具,使得开发者能够更加高效地构建复杂的应用程序。LangChain.js 实战系列文章将介绍在实际项目中使用 LangChain.js 时的一些方法和技巧。

统计调用大模型的 token 使用量,进而统计整体的账单花费,是一个非常基础的需求,在 LangChain.js 中统计 token 的方式有两种,一种是方法的返回,一种是利用回调函数:

1️⃣ 在方法中返回 token 的使用情况,比如 generate()

const chat = new ChatOpenAI({modelName: 'gpt-4',openAIApiKey: 'YOUR_KEY',
})const response = await chat.generate([[new SystemMessage("你是一个翻译专家,可以将中文翻译成法语。"),new HumanMessage("把这个句子翻译从中文翻译成法语:我特别喜欢上班"),]
]);

generate() 方法会返回如下:

{"generations": [[{"text": "J'aime beaucoup travailler."//...}]],"llmOutput": {"tokenUsage": {"completionTokens": 16,"promptTokens": 17,"totalTokens": 33}}
}

llmOutput 字段包含我们整个的 token 使用量,其中 promptTokens 对应的是输入的 token,completionTokens 对应的是输出的 token,对于 OpenAI 来说,输入输出的价格是不一的,如下表:

模型名输入输出
gpt-4$0.03 / 1K tokens$0.06 / 1K tokens
gpt-3.5-turbo-1106$0.0010 / 1K tokens$0.0020 / 1K tokens
gpt-4-1106-preview$0.01 / 1K tokens$0.03 / 1K tokens
gpt-4-1106-vision-preview$0.01 / 1K tokens$0.03 / 1K tokens

2️⃣ 使用回调函数 handleLLMEnd

LangChain 提供了大量方便的回调函数,我们可以利用其提供的内置的 handleLLMEnd() 函数来统计,我们可以在创建 ChatOpenAI 实例的时候注入回调函数:

const chat = new ChatOpenAI({modelName: 'gpt-4',openAIApiKey: 'YOUR_KEY',
}, {callbacks: [{handleLLMEnd(llmResult) {console.log(JSON.stringify(llmResult, null, 2))},}]
})

回调参数 llmResultgenerate() 方法返回值是一样的,同样有包含 tokenUsage

另外也可以在调用的时候再注入回调函数,可以更精细地统计:

model.invoke([new SystemMessage('Only return JSON'),new HumanMessage('Hi there!')],{callbacks: [{handleLLMEnd(llmResult) {console.log(JSON.stringify(llmResult, null, 2))},},],})

好了,希望以上两种方式可以帮助大家统计大模型的开销,护好钱兜。

推荐一个集聊天、工作流和知识库的AI 平台 StarFlow.tech 🚀 。在这里,你可以免费使用 ChatGPT3.5 和 3.5 16K,还有 GPT-4 Vision、DELL·E3、Midjourney 等多种模型可供选择。这个平台就像一个小型工作室,助力个人效率 Max!。

http://www.khdw.cn/news/5902.html

相关文章:

  • 网站添加在线客服软件开发外包公司
  • 公司网站数媒设计制作百度企业推广怎么收费
  • 网站开发终止协议书游戏代理加盟
  • 网站建设 ui 企业网站短视频代运营方案模板
  • 西安行业网站零基础学seo要多久
  • 凡科建站添加文章图片外链工具
  • 佛山响应式网站设计推广网址
  • 书店网站建设方案ios aso优化工具
  • 两学一做专题网站搜狗快速收录方法
  • 营销类网站建设百度推广开户2400
  • 大连网站怎么网络营销的概念和特征
  • 网站关键词排名检测工具seowhy培训
  • 郑州网站建设找哪家杭州seo的优化
  • 如何免费建一个网站seo 推广教程
  • 如何优化网站到首页优化今日热搜榜排名
  • 做空的网站有哪些新闻 最新消息
  • 培训行业网站建设是什么百度指数排行榜
  • 做网站卖东西赚钱web网站模板
  • 杨凌做网站推广任务接单平台
  • 怎么做批量的网站检查百度游戏风云榜
  • 杭州 城西 做网站湖北疫情最新消息
  • 单页面网站跳出率seo内部优化方案
  • 做网站都去哪申请网址深圳seo公司
  • 网站数据库分离怎么做seo免费推广软件
  • 江苏省建设厅网站官网苏州百度快照优化排名
  • 专门做dnf补丁的网站班级优化大师是干什么用的
  • 邹城哪个公司做网站好百度seo公司兴田德润
  • 为什么要建设公安公众服务网站互联网营销师证书
  • 简述网站建设的基本思路营销案例网站
  • 网站代理在线福州seo关键字推广