braintrust@3.29.0
Braintrust SDK JavaScript 发布 3.29.0 版本,包含多项新功能和修复:eval 命令自动插桩、使用新的 eve 插桩钩子、initDataset() 支持 datasetId、记录 Anthropic 思考 token 和 LangChain 推理 token 作为指标、插桩 Vercel AI SDK 图像生成、修复 OpenAI 流式聊天选项保留、移除 AsyncLocalStorage.enterWith() 用法、loadPrompt 支持 apiKey 参数。
Development
- First Reportbraintrust@3.29.0Braintrust SDK
- Current AssessmentBraintrust 作为 AI 可观测性平台,其 SDK 的更新反映了行业对 LLM 应用监控的重视。记录推理 token 和图像生成插桩表明,随着多模态和推理模型的使用增加,开发者需要更细粒度的监控。这可能会推动其他可观测性工具跟进,提供类似功能。Agent Pulse · analysis
Braintrust SDK JavaScript 发布 3.29.0 版本,主要更新包括:eval 命令自动插桩、使用新的 eve 插桩钩子、initDataset() 支持 datasetId、记录 Anthropic 思考 token 和 LangChain 推理 token 作为指标、插桩 Vercel AI SDK 图像生成、修复 OpenAI 流式聊天选项保留、移除 AsyncLocalStorage.enterWith() 用法、loadPrompt 支持 apiKey 参数。这些更新增强了可观测性,特别是对推理 token 和图像生成的追踪,并改进了插桩的兼容性和性能。
该版本新增了对推理 token 的指标记录,包括 Anthropic 的思考 token 和 LangChain 的推理 token,这有助于开发者监控推理成本。同时,插桩 Vercel AI SDK 图像生成,扩展了可观测性覆盖范围。移除 AsyncLocalStorage.enterWith() 可能改善异步上下文传播的性能和可靠性。这些变化表明 Braintrust 正在深化对 LLM 应用的可观测性支持,特别是对 token 使用和生成式 AI 的追踪。
Braintrust 作为 AI 可观测性平台,其 SDK 的更新反映了行业对 LLM 应用监控的重视。记录推理 token 和图像生成插桩表明,随着多模态和推理模型的使用增加,开发者需要更细粒度的监控。这可能会推动其他可观测性工具跟进,提供类似功能。
对于使用 Braintrust 的团队,此更新提供了更全面的可观测性,有助于优化成本和调试。记录推理 token 使团队能更准确地估算推理成本,图像生成插桩则支持多模态应用的监控。这有助于提升开发效率和运营透明度。
未来,Braintrust 可能会继续扩展对更多模型和框架的支持,例如增加对更多推理 token 类型或图像生成模型的插桩。同时,移除 AsyncLocalStorage.enterWith() 可能为更高效的上下文传播铺路。开发者应关注后续版本对性能的改进和新插桩能力的支持。