langfuse/langfuse: 6.6K ⭐️ Changelog Full multi-modal support, including audio, images, and attachmentsby Hassieb 1 days ago LLM-as-a-judge Evaluators for Dataset Experimentsby Marlies 2 days ago Dataset Run Comparison Viewby Marlies ...
langfuse/langfuse: 6.5K ⭐️ Changelog New Sidebarby Marlies Nov 1, 2024 Event input and output maskingby Hassieb Oct 25, 2024 Amazon Bedrock support for LLM Playground and Evaluationsby Hassieb Oct 11, 2024 Langfuse LLM-as-a-judge now supports any (tool-calling) LLMby Hassieb ...
langfuse 是一个开源llm工程平台,提供了可观测性,metrics,评估,提示词管理,playgroud,datasets,可以很好的与llamaindex langchain openai sdk,litellm 以及其他东西集成 说明 langfuse 支持的集成还是很多的,提供了不少语言的sdk,对于llm 的开发还是值得尝试下的...
Langfuse is an open-source LLM engineering platform that helps teams collaboratively debug, analyze, and iterate on their LLM applications.
langfuse 是一个开源llm工程平台,提供了可观测性,metrics,评估,提示词管理,playgroud,datasets,可以很好的与llamaindex langchain openai sdk,litellm 以及其他东西集成 说明 langfuse 支持的集成还是很多的,提供了不少语言的sdk,对于llm 的开发还是值得尝试下的 ...
今天的AI头条：LangFuse，AI应用分析解决方案；AI在教育中的潜力 1. LangFuse开源：LLM应用的观察和分析解决方案LangFuse是一种为LLM（低延迟的消息）应用设计的开源可观察性和分析解决方案。它主要针对生产环境使用，但也有一些用户在本地开发他们的LLM应用时使用。LangFuse的主要目标是提供实时的、深入的、可操作的...
langfusePublic 🪢 Open source LLM engineering platform: LLM Observability, metrics, evals, prompt management, playground, datasets. Integrates with LlamaIndex, Langchain, OpenAI SDK, LiteLLM, and more. 🍊YC W23 langfuse-jsPublic 🪢 Langfuse JS/TS SDKs - Instrument your LLM app and get ...
然而常规 Web 服务的监控机制往往无法满足大模型应用的监控需求,因为大模型应用往往关注的不仅仅是响应延迟、吞吐量等基础指标,而是需要关注大模型应用输出的语义正确性。因此,本文将介绍如何借助 Dify 和 Langfuse 工具,展示如何为大模型应用必要监控,方便进行有定向优化。
LangFuse是一种为LLM应用设计的开源可观察性和分析解决方案。它主要针对生产环境使用,但也有一些用户在本地开发他们的LLM应用时使用。LangFuse的主要目标是提供实时的、深入的、可操作的见解,以帮助开发者和运维团队监控和优化他们的应用。这个解决方案提供了一种有效的方式来识别和诊断可能影响应用性能的问题,从而使团...