开源LLM工程平台

作者 : noise 发布时间: 2024-03-8
1709893379594

介绍

Langfuse 是一个开源的 LLM 工程平台,可帮助团队协作调试分析迭代其 LLM 应用程序。

官网:https://langfuse.com![1709893206894](https://jsd.onmicrosoft.cn/gh/rcy1314/tuchuang@main/uPic/1709893206894.png)

核心平台功能

发展

  • **可观察性:**检测应用并开始将跟踪引入到 Langfuse(快速入门跟踪

    )

    • 跟踪应用中的所有 LLM 调用和所有其他相关逻辑
    • 适用于 Python 和 JS/TS 的异步 SDK,以及应用程序接口(在新选项卡中打开)
    • OpenAI SDK、Langchain、LlamaIndex、LiteLLM、Flowise 和 Langflow 的集成
  • **Langfuse 用户界面:**检查和调试复杂的日志和用户会话(演示跟踪会话))

  • **提示:**在 Langfuse 中管理、版本控制和部署提示(提示管理)

  • 1709893189526

监控

  • **分析学:**跟踪指标(LLM 成本、延迟、质量)并从仪表板和数据导出(分析)中获得见解)

  • **评估:**收集和计算你的LLM完成的分数(分数和评估

    )

    • 运行基于模型的评估
    • 收集用户反馈
    • 在 Langfuse 中手动对观测值进行评分

    演示

    1709893323219
    来自NOISE资源阁-noisevip.cn
    NOISE宝藏阁 » 开源LLM工程平台

    发表回复

    微信
    我会尽快回复。
    取消