Community编程与开发github.com

ContextJet-ai/awesome-llm-observability

精心整理的 LLM 可观测性工具列表,涵盖 48 多种用于追踪、评估、监控、提示管理、护栏和 LLMOps 的工具(如 Langfuse、Phoenix、Opik、LangSmith、Helicone 等),并附带原创的 Agent 技能。

awesome-llm-observability 是什么?

这是一个精心整理的 LLM(大语言模型)可观测性资源列表,旨在帮助开发者快速了解和选用适合自己项目的工具。它涵盖了超过 48 种工具,适用于纯粹的 AI 应用和复杂的 Agent 工作流。该资源以清晰的分类方式组织,包括 LLM 追踪、评估、监控、提示管理、护栏以及 LLMOps 平台等关键领域。它支持多种 AI 平台(如 LangChain、LlamaIndex)和云服务(如 AWS、GCP、Azure),并且重点关注开源解决方案。此外,它还提供了原创的 Agent 技能,作为如何将这些工具集成到实际工作流中的具体示例。项目持续维护更新,是开发者在构建和调试 AI Agent 时不可或缺的参考。

兼容平台~Claude Code~Codex CLI~Cursor
npx skills add ContextJet-ai/awesome-llm-observability

Installed? Explore more 编程与开发 skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

在你喜欢的 AI 中提问

打开一个已预加载此 Agent Skill 的新对话。

文档

awesome-llm-observability 是做什么的?

Awesome LLM observability: a curated list of 48+ tools for LLM tracing, evaluation, monitoring, prompt management, guardrails & LLMOps (Langfuse, Phoenix, Opik, LangSmith, Helicone…) — plus original Agent Skills.

相关技能