awesome-llm-observability 是做什么的?
Awesome LLM observability: a curated list of 48+ tools for LLM tracing, evaluation, monitoring, prompt management, guardrails & LLMOps (Langfuse, Phoenix, Opik, LangSmith, Helicone…) — plus original Agent Skills.
精心整理的 LLM 可观测性工具列表,涵盖 48 多种用于追踪、评估、监控、提示管理、护栏和 LLMOps 的工具(如 Langfuse、Phoenix、Opik、LangSmith、Helicone 等),并附带原创的 Agent 技能。
这是一个精心整理的 LLM(大语言模型)可观测性资源列表,旨在帮助开发者快速了解和选用适合自己项目的工具。它涵盖了超过 48 种工具,适用于纯粹的 AI 应用和复杂的 Agent 工作流。该资源以清晰的分类方式组织,包括 LLM 追踪、评估、监控、提示管理、护栏以及 LLMOps 平台等关键领域。它支持多种 AI 平台(如 LangChain、LlamaIndex)和云服务(如 AWS、GCP、Azure),并且重点关注开源解决方案。此外,它还提供了原创的 Agent 技能,作为如何将这些工具集成到实际工作流中的具体示例。项目持续维护更新,是开发者在构建和调试 AI Agent 时不可或缺的参考。
npx skills add ContextJet-ai/awesome-llm-observabilityInstalled? Explore more 编程与开发 skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →
Awesome LLM observability: a curated list of 48+ tools for LLM tracing, evaluation, monitoring, prompt management, guardrails & LLMOps (Langfuse, Phoenix, Opik, LangSmith, Helicone…) — plus original Agent Skills.
Send and manage iMessages via BlueBubbles, including attachments, tapbacks, edits, replies, and groups.
Control Eight Sleep pods (status, temperature, alarms, schedules).
BluOS CLI (blu) for discovery, playback, grouping, and volume.
Create, search, and manage Bear notes via grizzly CLI.
Capture frames or clips from RTSP/ONVIF cameras.
Search GIF providers with CLI/TUI, download results, and extract stills/sheets.