langsmith-evaluator 是做什麼的？
當您需要為 LangSmith 建立評估管道時，請呼叫此技能。涵蓋三大核心元件：(1) 建立評估器 – LLM 作為評審、自訂程式碼；(2) 定義執行函式 – 如何捕捉代理程式的輸出與軌跡；(3) 執行評估 – 使用 evaluate() 在本機執行或透過 LangSmith 自動執行。使用 langsmith CLI 工具。
當您需要為 LangSmith 建立評估管道時，請呼叫此技能。涵蓋三大核心元件：(1) 建立評估器 – LLM 作為評審、自訂程式碼；(2) 定義執行函式 – 如何捕捉代理程式的輸出與軌跡；(3) 執行評估 – 使用 evaluate() 在本機執行或透過 LangSmith 自動執行。使用 langsmith CLI 工具。
這項「langchain-ai/langsmith-evaluator」技能專為開發者設計，用於在 LangSmith 平台上建構評估管道。其核心功能分為三個部分：首先，支援建立 LLM-as-Judge 與自訂程式碼的評估器；其次，提供定義執行函式的方法，以便捕捉代理程式的輸出與執行軌跡；最後，支援透過 evaluate() 函式在本機執行評估，或透過 LangSmith 的自動執行功能進行。該技能依賴 langsmith CLI 工具，並相容於主流 AI 代理平台（如 Claude Code、Cursor 等），幫助開發者系統性地驗證與優化代理程式的表現，提升評估流程的效率與靈活性。
npx skills add https://github.com/langchain-ai/langsmith-skills/tree/main/skills/langsmith-evaluatorInstalled? Explore more 生產力與協作 skills: steipete/gemini, steipete/gh-issues, steipete/skill-creator · View all 6 →
當您需要為 LangSmith 建立評估管道時，請呼叫此技能。涵蓋三大核心元件：(1) 建立評估器 – LLM 作為評審、自訂程式碼；(2) 定義執行函式 – 如何捕捉代理程式的輸出與軌跡；(3) 執行評估 – 使用 evaluate() 在本機執行或透過 LangSmith 自動執行。使用 langsmith CLI 工具。
This repo contains 2 individual skills — each has its own dedicated page.
INVOKE THIS SKILL when creating evaluation datasets, uploading datasets to LangSmith, or managing existing datasets. Covers dataset types (final_response, single_step, trajectory, RAG), CLI management commands, SDK-based creation, and example management. Uses the langsmith CLI tool.
INVOKE THIS SKILL when working with LangSmith tracing OR querying traces. Covers adding tracing to applications and querying/exporting trace data. Uses the langsmith CLI tool.
Gemini CLI one-shot prompts, summaries, generation, skills, hooks, MCP, or Gemma routing.
Fetch GitHub issues, select candidates, spawn background fix agents, open PRs, and optionally process PR review comments.
Create, edit, audit, tidy, validate, or restructure AgentSkills and SKILL.md files.
Search, install, update, sync, or publish agent skills with the ClawHub CLI and registry.
Delegate coding work to Codex, Claude Code, or OpenCode as background workers; not simple edits or read-only code lookup.
List, configure, authenticate, call, and inspect MCP servers/tools with mcporter over HTTP or stdio.