Dieses Skill wird bei der Erstellung von Evaluierungsdatensätzen, beim Hochladen von Datensätzen zu LangSmith oder bei der Verwaltung vorhandener Datensätze verwendet. Es behandelt Datensatztypen (final_response, single_step, trajectory, RAG), CLI-Verwaltungsbefehle, SDK-basierte Erstellung und Beispielverwaltung. Es verwendet das langsmith CLI-Tool.
Dieses Skill automatisiert die Erstellung und Verwaltung von Datensätzen in LangSmith, einer Plattform zum Debuggen, Testen und Evaluieren von LLM-Anwendungen. Es unterstützt verschiedene Datensatztypen wie final_response, single_step, trajectory und RAG, sodass Entwickler Evaluierungsdatensätze an ihre spezifischen Anwendungsfälle anpassen können. Das Skill bietet sowohl CLI-Befehle zur schnellen Verwaltung als auch die Möglichkeit, Datensätze programmatisch über das LangSmith SDK zu erstellen und zu aktualisieren. Es ermöglicht das Hochladen von Beispielen in bestehende Datensätze, das Verwalten von Metadaten und das Synchronisieren mit LangSmith, was den gesamten Workflow von der Erstellung bis zur Evaluierung effizient gestaltet.
npx skills add https://github.com/langchain-ai/langsmith-skills/tree/main/skills/langsmith-datasetInstalled? Explore more Codierung & Entwicklung skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →
DIESES SKILL AUFRUFEN, wenn Evaluierungsdatensätze erstellt, Datensätze zu LangSmith hochgeladen oder vorhandene Datensätze verwaltet werden sollen. Behandelt Datensatztypen (final_response, single_step, trajectory, RAG), CLI-Verwaltungsbefehle, SDK-basierte Erstellung und Beispielverwaltung. Es verwendet das langsmith CLI-Tool.
This repo contains 2 individual skills — each has its own dedicated page.
INVOKE THIS SKILL when building evaluation pipelines for LangSmith. Covers three core components: (1) Creating Evaluators - LLM-as-Judge, custom code; (2) Defining Run Functions - how to capture outputs and trajectories from your agent; (3) Running Evaluations - locally with evaluate() or auto-run via LangSmith. Uses the langsmith CLI tool.
INVOKE THIS SKILL when working with LangSmith tracing OR querying traces. Covers adding tracing to applications and querying/exporting trace data. Uses the langsmith CLI tool.
Send and manage iMessages via BlueBubbles, including attachments, tapbacks, edits, replies, and groups.
Control Eight Sleep pods (status, temperature, alarms, schedules).
BluOS CLI (blu) for discovery, playback, grouping, and volume.
Create, search, and manage Bear notes via grizzly CLI.
Capture frames or clips from RTSP/ONVIF cameras.
Search GIF providers with CLI/TUI, download results, and extract stills/sheets.