INVOCA ESTA HABILIDAD al crear conjuntos de datos de evaluación, subirlos a LangSmith o gestionar conjuntos de datos existentes. Cubre tipos de conjuntos de datos (final_response, single_step, trajectory, RAG), comandos de gestión CLI, creación basada en SDK y gestión de ejemplos. Utiliza la herramienta CLI de langsmith.
Esta habilidad está diseñada para desarrolladores e ingenieros que trabajan con flujos de agentes de LangChain y necesitan gestionar conjuntos de datos de evaluación en LangSmith. Proporciona orientación sobre cómo crear, subir y administrar conjuntos de datos utilizando la herramienta de línea de comandos `langsmith`. Cubre los cuatro tipos principales de conjuntos de datos: `final_response` (respuesta final), `single_step` (paso único), `trajectory` (trayectoria completa) y `RAG` (Generación Aumentada por Recuperación), explicando cuándo usar cada uno. También detalla cómo gestionar ejemplos dentro de los conjuntos de datos, ya sea mediante subida por lotes con la CLI o creándolos de forma programática con el SDK de LangSmith. Es útil para cualquier flujo de trabajo que requiera evaluación sistemática de agentes de IA, permitiendo subir datos de prueba de manera estructurada.
npx skills add https://github.com/langchain-ai/langsmith-skills/tree/main/skills/langsmith-datasetInstalled? Explore more Programación y desarrollo skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →
INVOCA ESTA HABILIDAD al crear conjuntos de datos de evaluación, subirlos a LangSmith o gestionar conjuntos de datos existentes. Cubre tipos de conjuntos de datos (final_response, single_step, trajectory, RAG), comandos de gestión CLI, creación basada en SDK y gestión de ejemplos. Utiliza la herramienta CLI de langsmith.
This repo contains 2 individual skills — each has its own dedicated page.
INVOKE THIS SKILL when building evaluation pipelines for LangSmith. Covers three core components: (1) Creating Evaluators - LLM-as-Judge, custom code; (2) Defining Run Functions - how to capture outputs and trajectories from your agent; (3) Running Evaluations - locally with evaluate() or auto-run via LangSmith. Uses the langsmith CLI tool.
INVOKE THIS SKILL when working with LangSmith tracing OR querying traces. Covers adding tracing to applications and querying/exporting trace data. Uses the langsmith CLI tool.
Send and manage iMessages via BlueBubbles, including attachments, tapbacks, edits, replies, and groups.
Control Eight Sleep pods (status, temperature, alarms, schedules).
BluOS CLI (blu) for discovery, playback, grouping, and volume.
Create, search, and manage Bear notes via grizzly CLI.
Capture frames or clips from RTSP/ONVIF cameras.
Search GIF providers with CLI/TUI, download results, and extract stills/sheets.