Utilisez cette compétence pour créer des jeux de données d'évaluation, les télécharger sur LangSmith, ou gérer des jeux de données existants. Couvre les types de jeux de données (final_response, single_step, trajectory, RAG), les commandes de gestion via CLI, la création par SDK, et la gestion des exemples. Utilise l'outil CLI langsmith.
Cette compétence vous aide à gérer les jeux de données d'évaluation pour vos agents IA ou applications LLM via la plateforme LangSmith. Elle couvre l'ensemble du cycle de vie : création de jeux de données, téléchargement, gestion des exemples, et utilisation de types spécifiques comme final_response, single_step, trajectory, ou RAG. Elle s'appuie sur l'outil CLI `langsmith` pour les opérations courantes (push, pull, list, delete) et propose également des méthodes via le SDK Python pour une automatisation plus fine. En résumé, elle centralise la gestion des ensembles de données d'évaluation, essentiels pour mesurer et améliorer les performances de vos modèles et agents de façon reproductible.
npx skills add https://github.com/langchain-ai/langsmith-skills/tree/main/skills/langsmith-datasetInstalled? Explore more Développement et programmation skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →
UTILISEZ CETTE COMPÉTENCE lorsque vous créez des jeux de données d'évaluation, téléchargez des jeux de données sur LangSmith, ou gérez des jeux de données existants. Couvre les types de jeux de données (final_response, single_step, trajectory, RAG), les commandes de gestion via CLI, la création par SDK, et la gestion des exemples. Utilise l'outil CLI langsmith.
This repo contains 2 individual skills — each has its own dedicated page.
INVOKE THIS SKILL when building evaluation pipelines for LangSmith. Covers three core components: (1) Creating Evaluators - LLM-as-Judge, custom code; (2) Defining Run Functions - how to capture outputs and trajectories from your agent; (3) Running Evaluations - locally with evaluate() or auto-run via LangSmith. Uses the langsmith CLI tool.
INVOKE THIS SKILL when working with LangSmith tracing OR querying traces. Covers adding tracing to applications and querying/exporting trace data. Uses the langsmith CLI tool.
Send and manage iMessages via BlueBubbles, including attachments, tapbacks, edits, replies, and groups.
Control Eight Sleep pods (status, temperature, alarms, schedules).
BluOS CLI (blu) for discovery, playback, grouping, and volume.
Create, search, and manage Bear notes via grizzly CLI.
Capture frames or clips from RTSP/ONVIF cameras.
Search GIF providers with CLI/TUI, download results, and extract stills/sheets.