Benchmark des agents de codage OpenClaw sur des tâches réelles reproductibles avant déploiement avec PinchBench
Exécutez une suite de benchmarks basée sur des tâches réelles contre les agents OpenClaw afin de comparer les changements de modèle ou de harnais avant leur déploiement en production.
Prérequis
Instance OpenClaw en cours d'exécution, Python 3.10+, uv, dépôt PinchBench cloné, identifiants de fournisseur de modèle comme documenté en amont.
Installation
Utilisez la méthode d'installation ou de configuration en amont qui correspond à votre environnement :
- git clone https://github.com/pinchbench/skill.git
Exigences et mises en garde de la documentation amont :
- Remarque : Les identifiants de modèle doivent inclure leur préfixe de fournisseur (par ex. openrouter/, anthropic/). OpenRouter est le fournisseur par défaut utilisé pour le routage.
- Python 3.10+
Notes sur l'utilisation de base ou la prise en main :
-
Utilisation des outils — Le modèle peut-il appeler les bons outils avec les bons paramètres ?
-
bash
-
Clonez la compétence
-
Source : https://github.com/pinchbench/skill
-
Extrait de la documentation amont : https://raw.githubusercontent.com/pinchbench/skill/HEAD/README.md