Benchmark IT-Automatisierungsagenten für realistische SRE-, CISO- und FinOps-Szenarien mit ITBench
Führe realistische Unternehmens-IT-Szenarien aus, bevor du einen Automatisierungsagenten in der Produktion einsetzt.
Voraussetzungen
Python-Umgebung, Benchmark-Abhängigkeiten, Zugriff auf unterstützte Szenario-Umgebungen oder selbst gehostete Setup-Tools, Ziel-Agentenimplementierung
Installation
Grundlegende Nutzung oder Einstiegshinweise:
-
Das ITBench-Leaderboard verfolgt die Leistung von Agenten in SRE-, FinOps- und CISO-Szenarien. Wir stellen vollständig verwaltete Szenario-Umgebungen bereit, während Forscher/Entwickler ihre Agenten auf ihren eigenen Systemen ausführen und die Ergebnisse einreichen...
-
Fragen oder Hilfe beim Einstieg in ITBench?
-
Aus den upstream-Dokumenten extrahiert: https://raw.githubusercontent.com/itbench-hub/ITBench/HEAD/README.md