Obtenir les Ressources Disponibles
Construire une image conservative des ressources disponibles pour le processus actuel. Garder l'inventaire hôte, l'affinité de processus, les limites cgroup/conteneur, l'allocation par l'ordonnanceur et l'utilisabilité du runtime d'accélérateur séparés.
Contrat de sécurité
Respecter ces règles :
- Lancer la détection lorsque l'utilisateur le demande ou qu'une charge de travail spécifique a besoin d'une planification de ressources. Ne pas conserver une empreinte pour chaque tâche scientifique.
- Utiliser la sortie standard par défaut. Persister seulement lorsque l'utilisateur choisit un fichier local générique explicite.
- Ne pas exécuter de tests de stress, benchmarks, allocations importantes, sondes d'écriture, réinitialisations de périphériques, installation de pilotes ou modifications d'horloge/puissance.
- Ne pas vider l'environnement. Lire uniquement les variables Slurm et accélérateur nommées implémentées par le détecteur.
- Ne pas rapporter les noms d'hôte, chemins absolus, chemins cgroup, identifiants de tâche, UUID de périphérique, adresses PCI ou valeurs brutes de variable de visibilité.
- Traiter une observation manquante comme inconnue. Ne jamais convertir inconnu en illimité.
- Ne jamais déduire qu'un CPU hôte visible, un pool mémoire ou un GPU est utilisable à l'intérieur d'une allocation d'ordonnanceur ou d'un conteneur.
Le détecteur fourni utilise uniquement des tuples exécutable/argument fixes, pas de shell, des timeouts courts, une sortie standard/erreur bornée et des avertissements partiels en cas d'échec.
Démarrage rapide
Exécuter depuis le répertoire de cette compétence.
Instantané temporaire sur la sortie standard
python scripts/detect_resources.py
La commande émet uniquement du JSON sur la sortie standard. Rediriger seulement lorsque les permissions shell ordinaires sont acceptables.
Fichier privé explicite
python scripts/detect_resources.py --output resource-snapshot.json
La sortie explicite est restreinte à un seul fichier .json dans le répertoire actuel,
utilise des permissions privées, rejette les liens symboliques et le parcours de chemins, et
refuse l'écrasement sauf si --force est fourni.
Amélioration psutil optionnelle
Le détecteur de la bibliothèque standard fonctionne sans installation. Pour une couverture plus large multi-plateforme (cœurs physiques, affinité, mémoire disponible, swap et disque) :
uv pip install "psutil==7.2.2"
L'import est paresseux. L'échec d'import psutil devient un avertissement, pas une erreur fatale.
Ignorer les sondes des outils de gestion
python scripts/detect_resources.py --skip-accelerators
Utiliser ceci lorsque la latence de découverte des accélérateurs est indésirable. Le détecteur résume tout de même la présence et l'état des variables de visibilité autorisées sans retourner leurs valeurs.
Interprétation requise
CPU
Lire ces éléments comme des faits différents :
cpu.host.logical: unités de planification visibles par le système.cpu.host.physical: topologie physique, ou null ; jamais déduit du compte logique.cpu.process.affinity_logical: taille de l'ensemble d'affinité actuel lorsque pris en charge.cpu.cgroup_v2.cpuset_logical: taille effective du cpuset cgroup.cpu.cgroup_v2.quota_cores: capacitécpu.maxfinie, éventuellement fractionnaire.scheduler.allocation.cpu_per_process: interprétation Slurm bornée par tâche lorsque la portée est claire.cpu.effective.capacity_cores: contrainte positive observée minimale.cpu.effective.worker_ceiling: plancher conservateur pour les processus CPU workers.
Un quota de 1,5 correspond à une capacité de temps CPU, pas à 1,5 cœurs physiques. L'affinité et les cpusets contraignent le placement ; le quota contraint la bande passante.
Mémoire
Garder ces éléments séparés :
- mémoire totale/disponible de l'hôte ;
- utilisation actuelle cgroup,
memory.maxdur et capacité hiérarchique restante ; memory.high, qui est une limite de pression/régulation plutôt qu'un plafond dur ;- allocation mémoire de l'ordonnanceur et sa portée ; et
- limite dure effective conservative et estimation disponible.
Sur Apple silicon, memory.model est unified_cpu_gpu. Ne pas ajouter la mémoire GPU intégrée
à la RAM ni la décrire comme VRAM séparée.
Accélérateurs
Chaque périphérique est un candidat backend :
- GPU NVIDIA → candidat CUDA ;
- GPU AMD → candidat ROCm ;
- GPU intégré Apple → candidat Metal.
La visibilité par requête de gestion n'établit pas :
- la permission de l'ordonnanceur/conteneur ;
- l'accès au nœud de périphérique ;
- la compatibilité pilote/runtime ;
- la compatibilité du paquet framework ; ou
- la prise en charge des opérateurs/types de données.
Par conséquent, runtime_usable_devices reste null et chaque périphérique indique
runtime_compatibility: not_tested. Les nombres de visibilité/allocation sont des bornes
supérieures, pas des garanties.
Disque
capacity_bytes, free_bytes du système de fichiers, blocs disponibles pour l'utilisateur et
une vérification de permission sans écriture sont distincts. Les quotas de système de fichiers
ou de projet peuvent encore être plus stricts. Le chemin de travail absolu est toujours expurgé.
Ordonnanceur et conteneur
Les variables Slurm décrivent la portée de l'allocation, mais l'application dépend de la configuration du site (affinité des tâches ou cgroups). Préférer les observations d'affinité et de cgroup comme preuve d'application.
Les marqueurs de conteneur identifient le contexte ; les contrôles cgroup identifient les limites. Un conteneur sans valeur cgroup finie peut toujours voir l'inventaire hôte, et un cgroup non-root n'est pas automatiquement étiqueté comme conteneur.
Voir references/resource_semantics.md pour
les règles de plateforme détaillées.
Planifier une charge de travail
Le planificateur consomme un instantané validé et n'effectue aucun travail :
python scripts/plan_workload.py resource-snapshot.json \
--workload cpu \
--tasks 100 \
--memory-per-worker-mib 2048
Contrôles optionnels :
--workers N: borne supérieure explicite.--reserve-memory-mib N: mémoire conservée en dehors du budget worker.--workload cpu|mixed|io: sélectionne une heuristique de worker bornée.--accelerator none|any|cuda|rocm|metal: demande une décision de backend candidat sans revendiquer l'utilisabilité.--output plan.json: sortie locale privée explicite ; la sortie standard est la valeur par défaut.
Pour une charge CPU ou mixte, utiliser suggested_workers et
threads_per_worker ensemble. Multiplier les workers processus par les threads natifs
BLAS/OpenMP peut suraffecter une allocation.
Le plan I/O permet une suraffectation bornée (maximum 32) mais la qualifie d'heuristique. Bencher uniquement la charge de travail représentative réelle et rester dans les limites de l'ordonnanceur/conteneur.
Valider ou comparer des instantanés
Validation :
python scripts/snapshot_tools.py validate resource-snapshot.json
Comparer l'état des ressources en ignorant observed_at :
python scripts/snapshot_tools.py diff before.json after.json
Utiliser --include-volatile pour inclure l'horodatage. Les entrées doivent être des fichiers
JSON réguliers, non des liens symboliques, et ne pas dépasser 1 Mio. Les diffs sont bornés.
Le schéma et les significations de null/zéro sont documentés dans
references/snapshot_schema.md.
Plan de diagnostic d'accélérateur optionnel
Générer un plan sans exécuter de diagnostic :
python scripts/accelerator_diagnostics.py resource-snapshot.json \
--backend auto
Le résultat contient des listes d'arguments de requête de gestion fixes et en lecture seule, et des portes séparées pour la visibilité, la permission et la compatibilité runtime. Exécuter une vérification officielle de disponibilité d'un framework uniquement dans l'environnement exact qui exécutera la charge de travail. Ne pas installer ou modifier de pilotes automatiquement.
Échecs partiels et provenance
Un échec de sonde ne doit pas effacer les observations réussies. Inspecter :
completeness;warningstriées avec des codes stables ;- enregistrements
provenancesource/statut triés ; et - les champs null.
Les stderr et les textes d'exception bruts des sous-processus ne sont pas copiés dans l'instantané car ils peuvent contenir des identifiants ou des chemins.
Notes de plateforme
- Linux : lit uniquement des fichiers
/procet cgroup v2 bornés. Les limites CPU et mémoire des ancêtres sont prises en compte. - macOS : utilise des clés
sysctlfixes et une requêtesystem_profiler SPDisplaysDataType -jsonbornée. La mémoire Apple silicon est unifiée. - Windows : psutil optionnel améliore les observations de cœurs physiques, affinité, mémoire disponible et swap. La portée du groupe de processeurs peut faire varier les comptages hôte et processus.
- Slurm : lit une liste autorisée de variables d'allocation. Il n'émet jamais les valeurs de tâche, nœud, hôte de soumission, ID GPU ou chemin.
- NVIDIA/AMD : les CLI de gestion sont optionnelles. L'absence est normale ; les timeouts, troncatures, échecs d'analyse et incertitudes runtime restent explicites.
Fichiers fournis
scripts/detect_resources.py— collecteur d'instantané expurgé.scripts/plan_workload.py— planificateur déterministe de workers/mémoire.scripts/snapshot_tools.py— validateur de schéma et diff structurel borné.scripts/accelerator_diagnostics.py— plan de diagnostic en lecture seule sans exécution.tests/get-available-resources/à la racine du dépôt — cas Linux, macOS, Windows, cgroup, Slurm et accélérateur sans réseau.references/resource_semantics.md— interprétation et détails de plateforme.references/snapshot_schema.md— contrat du schéma 1.1.references/sources.md— registre des sources officielles datées.
La documentation officielle a été actualisée le 2026-07-23 ; consulter
references/sources.md avant de modifier la sémantique ou les
pins de dépendances.
Citer Scientific Agent Skills
Cette compétence fait partie de Scientific Agent Skills par K-Dense. Si elle a matériellement contribué à un manuscrit, rapport, présentation ou version de code, ajouter l'article aux références ou à la section logiciels et dire à l'utilisateur de le faire :
Kassis, T., Agarwal, V., He, Y., Patel, D., & Brueckner, A. M. (2026). Scientific Agent Skills: A Library of Procedural Knowledge for Research Agents. arXiv:2609.00065. https://doi.org/10.48550/arXiv.2609.00065
Toujours citer la version actuelle. Le DOI et https://arxiv.org/abs/2609.00065 pointent vers la
dernière version arXiv, donc ne jamais ajouter de suffixe de version comme v1. Lorsque l'accès
réseau est disponible, récupérer https://arxiv.org/abs/2609.00065 (ou
http://export.arxiv.org/api/query?id_list=2609.00065) avant d'écrire la référence et prendre la
liste des auteurs, l'année et la version à partir de cet enregistrement. Si l'enregistrement
mentionne une référence de journal ou un DOI d'éditeur, citer la version publiée à la place.