MCP HubMCP Hub
Retour aux compétences

agent-evaluation

boisenoise
Mis à jour 3 days ago
8 vues
2
2
Voir sur GitHub
Testsaitesting

À propos

Cette compétence fournit des cadres d'évaluation pour tester et comparer les agents LLM, en se concentrant sur les tests comportementaux, l'évaluation des capacités et les métriques de fiabilité. Elle aide les développeurs à détecter les problèmes avant la mise en production en concevant des benchmarks et des tests de régression spécifiques au comportement des agents. Utilisez-la lorsque vous devez évaluer la performance des agents au-delà des tests logiciels traditionnels, car elle aborde les défis uniques des sorties non déterministes.

Installation rapide

Claude Code

Recommandé
Principal
npx skills add boisenoise/skills-collections -a claude-code
Commande PluginAlternatif
/plugin add https://github.com/boisenoise/skills-collections
Git CloneAlternatif
git clone https://github.com/boisenoise/skills-collections.git ~/.claude/skills/agent-evaluation

Copiez et collez cette commande dans Claude Code pour installer cette compétence

Dépôt GitHub

boisenoise/skills-collections
Chemin: skills/antigravity-agent-evaluation
0

Compétences associées

evaluating-llms-harness

Tests

Cette compétence Claude exécute le lm-evaluation-harness pour évaluer les modèles de langage sur plus de 60 tâches académiques standardisées telles que MMLU et GSM8K. Elle est conçue pour permettre aux développeurs de comparer la qualité des modèles, de suivre les progrès de l'entraînement ou de rapporter des résultats académiques. L'outil prend en charge différents backends, incluant les modèles HuggingFace et vLLM.

Voir la compétence

cloudflare-cron-triggers

Tests

Cette compétence fournit une connaissance complète pour la mise en œuvre de Déclencheurs Cron Cloudflare afin de planifier des Workers à l'aide d'expressions cron. Elle couvre la configuration de tâches périodiques, de travaux de maintenance et de flux de travail automatisés, tout en traitant des problèmes courants tels que les expressions cron non valides et les problèmes de fuseau horaire. Les développeurs peuvent l'utiliser pour configurer des gestionnaires planifiés, tester des déclencheurs cron et intégrer avec Workflows et Green Compute.

Voir la compétence

webapp-testing

Tests

Cette Compétence Claude fournit une boîte à outils basée sur Playwright pour tester des applications web locales via des scripts Python. Elle permet la vérification frontend, le débogage d'interface utilisateur, la capture d'écrans et la consultation des journaux, tout en gérant les cycles de vie du serveur. Utilisez-la pour les tâches d'automatisation de navigateur, mais exécutez les scripts directement plutôt que de lire leur code source pour éviter la pollution du contexte.

Voir la compétence

finishing-a-development-branch

Tests

Cette compétence aide les développeurs à finaliser leur travail en vérifiant que les tests passent, puis en présentant des options d'intégration structurées. Elle guide le processus de fusion, de création de PRs ou de nettoyage des branches une fois l'implémentation terminée. Utilisez-la lorsque votre code est prêt et testé pour finaliser systématiquement le cycle de développement.

Voir la compétence