# Model Evaluation · Veille technologique

[Source canonique](<https://sebastien.rigaux.be/veille/tags/model-evaluation>)

Évaluation des modèles et agents sur des tâches, critères et jeux de tests explicites.

## [Boucles d’agents en C\# avec Microsoft Agent Framework](<https://sebastien.rigaux.be/veille/liens/boucles-dagents-en-c-avec-microsoft-agent-framework>)

Les boucles d’agents enchaînent action, observation et évaluation pour affiner une réponse ou retenter une opération jusqu’à satisfaire un critère. Jesse Liberty illustre le principe en C# avec Microsoft Agent Framework : un agent de boucle, un évaluateur et une limite d’itérations.

L’exemple distingue un marqueur déterministe comme `DONE` d’un évaluateur basé sur un modèle juge, puis détaille les garde-fous à prévoir : délais, appels idempotents, journalisation et suivi des coûts. Chaque itération ajoute en effet latence et consommation de tokens.

2026-11-02 · [Markdown](<https://sebastien.rigaux.be/veille/liens/boucles-dagents-en-c-avec-microsoft-agent-framework.md>) · [Ressource originale](<https://jesseliberty.com/2026/10/26/prompts-are-dead-long-live-loops/>)

## [WebMCP : des outils pour inspecter, tester et déboguer](<https://sebastien.rigaux.be/veille/liens/webmcp-des-outils-pour-inspecter-tester-et-deboguer>)

Ce repository rassemble des outils pour travailler avec l’API WebMCP : une extension Chrome inspecte les outils exposés par une page, leurs schémas d’entrée et les problèmes de connexion ; une CLI évalue la capacité des LLM à appeler les bons outils à partir de cas de test définis.

Des démonstrations montrent aussi les intégrations déclaratives et impératives dans des interfaces concrètes. L’ensemble aide à passer de l’expérimentation à des tests plus structurés, sans masquer que le projet vise à soutenir l’adoption d’une API WebMCP encore en développement.

2026-10-22 · [Markdown](<https://sebastien.rigaux.be/veille/liens/webmcp-des-outils-pour-inspecter-tester-et-deboguer.md>) · [Ressource originale](<https://github.com/GoogleChromeLabs/webmcp-tools>)

## [SkillOpt : optimiser des skills d’agents par essais et évaluation](<https://sebastien.rigaux.be/veille/liens/skillopt-optimiser-des-skills-d-agents-par-essais-et-evaluation>)

SkillOpt traite la skill elle-même comme un artefact à faire évoluer : l’agent exécute des tâches, reçoit une évaluation, puis la procédure est ajustée. Le projet garde le modèle et le harness fixes pour comparer les changements de consignes.

2026-07-14 · [Markdown](<https://sebastien.rigaux.be/veille/liens/skillopt-optimiser-des-skills-d-agents-par-essais-et-evaluation.md>) · [Ressource originale](<https://microsoft.github.io/SkillOpt/>)

## [Mastra : développer et observer des agents en TypeScript](<https://sebastien.rigaux.be/veille/liens/mastra-developper-et-observer-des-agents-en-typescript>)

Mastra regroupe outils, workflows, traces et évaluations pour construire des agents TypeScript. Le framework permet de suivre leur exécution et d’améliorer leur comportement au fil des essais.

2025-07-18 · [Markdown](<https://sebastien.rigaux.be/veille/liens/mastra-developper-et-observer-des-agents-en-typescript.md>) · [Ressource originale](<https://mastra.ai/>)