Ori Eval : # Trouvez le meilleur modèle pour ce que vous développez
01──Trouvez le meilleur modèle, preuves à l’appui
Il suffit de demander. Votre agent transmettra la requête à Ori Eval, qui explore votre base de code, exécute des évaluations sur les modèles et vous apporte une réponse.
02──Vous débutez avec les évaluations ? Nous déterminons avec vous ce qu’il faut tester
Vous n’avez jamais écrit d’évaluation ? Ori Eval analyse votre base de code pour repérer chaque endroit où un modèle s’exécute — l’interface concernée, l’emplacement du code, le modèle utilisé actuellement — et vérifie celui pour lequel vous souhaitez des évaluations. Il vous guide comme le ferait un ami ingénieur expérimenté.
03──Des résultats cohérents et fiables, exécution après exécution
Garder le banc de test identique d’une exécution à l’autre rend les évaluations reproductibles et cohérentes. C’est pourquoi Ori Eval est un agent : contrairement à une Skill, il peut fixer le modèle et le niveau d’effort. Il est préconfiguré — nous avons déjà choisi le harness et le modèle qui fonctionnent le mieux, pour que vous n’ayez pas à le faire.
04──Détectez un bug avant de le corriger
Chaque bug devient un test : il échoue pour le moment, réussit une fois l’agent corrigé et empêche le bug de réapparaître.
05──Stoppez les régressions avant leur mise en production
En CI, une modification incorrecte fait échouer le build, de sorte que les bugs n’atteignent jamais vos utilisateurs.
06──Relancer à la sortie de nouveaux modèles
Vos évaluations ne sont que du code. Relancez-les manuellement à la sortie d’un nouveau modèle, ou programmez-les chaque mois. Vous pouvez dormir tranquille en sachant que vous disposez toujours du meilleur modèle pour ce que vous développez.
07──Sachez qu’il a fait ce qu’il fallait
Une évaluation vérifie trois choses : les outils que l’agent a appelés, ceux qu’il a évités et la qualité de la réponse — pour que vous détectiez les erreurs avant vos utilisateurs.