Les nouvelles invites sont-elles vraiment meilleures ? Comparer avec Promptfoo les anciens et nouveaux modèles d’article selon un schéma d’assertions à 3 niveaux
Réponse directe : une nouvelle invite n’est pas forcément meilleure, et « ça a l’air mieux » ne constitue pas une preuve. Pour savoir lequel de l’ancien et du nouveau gabarit d’article est le meilleur, il faut figer les sources, le modèle et les paramètres de génération, ne changer que le gabarit, puis utiliser les…
