Ist die neue Eingabeaufforderung wirklich besser? Vergleich alter und neuer Artikelvorlagen mit Promptfoo anhand eines 3-Ebenen-Assertion-Ansatzes
Direkte Antwort: Eine neue Eingabeaufforderung ist nicht automatisch besser – und „sieht besser aus“ ist kein Beweis. Um zu beurteilen, welche Artikelvorlage – die alte oder die neue – besser ist, sollten Quellmaterial, Modell und Generierungseinstellungen konstant gehalten, nur die Vorlage geändert und anschließend mit Promptfoo-Assertions stufenweise Struktur, Reihenfolge und inhaltliche Qualität geprüft werden. Ergebnisse…
