Evals (KI-Evaluation)

Evals sind festgelegte Kriterien und Testfälle, mit denen die Ausgabe eines KI-Modells bewertet wird. Weil KI-Ergebnisse nicht bei jedem Durchlauf identisch ausfallen, reicht ein einfaches Hat-funktioniert-oder-nicht nicht aus – es braucht Maßstäbe dafür, was eine gute Antwort überhaupt ausmacht.

BeispielOb eine Datei bei Stripe liegt, ist eindeutig prüfbar. Ob die KI den passenden inhaltlichen Blickwinkel gewählt hat, braucht Evals mit definierten Qualitätskriterien.