Sandbox: Prompt-Score mit Gewichten
Eval-Resultate sind Vektoren, kein einzelner Wert. Wer gewichtet, entscheidet, wer gewinnt.
Sandbox: Prompt-Bewertung mit Gewichten
Drei Prompt-Varianten wurden auf 4 Kriterien (1-5) bewertet. Stelle die Gewichte ein — der Sieger ändert sich:
| Variante | Clarity | Correctness | Brevity | Safety | Total |
|---|---|---|---|---|---|
| Variante A (basic) | 3 | 4 | 5 | 5 | 4.10 |
| Variante B (mit Beispielen) | 5 | 5 | 3 | 5 | 4.70 |
| Variante C (Chain-of-Thought) | 4 | 5 | 2 | 4 | 4.10 |
Sieger: Variante B (mit Beispielen) mit 4.70
Lehre: jedes Eval hat IMPLIZITE Gewichte. Macht sie EXPLIZIT — sonst optimierst du auf was, das du gar nicht haben willst. Beispiel: wenn Brevity 0 wiegt, gewinnt der längste Prompt — ist das, was du willst?
Zurück zu KI