KI und LLMs · Middle · Frage 42 von 75
Wie testet man zwei Prompts in Produktion sicher per A/B-Test?
- 1Alle Nutzer auf den neuen Prompt umstellen und mit gestern vergleichen
- 2Ein paar Kollegen fragen, welcher Prompt ihnen besser gefällt
- 3Traffic aufteilen, vereinbarte Metriken messen und vorher Offline-Evals fahren
Antwort zeigen
Richtige Antwort: Traffic aufteilen, vereinbarte Metriken messen und vorher Offline-Evals fahren
Erklärung
Offline-Evals fangen offensichtliche Regressionen; Online-Metriken wie Lösungsquote und Feedback zeigen die echte Wirkung.