KI und LLMs · Middle · Frage 26 von 75
Wie sollte eine LLM-Eval-Suite in CI genutzt werden?
- 1Nur in Produktion mit echten Nutzern laufen lassen
- 2Einmal vor dem Launch laufen lassen und dann nie wieder
- 3Bei Prompt- oder Modelländerungen laufen, bei Abfall scheitern
Antwort zeigen
Richtige Antwort: Bei Prompt- oder Modelländerungen laufen, bei Abfall scheitern
Erklärung
Schwellen pro Metrik machen Promptänderungen sicher, wie Unit-Tests für Code. Eine schnelle Teilmenge pro PR, der volle Lauf nachts.