AI i LLM · Middle · Pytanie 42 z 75
Jak bezpiecznie zrobić test A/B dwóch promptów na produkcji?
- 1Przełączyć wszystkich na nowy prompt i porównać z wczorajszymi danymi
- 2Zapytać kilku kolegów, który prompt bardziej im się podoba
- 3Podzielić ruch, mierzyć ustalone metryki i najpierw zrobić ewaluacje offline
Pokaż odpowiedź
Poprawna odpowiedź: Podzielić ruch, mierzyć ustalone metryki i najpierw zrobić ewaluacje offline
Wyjaśnienie
Ewaluacje offline łapią oczywiste regresje; metryki online jak odsetek rozwiązanych spraw i opinie pokazują realny efekt.