AI i LLM · Middle · Pytanie 24 z 75
Jak sprawić, by sędzia LLM był wiarygodny?
- 1Prosić o ocenę na 100 bez żadnych kryteriów
- 2Użyć tego samego modelu, który generował odpowiedzi, bez zmian
- 3Skalibrować go z ocenami ludzi i dać jasną rubrykę
Pokaż odpowiedź
Poprawna odpowiedź: Skalibrować go z ocenami ludzi i dać jasną rubrykę
Wyjaśnienie
Mierz zgodność z ocenami ludzi na próbce. Konkretne rubryki („podaje okres zwrotu, bez zmyślonych opłat”) są lepsze niż mgliste „oceń jakość”.