AI i LLM · Senior · Pytanie 39 z 75
Jak zespół może zmierzyć odsetek halucynacji asystenta RAG?
- 1Pytać użytkowników, czy uważają, że asystent halucynuje
- 2Sprawdzać próbki twierdzeń ze źródłami, sędzią i ludźmi
- 3Liczyć odpowiedzi zawierające słowo „może”
Pokaż odpowiedź
Poprawna odpowiedź: Sprawdzać próbki twierdzeń ze źródłami, sędzią i ludźmi
Wyjaśnienie
Ocena faithfulness na regularnej próbce, skalibrowana sprawdzeniami ludzi, daje trend, na który można reagować.