KI und LLMs · Senior · Frage 39 von 75
Wie kann ein Team die Halluzinationsrate eines RAG-Assistenten messen?
- 1Nutzer fragen, ob sie glauben, dass der Assistent halluziniert
- 2Antworten stichprobenartig gegen Quellen prüfen, per Judge und Mensch
- 3Antworten zählen, die das Wort "vielleicht" enthalten
Antwort zeigen
Richtige Antwort: Antworten stichprobenartig gegen Quellen prüfen, per Judge und Mensch
Erklärung
Faithfulness-Bewertung auf einer regelmäßigen Stichprobe, kalibriert durch menschliche Prüfungen, ergibt einen Trend, auf den man reagieren kann.