KI und LLMs · Middle · Frage 67 von 75
Was bedeutet "pass@k" bei codeerzeugenden Modellen?
- 1Die Chance, dass mindestens eine von k Proben die Tests besteht
- 2Die Zahl der Tests, die erst beim k-ten Versuch bestehen
- 3Der Anteil von k Nutzern, die den erzeugten Code annehmen
Antwort zeigen
Richtige Antwort: Die Chance, dass mindestens eine von k Proben die Tests besteht
Erklärung
Es misst die Fähigkeit, wenn man mehrere Proben probieren und prüfen kann, üblich in Code-Benchmarks.