AI i LLM · Middle · Pytanie 67 z 75
Co oznacza „pass@k” dla modeli generujących kod?
- 1Szansę, że co najmniej jedna z k prób przejdzie testy
- 2Liczbę testów, które przechodzą tylko przy k-tej próbie
- 3Odsetek z k użytkowników akceptujących wygenerowany kod
Pokaż odpowiedź
Poprawna odpowiedź: Szansę, że co najmniej jedna z k prób przejdzie testy
Wyjaśnienie
Mierzy zdolność, gdy można spróbować kilku wariantów i je sprawdzić; to częste w benchmarkach kodu.