Testy obciążeniowe · Senior · Pytanie 11 z 76
Jak zdecydować, czy zmiana opóźnienia między dwoma buildami jest prawdziwa?
- 1Porównać średnie, bo różnica 5% jest zawsze istotna
- 2Porównać maksymalne opóźnienie z jednego przebiegu każdego buildu
- 3Porównać rozkłady z powtórzonych przebiegów testem statystycznym
Pokaż odpowiedź
Poprawna odpowiedź: Porównać rozkłady z powtórzonych przebiegów testem statystycznym
Wyjaśnienie
Kilka przebiegów na build i test jak Manna-Whitneya lub przedziały ufności z bootstrapu oddzielają sygnał od szumu. Pojedyncze przebiegi wprowadzają w błąd.