ШІ та LLM · Senior · Запитання 6 з 75
Новий промпт має 84% проти 82% на 50 кейсах. Який правильний висновок?
- 1Новий промпт явно кращий, і його треба випускати зараз
- 2Різниця може бути шумом; потрібно більше кейсів чи повторів
- 3Старий промпт кращий, бо менші зміни безпечніші
Показати відповідь
Правильна відповідь: Різниця може бути шумом; потрібно більше кейсів чи повторів
Пояснення
На малих вибірках із недетермінованими виходами 2 пункти часто в межах розкиду. Допомагають довірчі інтервали.