ШІ та LLM · Senior · Запитання 68 з 75
Як не допустити, щоб набір evals тестував лише те, про що команда вже подумала?
- 1Давати моделі щотижня вигадувати всі нові кейси
- 2Наповнювати його збоями з продакшену, знахідками red team і відгуками
- 3Тримати ті самі кейси назавжди, щоб бали були порівнянні
Показати відповідь
Правильна відповідь: Наповнювати його збоями з продакшену, знахідками red team і відгуками
Пояснення
Evals мають розвиватися з реальним використанням, а стабільне ядро тримає результати порівнянними в часі.