ШІ та LLM · Middle · Запитання 75 з 75
Навіщо прогнати власні evals на новій моделі перед переходом на неї?
- 1Бенчмарки не показують якість на ваших задачах
- 2Провайдери забороняють змінювати моделі без погодження
- 3Нові моделі завжди дають гірші відповіді за старіші
Показати відповідь
Правильна відповідь: Бенчмарки не показують якість на ваших задачах
Пояснення
Модель, що краща в публічних рейтингах, може зламати ваш JSON-формат чи тон. Ваш набір evals - справжній приймальний тест.