ШІ та LLM · Junior · Запитання 70 з 75
Чому evals запускають на багатьох прикладах, а не на одному?
- 1Виходи різняться, тож частка успіхів показує справжню якість
- 2Провайдери вимагають щонайменше 100 запитів на тест
- 3Один приклад коштує дорожче за багато
Показати відповідь
Правильна відповідь: Виходи різняться, тож частка успіхів показує справжню якість
Пояснення
Функція, що проходить 92 зі 100 кейсів, каже більше, ніж одна гарна відповідь. Стежте за цією часткою між версіями.