Питання на співбесіді з ШІ та LLM (Junior) з відповідями
75 запитань для співбесіди з теми ШІ та LLM (Junior) - з правильними відповідями, поясненнями й посиланнями на документацію.
Пройти цей тест- 1.Що по суті робить велика мовна модель (LLM)?
- 2.Що таке токен у контексті LLM?
- 3.Чому той самий текст українською часто займає більше токенів, ніж англійською?
- 4.Що таке контекстне вікно моделі?
- 5.Що контролює параметр temperature?
- 6.Яка температура підходить для витягування полів рахунку в JSON?
- 7.Що таке галюцинація LLM?
- 8.Що таке knowledge cutoff моделі?
- 9.Що таке системний промпт?
- 10.API чатів зазвичай не зберігають стан. Що це означає для застосунку?
- 11.Що таке few-shot промптинг?
- 12.Навіщо просити модель міркувати крок за кроком перед відповіддю на складні задачі?
- 13.Як зазвичай тарифікують виклики API LLM?
- 14.Чому чат-інтерфейси часто показують відповідь потоком, токен за токеном?
- 15.Що означає, що відповідь зупинилася через ліміт max tokens?
- 16.Що таке ембединг?
- 17.Чим семантичний пошук на ембедингах відрізняється від пошуку за ключовими словами?
- 18.Що таке retrieval-augmented generation (RAG)?
- 19.Чому для RAG документи ділять на чанки?
- 20.Коли RAG зазвичай кращий вибір, ніж fine-tuning?
- 21.Що таке fine-tuning?
- 22.Що таке tool use (виклик функцій)?
- 23.Хто насправді виконує інструмент, який просить викликати модель?
- 24.Що таке AI-агент простими словами?
- 25.Що таке Model Context Protocol (MCP)?
- 26.Навіщо просити в моделі структурований вивід на кшталт JSON?
- 27.Де у вебзастосунку має лежати API-ключ провайдера LLM?
- 28.Що має зробити застосунок, коли API LLM повертає
429? - 29.Що таке prompt injection?
- 30.Чим небезпечна непряма prompt injection?
- 31.Яка безпечна звичка при використанні публічних ШІ-чатів на роботі?
- 32.Чому код від ШІ-асистента треба рев'ювати?
- 33.Чому тестувати функцію на LLM складніше, ніж звичайний код?
- 34.Що таке eval для функції на LLM?
- 35.Яка перевірка надійна для LLM, що має повертати категорію з фіксованого списку?
- 36.Що таке golden dataset у тестуванні LLM?
- 37.Що таке LLM-as-a-judge?
- 38.Навіщо версіонувати промпти як код?
- 39.Чи гарантує temperature 0 однакові відповіді щоразу?
- 40.Що робить top-p (nucleus sampling)?
- 41.Яка роль механізму attention у трансформері?
- 42.Чим pre-training відрізняється від instruction tuning?
- 43.Що таке RLHF?
- 44.Що таке мультимодальна модель?
- 45.Який типовий компроміс між великою й малою моделлю?
- 46.Навіщо писати в промпті чіткі вимоги до виводу, як-от «до 50 слів»?
- 47.Що таке guardrail у застосунку на LLM?
- 48.Чому ШІ-функція має показувати джерела, коли відповідає з документів?
- 49.Що стається, коли розмова стає довшою за контекстне вікно?
- 50.З чим допомагає prompt caching?
- 51.Чому дуже довгі промпти з багатьма документами можуть давати гірші відповіді?
- 52.Що таке упередженість (bias) у виходах ШІ?
- 53.Чому користувачам слід казати, що вони спілкуються з ШІ?
- 54.Що таке reasoning-модель (модель із міркуванням)?
- 55.Що має робити ШІ-чат, коли не знає відповіді?
- 56.Навіщо обережно логувати промпти й відповіді ШІ-функції в продакшені?
- 57.Що означає, що вихід LLM недетермінований?
- 58.Яка проста автоматична перевірка відповіді чат-бота?
- 59.Яка роль векторної бази даних у RAG?
- 60.Чому ШІ-функція може відмовити в безневинному запиті?
- 61.Що таке red teaming для ШІ-застосунку?
- 62.Що таке джейлбрейк?
- 63.Чому інструменти AI-агента мають слідувати принципу найменших привілеїв?
- 64.Що таке «human in the loop» для ШІ-функцій?
- 65.З чим AI SDK, наприклад від Vercel, допомагає веброзробнику?
- 66.Навіщо в промптах відділяти інструкції від даних користувача, наприклад тегами?
- 67.Як зменшити галюцинації у відповіді про політику компанії?
- 68.Що означає «model drift» для ШІ-функції?
- 69.Який головний ризик довіряти згенерованому ШІ SQL без перевірок?
- 70.Чому evals запускають на багатьох прикладах, а не на одному?
- 71.З чого складається «контекст» чат-бота в типовому застосунку?
- 72.Що означає «grounded» відповідь ШІ?
- 73.Чому довгі відповіді займають помітно більше часу, ніж довгі промпти?
- 74.Навіщо давати моделі роль, як-от «Ти агент підтримки компанії X»?
- 75.Які дані ніколи не можна надсилати сторонній LLM без погодження?