AgentOps и MLOps — чек-лист
Загрузка вопросов…
Чек-лист самопроверки
| № | Вопрос | Подсказка (глава) |
|---|---|---|
| 1 | Назовите три столпа MLOps из раздела. | MLOps и LLM-стек — слои 1–3 |
| 2 | Что такое CRISP-ML и зачем feedback loop в ML-системе? | MLOps и LLM-стек — слои 1–3 |
| 3 | Какие задачи на слое 1 (источники данных)? | MLOps и LLM-стек — слои 1–3 |
| 4 | Зачем версионирование данных и чанкинг на L2? | MLOps и LLM-стек — слои 1–3 |
| 5 | Что хранят в model registry на L3? | MLOps и LLM-стек — слои 1–3 |
| 6 | Чем data drift отличается от concept drift? | MLOps и LLM-стек — слои 1–3 |
| 7 | Что такое embedding drift? | MLOps и LLM-стек — слои 1–3 |
| 8 | Назовите три столпа observability в AgentOps. | AgentOps и LLM-стек — слои 4–7 |
| 9 | Почему недетерминизм LLM — операционная проблема? | AgentOps и LLM-стек — слои 4–7 |
| 10 | Что версионировать в Git на слое 4? | AgentOps и LLM-стек — слои 4–7 |
| 11 | Зачем golden datasets для агента? | AgentOps и LLM-стек — слои 4–7 |
| 12 | Что такое prompt injection на attack surface агента? | AgentOps и LLM-стек — слои 4–7 |
| 13 | Зачем model routing и budget cap на L5? | AgentOps и LLM-стек — слои 4–7 |
| 14 | Какие CI/CD gates уместны для agent-generated changes? | AgentOps и LLM-стек — слои 4–7 |
| 15 | Что такое trust boundaries на L6? | AgentOps и LLM-стек — слои 4–7 |
| 16 | Зачем HITL на слое 7? | AgentOps и LLM-стек — слои 4–7 |
| 17 | Перечислите уровни eval для агентов. | AgentOps и LLM-стек — слои 4–7 |
| 18 | В чём риск LLM-as-judge? | AgentOps и LLM-стек — слои 4–7 |
| 19 | Где проходит граница MLOps ↔ AgentOps? | AgentOps и LLM-стек — слои 4–7, MLOps и LLM-стек — слои 1–3 |
| 20 | Чем MLOps отличается от DevOps в таблице раздела? | MLOps и LLM-стек — слои 1–3 |
| 21 | Назовите четыре пункта минимального AgentOps для MVP. | AgentOps и LLM-стек — слои 4–7 |
| 22 | Что входит в минимальный MLOps для RAG-MVP? | MLOps и LLM-стек — слои 1–3 |
| 23 | Что такое principal–agent problem в контексте бота? | AgentOps и LLM-стек — слои 4–7 |
| 24 | Какие роли (data, ML, platform) упомянуты в разделе? | AgentOps и LLM-стек — слои 4–7, MLOps и LLM-стек — слои 1–3 |
| 25 | Куда вести после раздела по семи слоям и DevOps AgentOps? | intro |
Итоги раздела — AgentOps и MLOps — итоги.