Перейти к основному содержимому

AgentOps и MLOps — чек-лист

Инженеру
Загрузка вопросов…

Чек-лист самопроверки

ВопросПодсказка (глава)
1Назовите три столпа MLOps из раздела.MLOps и LLM-стек — слои 1–3
2Что такое CRISP-ML и зачем feedback loop в ML-системе?MLOps и LLM-стек — слои 1–3
3Какие задачи на слое 1 (источники данных)?MLOps и LLM-стек — слои 1–3
4Зачем версионирование данных и чанкинг на L2?MLOps и LLM-стек — слои 1–3
5Что хранят в model registry на L3?MLOps и LLM-стек — слои 1–3
6Чем data drift отличается от concept drift?MLOps и LLM-стек — слои 1–3
7Что такое embedding drift?MLOps и LLM-стек — слои 1–3
8Назовите три столпа observability в AgentOps.AgentOps и LLM-стек — слои 4–7
9Почему недетерминизм LLM — операционная проблема?AgentOps и LLM-стек — слои 4–7
10Что версионировать в Git на слое 4?AgentOps и LLM-стек — слои 4–7
11Зачем golden datasets для агента?AgentOps и LLM-стек — слои 4–7
12Что такое prompt injection на attack surface агента?AgentOps и LLM-стек — слои 4–7
13Зачем model routing и budget cap на L5?AgentOps и LLM-стек — слои 4–7
14Какие CI/CD gates уместны для agent-generated changes?AgentOps и LLM-стек — слои 4–7
15Что такое trust boundaries на L6?AgentOps и LLM-стек — слои 4–7
16Зачем HITL на слое 7?AgentOps и LLM-стек — слои 4–7
17Перечислите уровни eval для агентов.AgentOps и LLM-стек — слои 4–7
18В чём риск LLM-as-judge?AgentOps и LLM-стек — слои 4–7
19Где проходит граница MLOps ↔ AgentOps?AgentOps и LLM-стек — слои 4–7, MLOps и LLM-стек — слои 1–3
20Чем MLOps отличается от DevOps в таблице раздела?MLOps и LLM-стек — слои 1–3
21Назовите четыре пункта минимального AgentOps для MVP.AgentOps и LLM-стек — слои 4–7
22Что входит в минимальный MLOps для RAG-MVP?MLOps и LLM-стек — слои 1–3
23Что такое principal–agent problem в контексте бота?AgentOps и LLM-стек — слои 4–7
24Какие роли (data, ML, platform) упомянуты в разделе?AgentOps и LLM-стек — слои 4–7, MLOps и LLM-стек — слои 1–3
25Куда вести после раздела по семи слоям и DevOps AgentOps?intro

Итоги раздела — AgentOps и MLOps — итоги.