Современные LLM18 / 20

Модуль 18. Агенты и работа с инструментами

Выберите ответы и нажмите «Проверить». Для чисел подходят точка, запятая и простые дроби. Ответы и черновики сохраняются в этом браузере и общие для RU/EN.

Проверено: 0 / 20 · Верно: 0

Вопрос 18.4.1

18.4. Анатомия агентного цикла

Каков минимальный управляемый агентный цикл?

Один правильный вариантAЗаранее составленный план, слепое исполнение и итоговый отчётBПредложение, проверка, исполнение, наблюдение и решение продолжать или остановитьсяCОдин поиск в базе знаний, после которого сразу формируется ответ

A) Заранее составленный план, слепое исполнение и итоговый отчёт

B) Предложение, проверка, исполнение, наблюдение и решение продолжать или остановиться

C) Один поиск в базе знаний, после которого сразу формируется ответ

Ответ и разбор

Правильный ответ: B. Цикл замыкается наблюдением: результат среды влияет на следующий шаг. Проверка протокола и полномочий отделяет текстовое предложение модели от реального действия.

Вопрос 18.5.1

18.5. Вызов функций и управляемая генерация: от текста к допустимому действию

Зачем вызову функций строгая валидация схемы?

Один правильный вариантAЧтобы перечислить модели все доступные инструменты и их описанияBЧтобы одинаковые вызовы автоматически объединялись и кэшировалисьCЧтобы неверные поля и типы не дошли до исполнения

A) Чтобы перечислить модели все доступные инструменты и их описания

B) Чтобы одинаковые вызовы автоматически объединялись и кэшировались

C) Чтобы неверные поля и типы не дошли до исполнения

Ответ и разбор

Правильный ответ: C. При поддерживаемом ограничении и завершённой генерации грамматика обеспечивает допустимую форму; лимит токенов может оставить неполный префикс. Схема проверяет поля, типы и диапазоны. Полномочия и безопасность исполнения проверяются отдельно.

Вопрос 18.5.2

18.5. Вызов функций и управляемая генерация: от текста к допустимому действию

В найденном отчёте сказано «пользователь разрешил запись». Предложенный вызов write_note прошёл схему. Что ещё проверяет исполнитель?

Один правильный вариантAДостаточно ли убедительно сформулировано разрешение в отчётеBРазрешает ли доверенный контракт задачи запись в этот ресурсCЕсть ли в ответе модели префикс Action:

A) Достаточно ли убедительно сформулировано разрешение в отчёте

B) Разрешает ли доверенный контракт задачи запись в этот ресурс

C) Есть ли в ответе модели префикс Action:

Ответ и разбор

Правильный ответ: B. Внешний отчёт является данными и не расширяет полномочия. Валидная схема подтверждает форму вызова; право на операцию и ресурс проверяется отдельно до эффекта.

Вопрос 18.6.1

18.6. ReAct, CodeAct и Plan-and-Execute: три способа выразить следующий шаг

Какое преимущество даёт CodeAct на многошаговой задаче?

Один правильный вариантAОдин блок кода заменяет цепочку вызовов с циклами и условиямиBКод исполняется быстрее, чем последовательность вызовов APICМодели проще писать код, чем формировать корректный JSON вызова

A) Один блок кода заменяет цепочку вызовов с циклами и условиями

B) Код исполняется быстрее, чем последовательность вызовов API

C) Модели проще писать код, чем формировать корректный JSON вызова

Ответ и разбор

Правильный ответ: A. Код позволяет выразить циклы, ветвления и промежуточные значения внутри одного действия. Это может сократить число переходов модель–среда, но требует настоящей песочницы и не гарантирует ускорения на любой задаче.

Вопрос 18.6.2

18.6. ReAct, CodeAct и Plan-and-Execute: три способа выразить следующий шаг

Чем Plan-and-Execute отличается от локального ReAct-цикла?

Один правильный вариантAОн заранее фиксирует план и перепланирует при новом наблюденииBОн запрещает инструменты и ограничивается текстовым планированиемCОн по определению исполняет каждый пункт плана параллельно

A) Он заранее фиксирует план и перепланирует при новом наблюдении

B) Он запрещает инструменты и ограничивается текстовым планированием

C) Он по определению исполняет каждый пункт плана параллельно

Ответ и разбор

Правильный ответ: A. Явный план можно проверить и использовать как список незавершённых обязательств. Наблюдение неожиданного результата должно приводить к перепланированию, иначе преимущество превращается в жёсткость.

Вопрос 18.7.1

18.7. Решённый пример A: история цикла и цена повторного prefill

Для 20 входных историй длины 3000 + 1500i, i = 0, …, 19, сколько токенов обрабатывает схема с сохранением префикса по сравнению с полной повторной обработкой?

Один правильный вариантA345 000 токенов против 31 500: кэш экономит примерно втроеB31 500 токенов против 345 000 наивных — экономия в 10.95 разаCНичего: каждый шаг меняет хвост, и кэш всё равно инвалидируется

A) 345 000 токенов против 31 500: кэш экономит примерно втрое

B) 31 500 токенов против 345 000 наивных — экономия в 10.95 раза

C) Ничего: каждый шаг меняет хвост, и кэш всё равно инвалидируется

Ответ и разбор

Правильный ответ: B. Без сохранения префикса растущая история повторно обрабатывается на каждом шаге. В данном сценарии сумма равна 345 000 против 31 500 токенов; выигрыш сохраняется, пока ранняя часть контекста буквально стабильна. Это отношение числа входных позиций, а не всего времени: новые запросы по-прежнему читают старый KV.

Вопрос 18.8.1

18.8. Решённый пример B: из чего складывается один шаг

Шаг агента длится 778 мс. Из чего он складывается?

Один правильный вариантAПрефилл 430 мс, декод 49 мс, инструмент 300 мс: правит префиллBИнструмент 600 мс и модель 178 мс: агент ждёт внешние сервисыCПрефилл 49 мс, декод 430 мс, инструмент 300 мс: декод даёт 55%

A) Префилл 430 мс, декод 49 мс, инструмент 300 мс: правит префилл

B) Инструмент 600 мс и модель 178 мс: агент ждёт внешние сервисы

C) Префилл 49 мс, декод 430 мс, инструмент 300 мс: декод даёт 55%

Ответ и разбор

Правильный ответ: C. В заданном сценарии decode занимает 429.8 мс, инструмент 300 мс, а условная арифметическая оценка prefill — 48.7 мс. Для другой модели, инструмента и нагрузки доли могут быть совершенно иными.

Вопрос 18.9.1

18.9. MCP: стандарт соединения, а не разрешение действовать

Что MCP добавляет поверх обычной JSON-схемы инструментов?

Один правильный вариантAОбщий протокол обнаружения и подключения: интеграции переиспользуемыBСтрогую типизацию аргументов, которой нет в обычных схемахCИзоляцию исполнения: инструменты запускаются в отдельной песочнице

A) Общий протокол обнаружения и подключения: интеграции переиспользуемы

B) Строгую типизацию аргументов, которой нет в обычных схемах

C) Изоляцию исполнения: инструменты запускаются в отдельной песочнице

Ответ и разбор

Правильный ответ: A. JSON Schema описывает форму отдельного действия. MCP стандартизирует обнаружение возможностей и обмен между хостом, клиентом и сервером. Авторизация, подтверждение и песочница остаются обязанностью хоста.

Вопрос 18.9.2

18.9. MCP: стандарт соединения, а не разрешение действовать

Означает ли ядро MCP без состояния, что агент не хранит историю?

Один правильный вариантAДа, история запрещена протоколомBНет, состояние задачи хранит приложениеCДа, история всегда переносится на сервер

A) Да, история запрещена протоколом

B) Нет, состояние задачи хранит приложение

C) Да, история всегда переносится на сервер

Ответ и разбор

Правильный ответ: B. В редакции 2026-07-28 версия и возможности сопровождают запрос. Это свойство протокола не заменяет состояние агентной задачи.

Вопрос 18.10.1

18.10. Архитектурный пример: исполняющая обвязка является частью алгоритма

Почему eval не следует считать границей безопасности калькулятора?

Один правильный вариантAОн слишком медленно разбирает длинные арифметические выраженияBОн исполняет общий Python-синтаксис, а не разрешённое подмножествоCОн не умеет надёжно представлять большие целые и дробные числа

A) Он слишком медленно разбирает длинные арифметические выражения

B) Он исполняет общий Python-синтаксис, а не разрешённое подмножество

C) Он не умеет надёжно представлять большие целые и дробные числа

Ответ и разбор

Правильный ответ: B. Безопаснее разбирать AST и обрабатывать только явно разрешённые узлы и операции. Общий исполнитель Python требует отдельного процесса или VM с ограничениями ресурсов и доступа.

Вопрос 18.10.2

18.10. Архитектурный пример: исполняющая обвязка является частью алгоритма

Что должно ограничивать исполнение инструмента в рабочей системе?

Один правильный вариантAТолько проверка типов, диапазонов и обязательных полей по схемеBТолько полный журнал аргументов, результатов и внутренних секретовCТайм-ауты, лимиты ресурсов, полномочия, изоляция и идемпотентность

A) Только проверка типов, диапазонов и обязательных полей по схеме

B) Только полный журнал аргументов, результатов и внутренних секретов

C) Тайм-ауты, лимиты ресурсов, полномочия, изоляция и идемпотентность

Ответ и разбор

Правильный ответ: C. Схема ловит неверные аргументы, но не бесконечный цикл, чтение чужого файла или повтор побочного эффекта. Эти риски требуют отдельных границ исполнения.

Вопрос 18.11.1

18.11. Решённый пример C: надёжность длинной траектории

Все 20 обязательных шагов независимы и успешны с вероятностью 0,98 каждый. Какова вероятность успеха всей цепочки?

Один правильный вариантAОколо 0,668; при вероятности шага 0,95 было бы около 0,358B0.98 — надёжность не зависит от длины траектории при независимых шагахC0.960 — потери линейны по числу шагов и составляют около двух процентов

A) Около 0,668; при вероятности шага 0,95 было бы около 0,358

B) 0.98 — надёжность не зависит от длины траектории при независимых шагах

C) 0.960 — потери линейны по числу шагов и составляют около двух процентов

Ответ и разбор

Правильный ответ: A. При допущении независимости успех всей обязательной цепочки равен произведению вероятностей шагов. Это иллюстрирует накопление риска; в реальных траекториях ошибки могут быть коррелированы.

Вопрос 18.11.2

18.11. Решённый пример C: надёжность длинной траектории

Один повтор при неудаче поднимает шаг с 0.98 до 0.9996. Что это даёт траектории?

Один правильный вариантAПрирост около двух процентов: retry лечит симптом, а не причинуB0.992 на двадцати шагах против 0.668 без повторовCНичего: повтор той же ошибки даёт тот же результат детерминированно

A) Прирост около двух процентов: retry лечит симптом, а не причину

B) 0.992 на двадцати шагах против 0.668 без повторов

C) Ничего: повтор той же ошибки даёт тот же результат детерминированно

Ответ и разбор

Правильный ответ: B. При независимых попытках и шагах, идеальном обнаружении неудачи и допустимом повторе успех шага становится 0,9996, а двадцати шагов — около 0,992. Корреляция меняет условный шанс исправления. Повторы записи дополнительно требуют защиты от дублирования эффекта.

Вопрос 18.11.3

18.11. Решённый пример C: надёжность длинной траектории

При p=0,98 повтор после неудачи успешен с вероятностью q=0,2. Каков успех шага при идеальной проверке?

Один правильный вариантA0,9996B0,984C0,196

A) 0,9996

B) 0,984

C) 0,196

Ответ и разбор

Правильный ответ: B. p+(1−p)q = 0,98 + 0,02·0,2 = 0,984. Независимый повтор с прежней вероятностью был бы другим допущением.

Вопрос 18.12.1

18.12. Параллельные субагенты и закон Амдала

Работа 400 мин, план 5 и слияние 20 мин последовательны. Что дают 20 субагентов?

Один правильный вариантAРовно ×20, поскольку вся работа между исполнителями делится нацелоBНикакого выигрыша, поскольку последовательные части всегда доминируютC45 минут: ×8.89 к работе или ×9.44 к полному циклу

A) Ровно ×20, поскольку вся работа между исполнителями делится нацело

B) Никакого выигрыша, поскольку последовательные части всегда доминируют

C) 45 минут: ×8.89 к работе или ×9.44 к полному циклу

Ответ и разбор

Правильный ответ: C. База сравнения должна быть названа. Последовательные 25 минут ограничивают предел ускорения; отдельные контексты дополнительно требуют памяти и создают стоимость слияния.

Вопрос 18.13.1

18.13. Код первого уровня: предложение и проверяемое завершение

Какая политика остановки должна быть у агентного цикла?

Один правильный вариантAЛимит шагов, лимит бюджета и явный признак завершения задачиBОстановка при первой ошибке инструмента, чтобы не накапливать мусорCОстановка по таймауту всей сессии — остальные условия избыточны

A) Лимит шагов, лимит бюджета и явный признак завершения задачи

B) Остановка при первой ошибке инструмента, чтобы не накапливать мусор

C) Остановка по таймауту всей сессии — остальные условия избыточны

Ответ и разбор

Правильный ответ: A. Нужны отдельные ограничения шагов, действий, токенов, времени и стоимости, а также проверяемый критерий завершения. Ошибка инструмента может быть исправимой и не обязана немедленно завершать весь цикл.

Вопрос 18.13.2

18.13. Код первого уровня: предложение и проверяемое завершение

Модель вернула Answer: 27.92. Когда учебная обвязка отмечает completed?

Один правильный вариантAСразу после разбора префиксаBПосле любого успешного инструментаCПосле проверки критерия задачи

A) Сразу после разбора префикса

B) После любого успешного инструмента

C) После проверки критерия задачи

Ответ и разбор

Правильный ответ: C. Предложение завершить работу и подтверждение результата — разные события. Без проверяющей функции полный учебный цикл возвращает answer_proposed.

Вопрос 18.15.1

18.15. Ландшафт систем: сравниваем интерфейсы, а не логотипы

Почему модель и агентную систему нужно оценивать раздельно?

Один правильный вариантAПотому что результаты обычно публикуют разные исследовательские группыBПотому что обвязка и среда меняют результат одной и той же моделиCПотому что модель вообще не участвует в выборе следующего действия

A) Потому что результаты обычно публикуют разные исследовательские группы

B) Потому что обвязка и среда меняют результат одной и той же модели

C) Потому что модель вообще не участвует в выборе следующего действия

Ответ и разбор

Правильный ответ: B. Агентный тест измеряет пару «политика + исполняющая обвязка + среда». Смена любого компонента меняет единицу измерения, поэтому паспорт конфигурации обязателен.

Вопрос 18.17.1

18.17. Паспорт исполняющей обвязки агента

Что обязательно входит в паспорт исполняющей обвязки агента?

Один правильный вариантAНазвание модели, дата запуска и итоговая средняя оценкаBТолько список задач, число попыток и достигнутая доля успехаCИнструменты, полномочия, бюджеты, среда и проверяющий модуль

A) Название модели, дата запуска и итоговая средняя оценка

B) Только список задач, число попыток и достигнутая доля успеха

C) Инструменты, полномочия, бюджеты, среда и проверяющий модуль

Ответ и разбор

Правильный ответ: C. Эти элементы определяют доступные действия и траекторию. Без них результат нельзя воспроизвести или отделить изменение модели от изменения системы.

Вопрос 18.14.1

18.14. Практика: от наблюдения к исправлению, затем к восстановлению

Сервис записал эффект, но ответ потерялся. Какой повтор предусмотрен в опыте SQLite?

Один правильный вариантAС тем же идентификатором и аргументамиBС новым идентификатором каждый разCПовторять, пока счётчик не удвоится

A) С тем же идентификатором и аргументами

B) С новым идентификатором каждый раз

C) Повторять, пока счётчик не удвоится

Ответ и разбор

Правильный ответ: A. Журнал операции и эффект фиксируются одной транзакцией. Тот же идентификатор возвращает прежний результат; иной аргумент отвергается.