文章目录

进阶指南:Agent 规划能力与架构深度解析

第一部分:基础规划能力与范式

1. Agent 的规划能力怎么实现?

Agent 的规划能力,本质上是其“大脑”的核心功能:将抽象、模糊的宏观目标(High-level Goal)精准拆解为可被系统执行的具体子任务序列(Executable Sub-tasks)的能力。

在现代大模型工程与架构落地中,规划能力的实现路径主要分为以下三种。针对面试,你需要展现出对这三种路径的演进逻辑、适用场景以及代码级实现的深刻理解。


🧠 路径一:Prompt Engineering (提示工程) —— 激发心智的轻量级方案

通过特定的 Prompt 范式(如 ReAct, CoT, Plan-and-Solve),直接在推理阶段激发大模型(LLM)的 In-context 规划能力。

  • 核心逻辑:依赖大模型自身的涌现能力,通过多轮对话或长文本输出完成“边想边做”或“先想后做”。

  • 拓扑结构 (ReAct 经典循环图)

    [User Goal] 
       │
       ▼
    ┌─────────────┐   Observation   ┌─────────────┐
    │  Thought    │ ◀────────────── │ Environment │
    │ (推理规划)  │                 │  (工具返回) │
    └─────────────┘                 └─────────────┘
       │                               ▲
       ▼            Action (API Call)  │
    ┌─────────────┐ ───────────────────┘
    │   Action    │
    │ (调用工具)  │
    └─────────────┘
    
  • 🧑‍💻 核心代码解析 (ReAct 简易引擎)

def react_agent(objective, max_iterations=5):
    # 维护对话上下文
    messages = [{"role": "system", "content": "You are a ReAct agent. Use Thought, Action, Observation format."}]
    messages.append({"role": "user", "content": objective})
    
    for i in range(max_iterations):
        # 1. 触发模型思考与规划
        response = llm.chat(messages) 
        messages.append({"role": "assistant", "content": response})
        
        # 2. 解析模型的 Action 决定 (正则提取)
        action, action_input = parse_action(response) 
        
        if action == "Finish":
            return action_input # 任务完成
        
        # 3. 执行工具 (Executor)
        observation = execute_tool(action, action_input)
        
        # 4. 观察结果反馈给模型,进入下一轮规划
        messages.append({"role": "user", "content": f"Observation: {observation}"})
        
    return "Task Failed: Max iterations reached. 🛡️"
```
  • 面试考点:ReAct 极其消耗 Token,且容易陷入死循环。适合简单、短链路的探索性任务。

⚙️ 路径二:Flow / State Machine (静态图 / 状态机) —— 工业级落地的稳定基石

针对特定垂直场景(如客服打标、代码审查流程),开发者人工预定义好任务的 DAG(有向无环图)。大模型的角色被“降级”,不再做全局规划,而是只在特定节点上做分类(Routing)、信息抽取或内容生成。典型的框架如 LangGraph

  • 核心逻辑:人类负责画图规划,AI 负责填空执行。用确定性的代码逻辑(边/Edges)来约束不确定性的生成模型(节点/Nodes)。
  • 网络结构拓扑图 (LangGraph 状态机图)
                         [START]
                            │
                            ▼
                    (Node A: 意图识别)
                      /           \
           Router: if coding   Router: if chat
                  /                 \
                 ▼                   ▼
    (Node B: 代码生成)       (Node C: 闲聊回复) 
                 │                   │
                 ▼                   │
    (Node D: 代码测试) ◀──────────────┘ (End of chat)
                 │ (if fail, loop to B)
                 ▼ 
               [END]
  • 🧑‍💻 核心代码解析 (LangGraph 节点与边设计)
    from langgraph.graph import StateGraph, END
    from typing import TypedDict
    
    # 1. 定义全局状态黑板 (Blackboard) 🛡️
    class AgentState(TypedDict):
        messages: list
        intent: str
        code_result: str
    
    # 2. 初始化状态机
    workflow = StateGraph(AgentState)
    
    # 3. 定义节点 (大模型在这些节点发挥作用)
    def intent_node(state):
        intent = llm.predict("判断用户意图: " + state['messages'][-1])
        return {"intent": intent} # 更新状态
        
    workflow.add_node("recognize_intent", intent_node)
    workflow.add_node("write_code", code_node)
    
    # 4. 定义条件边 (Routing 逻辑)
    def route_by_intent(state):
        if state["intent"] == "coding": return "write_code"
        return END
        
    workflow.add_conditional_edges("recognize_intent", route_by_intent)
    
    # 5. 编译运行
    app = workflow.compile()
  • 面试考点:强调业务的可控性与容错率。这种模式能够保存完整的中间状态(State),便于打点监控和调试。

🕸️ 路径三:Agentic Framework (动态规划框架) —— 迈向 AGI 的终极形态

引入专门的 Planner 模块,结合外部工具(Tools Schema)描述,动态生成结构化(如 JSON/YAML)的多步计划,并由调度器(Orchestrator/Executor)并行或串行执行。

  • 核心逻辑:将“想”和“做”彻底解耦(Plan-and-Execute)。Planner 具有全局视野,负责生成和修正整个任务树。
  • 结构树形流程图 (任务拆解树)
    🎯 宏观目标: "分析某公司2023年Q3财报并生成对比图表"
    └── 📝 Planner 生成动态执行计划 (JSON)
        ├── 步骤 1: 🌐 网络搜索工具 (Tool_Search) -> "2023 Q3 财报 PDF 链接"
        ├── 步骤 2: 📄 文档解析工具 (Tool_PDF) -> 提取核心财务数据
        ├── 步骤 3: 🧮 数据处理 (并行处理)
        │   ├── 3a: 同比增长率计算 (Python_Interpreter)
        │   └── 3b: 环比增长率计算 (Python_Interpreter)
        └── 步骤 4: 📊 绘图工具 (Tool_Plot) -> 生成对比柱状图
  • 🧑‍💻 核心代码解析 (Planner 动态生成 JSON)
    class DynamicPlanner:
        def __init__(self, llm, tools_registry):
            self.llm = llm
            self.tools = tools_registry # 工具的 OpenAPI schema
            
        def create_plan(self, objective):
            # 强制要求输出 JSON 格式的计划数组
            system_prompt = f"""
            You are a Master Planner ✋. 
            Goal: {objective}
            Available Tools: {self.tools}
            Output a JSON list of tasks. 
            Each task must have: 'task_id', 'description', 'tool_name', 'dependencies'.
            """
            # 模型通常需要经过 SFT 才能稳定输出复杂的 DAG 结构 JSON
            plan_json = self.llm.generate_json(system_prompt)
            return self.parse_plan(plan_json)
            
    class Orchestrator:
        def execute(self, plan):
            # 构建有向无环图执行器
            dag_scheduler = DAGScheduler(plan)
            while not dag_scheduler.is_done():
                ready_tasks = dag_scheduler.get_ready_tasks()
                # 🚀 并行执行无依赖的任务
                results = parallel_execute(ready_tasks)
                dag_scheduler.update_state(results)
  • 面试加分项 (Advanced SFT):提到监督微调 (SFT)。开源模型(如 Llama-3)原生的复杂 JSON 规划能力较弱。在工业界,我们需要构建包含 <Goal, JSON Plan Schema, Thinking, Tools> 的数据对,对模型进行 SFT,甚至使用 DPO(直接偏好优化) 注入“人类倾向于如何拆解任务”的偏好,才能打造出合格的 Planner 模型。

2. CoT 能不能算规划?

算。 严格来说,CoT(Chain of Thought,思维链)是 Agent 规划能力的最早期形态,它是一种隐式的(Implicit)、线性的内部心智规划

在面试中,仅仅回答“算”是不够的。作为算法/智能体工程师,你需要从“概率生成”、“计算量(Test-Time Compute)”以及“控制论”的视角来深度剖析它的本质与局限。


🔍 本质探究:时间换空间的内部微观规划

传统的大模型生成是直接映射 P ( y ∣ x ) P(y|x) P(yx),而 CoT 通过引入中间推理步骤 z i z_i zi,将生成过程转化为了联合概率分布 P ( y , z 1 , z 2 , . . . , z n ∣ x ) P(y, z_1, z_2, ..., z_n | x) P(y,z1,z2,...,znx)

  • Token 作为计算力(Test-Time Compute):自回归模型(Autoregressive Models)每生成一个 Token,就相当于进行了一次前向传播。CoT 迫使模型在给出最终答案前,先输出思考步骤(Step-by-step reasoning),本质上是强行延长了推理路径,用更多的 Token 换取了更大的“思考计算量”。这种步骤的有序展开,本身就是一种单向的、基于内部参数化知识的规划。
🕸️ 网络拓扑与流程图对比 (开环 vs 闭环)

要理解 CoT 的规划缺陷,可以通过拓扑图与标准 Agent 的闭环(Closed-loop)结构进行对比:

1. 纯 CoT 规划拓扑 (开环 Open-loop 链式结构)

[Input Query] 
      │
      ▼
(Step 1: 提取关键信息) ───内部参数──▶ (Step 2: 公式推导) ───内部参数──▶ (Step 3: 计算结果)
      │                               │                               │
      ▼                               ▼                               ▼
 [生成 Token]                     [生成 Token]                     [生成 Token] 
      │                               │                               │
      └───────────────────────────────┴───────────────────────────────┴──▶ [最终输出 Output]
⛔ 致命点:全程都在模型内部的隐空间(Latent Space)狂奔,没有任何外部锚点。

2. 真 Agent 规划拓扑 (闭环 Closed-loop 交互结构)

           ┌──────────────────────────────────────────────┐
           │                                              │
[Input] ──▶ (Planner 节点: 思考 & 动作) ──▶ [执行器 Action] │ 
           ▲               │                              ▼
           │               ▼                     [环境 Environment]
           │     [反思 Reflection] ◀──────报错/成功──── (外部反馈)
           └───────────────┘
🛡️ 优势:步步为营,随时纠偏。

🧑‍💻 代码函数解析:CoT 规划的脆弱性体现

下面这段代码展示了在实际工程中,纯 CoT 规划引擎的实现及其脆弱点:

import re

class CoTPlanner:
    def __init__(self, llm):
        self.llm = llm
        
    def generate_cot_reasoning(self, query: str) -> dict:
        """
        纯 CoT 规划执行函数
        """
        system_prompt = """
        You are a reasoning engine 🚀. 
        Before answering, you MUST think step-by-step inside <thought> tags.
        Then, output the final answer inside <answer> tags.
        """
        
        # 1. 一次性生成所有规划和结果 (隐式规划)
        raw_response = self.llm.invoke([
            {"role": "system", "content": system_prompt},
            {"role": "user", "content": query}
        ])
        
        # 2. 解析器:提取思考过程和最终答案
        thought_match = re.search(r'<thought>(.*?)</thought>', raw_response, re.DOTALL)
        answer_match = re.search(r'<answer>(.*?)</answer>', raw_response, re.DOTALL)
        
        thought_process = thought_match.group(1).strip() if thought_match else "No thought process."
        final_answer = answer_match.group(1).strip() if answer_match else "No answer."
        
        return {
            "planning_trajectory": thought_process,
            "final_result": final_answer
        }

# 🚨 痛点演示:错误累积 (Error Accumulation)
# 假设 query 是一道复杂的物理/数学控制题
# 如果模型在 thought_process 的第 1 步把公式写错了,
# 那么第 2 步、第 3 步全都会基于错误的前提继续生成(因为它是自回归的)。
# 它无法调用 Python 解释器去验证第 1 步的公式对不对,这就是“雪崩效应”。

🛡️ 局限性总结 (面试核心踩分点)
  1. 开环系统(Open-loop):没有与外部环境(如数据库、API、代码执行器)交互。它只能依靠训练数据中记忆的知识进行“脑补”,极易产生事实性幻觉(Hallucination)。
  2. 错误累积(Error Accumulation/Cascading):因为是一次性生成到底,如果中间某一步推导出现哪怕极其微小的偏差,后续的 Token 生成会不断放大这个错误,没有试错和回溯机制(Backtracking)
  3. 无法应对动态环境:如果任务本身是动态变化的(例如:搜索网页时发现原链接失效,需要换关键词再搜),静态的 CoT 规划会彻底失效。
🎤 黄金面试话术

“CoT 绝对可以算作一种初级的内部心智规划,它通过牺牲推理速度(Test-Time Compute)来换取推理深度。但它的致命伤在于它是开环的。在真实的、复杂的工业级 Agent 系统中,纯粹依靠模型自身的参数化知识进行内部推演是不够的。我们需要引入 Plan-and-Execute 等闭环架构,让模型能够与外部环境交互、获取真实 Observation,从而具备动态纠偏和重规划(Replanning)的能力。”

3. 🌳 ToT (Tree of Thoughts) 是什么?适合什么任务? —— 引入非线性探索与回溯机制

如果说 CoT 是一条道走到黑的“单行道”,那么 ToT (思维树) 就是一张带有导航地图的“多叉路口”。它是一种非线性的推理与规划范式,赋予了 Agent 前瞻(Lookahead)回溯(Backtracking)的心智能力。

在面试中,你可以这样总结其本质:ToT = 传统启发式搜索算法 (BFS/DFS/A*) + LLM 强大的生成与评估能力。

⚙️ 核心机制:ToT 的三大支柱

ToT 将规划过程建模为一棵树的搜索过程,每个节点代表一个中间状态(Partial Solution/Thought)。

  1. Thought Generation (节点展开/生成):面对当前状态,LLM 不再只给出一个决定,而是发散性地生成多个可能的“下一步”(分支)。
  2. State Evaluation (状态评估/启发式函数):大模型化身为裁判,评估每个分支状态的可行性。在经典的 24 点游戏中,通常评判为:
    • Sure (必定能解)
    • Maybe (有希望)
    • Impossible (死胡同,触发剪枝 ✂️)
  3. Search Algorithm (搜索策略):结合经典的图搜索算法控制树的生长方向。内存充足用 BFS(广度优先),需要快速试错用 DFS(深度优先),有明确启发得分的用 A* 算法。
🕸️ 结构树形拓扑图:24 点游戏 (数字:4, 9, 10, 13)
                          [起始状态: 4, 9, 10, 13]
                                   │
         ┌─────────────────────────┼─────────────────────────┐
         ▼                         ▼                         ▼
  (4+9=13)                  (10-4=6)                  (13*9=117)
[状态: 13, 10, 13]         [状态: 6, 9, 13]          [状态: 117, 4, 10]
 评估: Maybe                评估: Sure                评估: Impossible 
         │                         │                         │
         ▼                         ▼                         ▼
   (继续展开...)          (13-9=4) -> [6, 4]             ✂️ (剪枝截断)
                           评估: Sure -> 6*4=24! 🎯
                                (目标达成)
🚀 适用任务场景
  • 痛点匹配:适合那些解空间巨大、极易陷入死胡同、需要长线推演的复杂任务。
  • 具体场景:24点游戏、填字游戏、复杂的算法逻辑代码生成(如动态规划)、高难度的数学定理证明、复杂的跨表 SQL 编写。
  • 面试防坑指南 🛡️不要万物皆 ToT! ToT 的 Token 消耗量通常是单次生成的 10 倍到 100 倍(时间复杂度呈 O ( b d ) O(b^d) O(bd) 增长,b 为分支因子,d 为深度)。对于简单的信息检索或常规问答,使用 ToT 是纯粹的算力浪费。
🧑‍💻 代码详细解读:ToT 核心执行引擎

下面是一段工业级变体的 ToT 伪代码解析,演示了如何结合 BFS 和 LLM 进行规划:

def tot_bfs_planner(initial_state, target_goal="24", max_depth=3, branch_factor=3):
    """
    ToT 广度优先搜索规划器
    """
    # 队列中存储元组:(当前状态, 历史规划路径)
    queue = [(initial_state, [])] 
    
    for depth in range(max_depth):
        level_candidates = [] # 当前深度的所有备选节点
        
        while queue:
            current_state, path_history = queue.pop(0)
            
            # 🎯 终点检测
            if check_is_goal(current_state, target_goal): 
                return {"status": "Success", "plan": path_history}
            
            # 1. 展开节点 (Thought Generation)
            # 让大模型给出 `branch_factor` 种可能的下一步
            next_thoughts = llm_generate_thoughts(current_state, n=branch_factor)
            
            for thought in next_thoughts:
                new_state = apply_thought(current_state, thought)
                
                # 2. 评估节点 (State Evaluation) ✋
                # 让大模型站在当前状态,前瞻性地判断目标能否达成
                score = llm_evaluate_state(new_state, target_goal) 
                
                # 3. 剪枝策略 (Pruning) 🛡️
                if score == 'Impossible':
                    log_debug(f"Pruned state: {new_state}")
                    continue 
                
                # 记录有效分支
                new_path = path_history + [thought]
                level_candidates.append((new_state, new_path))
        
        # 广度优先:将这一层保留下来的节点作为下一层的起点
        queue = level_candidates 
        
    return {"status": "Failed", "reason": "Max depth reached without finding a path."}

# ----------------- 函数原理解析 -----------------
# llm_generate_thoughts: 
#   内部 Prompt 示例: "当前数字是 [13, 10, 13]。请给出 3 种不同的两两计算方案。返回格式: 13+10, 13-10, 13*10"
# llm_evaluate_state: 
#   内部 Prompt 示例: "当前剩余数字是 [117, 4, 10],目标是算出 24。请评估是否有可能?回答 Sure, Maybe, 或 Impossible。"
#   (注:大模型可能意识到 117 太大了,无法通过 4 和 10 降到 24,从而输出 Impossible 进行剪枝)。

为了让你更直观地感受大模型在 ToT 中是如何生成分支、评估得分并触发剪枝的,你可以通过下面的互动组件亲自推演一遍“思维树”的生长过程:


第二部分:架构设计与任务拆解

4. Plan-and-Execute 架构是什么?

如果说 ReAct 模式是“走一步看一步”的摸着石头过河,那么 Plan-and-Execute (计划与执行) 架构就是现代软件工程中“架构师与码农”的完美分工。它借鉴了经典计算体系结构,将系统的“思考(Reasoning)”“行动(Acting)”进行了物理级的解耦。

对于大模型算法工程师而言,理解这种架构是解决长文本上下文溢出(Context Window Overflow)注意力漂移(Attention Drift)的核心钥匙。

🧠 核心角色拆解:Planner vs Executor
  • Planner(大脑 / 规划者):通常由最强的大模型(如 GPT-4o / Claude 3.5 Sonnet)担任。它拥有全局视野(Global Context),接收用户的终极目标,一次性前瞻性地生成完整的、多步骤的计划(通常是一个 JSON 数组或 DAG 任务流图)。
  • Executor(双手 / 执行者):通常由较小、较快、较便宜的模型(如 GPT-4o-mini / Llama-3-8B)甚至纯 Python 脚本担任。它拥有局部视野(Local Context),只关心“当前这一步要干什么”,按顺序调用具体工具,返回执行结果。
🕸️ 网络结构拓扑图:Plan-and-Execute 数据流
[User Request: "调研苹果公司 Vision Pro 的销量并写一段分析摘要"]
       │
       ▼
┌────────────────────────────────────────────────────────┐
│ 🧠 Planner (全局视野)                                   │
│ Prompt: [全局目标] + [所有可用工具列表] + [拆解规则]       │
└──────────────────────────┬─────────────────────────────┘
                           │ ⬇️ 生成 JSON 任务流 (Plan)
┌──────────────────────────▼─────────────────────────────┐
│ 📋 Task Queue (任务队列/黑板 Blackboard)                 │
│ ├── Step 1: 🌐 工具(Search) -> "Vision Pro 2024 销量"  │
│ ├── Step 2: 📄 工具(Scraper) -> 抓取排名前3的网页内容      │
│ └── Step 3: ✍️ 工具(LLM_Summarize) -> 汇总数据写分析     │
└──────────────────────────┬─────────────────────────────┘
                           │ ⬇️ 逐个分发子任务 (Dispatch)
       ┌───────────────────▼───────────────────┐
       │ 🦾 Executor (局部视野)                 │ ◀───┐ 循环 
       │ Prompt: [Step N 描述] + [Step N 专用工具]│     │ (Loop)
       └───────────────────┬───────────────────┘     │
                           │ ⬇️ 执行与观察            │
                  [Environment / Tools] ─────────────┘
                           │ 
                           ▼
                  [Final Output (最终输出)]
🚀 核心优势:为什么工业界偏爱它? (面试必杀技)
  1. Token 消耗从 O ( N 2 ) O(N^2) O(N2) 降为 O ( N ) O(N) O(N)
    • ReAct 中,每执行一步,历史的 Thought 和 Observation 都会拼接到 Prompt 里。如果执行 10 步,第一步的 Prompt 被重复计算了 10 次,导致 Token 爆炸(且上下文越长,模型越容易变“笨”)。
    • Plan-and-Execute 中,Executor 每次拿到的 Prompt 都是干净的、恒定长度的(只包含当前步骤指令)。这大幅降低了 API 成本和推理延迟。
  2. 避免局部最优:Planner 一开始就看到了终点,能做出长远规划;而 ReAct 容易在某个 API 调用失败时原地打转。
  3. 异构模型调度 🛡️:最贵的大模型只调用 1 次做 Planning,后续 10 次 Execution 用便宜的小模型。这是降低 Agent 运行成本(Cost per Task)的最佳实践。
🧑‍💻 代码函数解析:Plan-and-Execute 简易引擎

下面我们用一段 Python 伪代码来剖析这套架构的底层运作机理:

import json

class PlanAndExecuteAgent:
    def __init__(self, planner_llm, executor_llm, tools_registry):
        self.planner_llm = planner_llm      # 强模型 (大参数)
        self.executor_llm = executor_llm    # 弱模型 (小参数)
        self.tools = tools_registry
        self.blackboard = {}                # 🛡️ 状态黑板,用于保存中间变量

    def run(self, user_objective):
        # ---------------------------------------------------------
        # 阶段一:Planning (全局规划)
        # ---------------------------------------------------------
        planner_prompt = f"""
        Objective: {user_objective}
        Available Tools: {list(self.tools.keys())}
        Rule: Break down the objective into a precise JSON array of steps.
        Format: [{{"step_id": 1, "task": "...", "tool_to_use": "..."}}]
        """
        plan_json_str = self.planner_llm.generate(planner_prompt)
        plan = json.loads(plan_json_str)
        print(f"✋ 规划完毕,共生成 {len(plan)} 个步骤。")

        # ---------------------------------------------------------
        # 阶段二:Executing (局部执行)
        # ---------------------------------------------------------
        for step in plan:
            task_desc = step["task"]
            tool_name = step["tool_to_use"]
            
            # 💡 面试亮点:Executor 的上下文非常短,只有当前任务和黑板上的历史摘要
            executor_prompt = f"""
            Current Task: {task_desc}
            You have access to tool: {tool_name}.
            Previous Context (Blackboard): {self.blackboard}
            Action: Execute the task and return the raw observation.
            """
            
            # 执行器尝试完成当前任务
            action_input = self.executor_llm.extract_tool_args(executor_prompt)
            observation = self.tools[tool_name](**action_input)
            
            # 🛡️ 状态管理:将结果写回全局黑板,供下游步骤使用
            self.blackboard[f"step_{step['step_id']}_result"] = observation
            print(f"🚀 步骤 {step['step_id']} 执行完毕。")

        # ---------------------------------------------------------
        # 阶段三:Synthesizing (整合输出)
        # ---------------------------------------------------------
        final_prompt = f"Objective: {user_objective}\nData: {self.blackboard}\nWrite the final response."
        return self.planner_llm.generate(final_prompt)
✋ 致命弱点与面试防御 (防坑指南)

在面试中,如果只夸不贬是不够的。你需要主动提出 Plan-and-Execute 的缺陷:

  • 静态规划的脆弱性:这个架构最大的缺点是“死板”。如果在执行 Step 2 时发现目标网站 404 了,传统的 Plan-and-Execute 无法处理,只会把错误硬塞给 Step 3,导致连锁崩溃。
  • 如何解决? 必须引入 Replanning(重规划) 机制。在上面的 for step in plan: 循环中加入一个 Evaluator(评估器)节点,一旦发现 Executor 返回异常,立刻把当前的 blackboard 状态抛回给 Planner,要求其动态修改后续的数组计划(这就是后续第 6、7 个问题的核心考点)。

5. Planner 和 Executor 怎么拆分?

在现代工业级 Agent 系统设计中,Planner(规划者)与 Executor(执行者)的拆分不仅仅是代码模块的解耦,更是算力成本、模型能力与部署架构的深度切割。面试时,向考官展现你对这两者拆分边界的理解,能极大彰显你的工程架构功底。

🛡️ 拆分的核心逻辑:异构模型与职责隔离

这两者通常由不同能力、不同配置的模型,甚至完全不同的软硬件环境来承担:

  • 👑 Planner(统帅 / 强推理中枢)
    • 模型配置:必须使用最顶配的强推理模型(如 GPT-4o / Claude 3.5 Sonnet / 满血版 DeepSeek-V3)。
    • 输入 (Prompt):包含全局目标 (Global Goal)、复杂的环境变量、所有可用工具的 Schema (OpenAPI 规范)、以及硬性约束条件。
    • 输出 (Artifact):负责将“意图”转化为“协议”。它的输出必须是高度结构化的路由表或序列化文件(如标准的 JSON 数组、YAML 配置流图)。
  • 🦾 Executor(工兵 / 敏捷执行节点)
    • 模型配置:使用廉价且快速的小模型(如 GPT-4o-mini / Llama-3-8B),甚至是基于传统代码的无模型状态机。
    • 输入 (Prompt):极其克制。只包含 Planner 派发的单个子任务描述,以及该任务唯一需要的特定工具。它不需要也不应该知道全局的最终目标是什么(防止小模型产生幻觉,偏离当前执行步骤)。
🚀 进阶面试杀手锏:云边协同架构 (Cloud-Edge Synergy)

在具身智能机器人研发或端侧 AI 部署的真实工业场景中,这种拆分往往演变为物理级别的隔离

  • 云端 Planner 负责处理多模态高并发的复杂规划,生成标准化的 JSON 配置文件。
  • 端侧 Executor 部署在资源受限的边缘设备(如 Rockchip RK3588 平台的 NPU)上。它将所有的可调参数外部化到类似 task_config.json 的文件中,端侧节点(比如一个跑在 ROS 上的 C++ 模块)直接拉取解析并执行,这不仅大幅提升了边缘响应速度,还完美解决了硬件对庞大模型推理的敏感性问题。
🕸️ 网络结构拓扑图 (Mermaid 架构设计)

面试时如果在白板上画图,可以参考以下基于通信与数据流转的拓扑结构:

代码段

🦾 Executor 侧 (端侧/小算力/纯代码节点)

🧠 Planner 侧 (云端大算力 / 大模型)

JSON 序列化

派发 Step 1

派发 Step 2

派发 Step 3

更新黑板/返回 Observation

更新黑板/返回 Observation

更新黑板/返回 Observation

User Objective

LLM Planner

生成全局执行图 DAG

Task Queue / State Blackboard

Executor: 爬虫/检索

Executor: 数据清洗

Executor: 硬件控制/RKNN推理

🧑‍💻 核心代码详细解读:架构拆分的工程实现

以下代码展示了如何将 Planner 生成的动态 JSON 映射给隔离的 Executor:

import json
from typing import List, Dict, Any

# ---------------------------------------------------------
# 1. Planner 模块:负责宏观规划与配置生成
# ---------------------------------------------------------
class Planner:
    def __init__(self, high_reasoning_llm):
        self.llm = high_reasoning_llm # 注入强模型 (e.g., GPT-4o)

    def generate_plan(self, user_objective: str, tools_schema: str) -> List[Dict[str, Any]]:
        """
        🚀 函数解析:将自然语言目标转化为 JSON 格式的任务节点列表。
        这里高度依赖 LLM 的 Instruction Following (指令遵循) 能力。
        """
        prompt = f"""
        System: You are an Expert Orchestrator. 
        Objective: {user_objective}
        Available Tools: {tools_schema}
        
        Rule: Output ONLY a valid JSON array. Do not include markdown formatting or conversational text.
        Each object must match this JSON structure:
        {{
            "step_id": <int>,
            "task_desc": "<string: what to do>",
            "target_tool": "<string: tool name>",
            "required_args": [<string: keys needed>]
        }}
        """
        raw_json_str = self.llm.invoke(prompt)
        
        try:
            # 将模型的输出直接解析为系统可配置的参数列表
            plan = json.loads(raw_json_str) 
            return plan
        except json.JSONDecodeError:
            raise ValueError("🛡️ Planner 输出了无效的格式,触发容错或重试机制。")

# ---------------------------------------------------------
# 2. Executor 模块:负责微观执行与工具调用
# ---------------------------------------------------------
class Executor:
    def __init__(self, fast_cheap_llm, tool_registry):
        self.llm = fast_cheap_llm      # 注入快模型 (e.g., GPT-4o-mini)
        self.tools = tool_registry     # 具体的工具执行函数字典

    def execute_step(self, step_info: Dict[str, Any], context_blackboard: Dict) -> Any:
        """
        🚀 函数解析:Executor 的视野被严格限制在 step_info 内部。
        它无权干涉全局目标,只做最基础的信息提取和工具调用。
        """
        tool_name = step_info['target_tool']
        task_desc = step_info['task_desc']
        
        # 🛡️ 参数隔离:小模型只负责根据上下文提取当前工具需要的特定参数
        extraction_prompt = f"""
        Task: {task_desc}
        Context: {context_blackboard}
        Extract the arguments required for the tool '{tool_name}' in JSON format.
        """
        args_json_str = self.llm.invoke(extraction_prompt)
        tool_args = json.loads(args_json_str)
        
        print(f"⚙️ 正在执行节点 [Step {step_info['step_id']}] -> 调用工具: {tool_name}")
        
        # 反射调用具体的底层逻辑 (如 Python 脚本、硬件控制指令)
        return self.tools[tool_name](**tool_args) 

代码级面试点评 (加分要点)

这段代码的核心亮点在于契约式设计。Planner 的核心产出是一套标准化、无状态的 JSON 配置。这种设计使得系统极具可维护性,即便后续系统重构(例如从纯软件 Agent 迁移到包含硬件控制的具身 Agent),只要 Planner 能够按照约定输出 config,下层的 Executor 甚至可以交给其他团队(如嵌入式开发人员、Java 后端团队)用其他语言去完全重写和优化,实现了系统层面的解耦。


第三部分:纠错与反思机制(核心面试热点)

6. 规划失败怎么纠正?

在真实的工业级应用甚至复杂的软硬件协同环境(如调度多模态传感器、与 ROS 节点通信或进行边缘侧模型部署)中,环境是高度动态且充满噪音的。静态的“一次性规划”注定会失败。

解决规划失败的核心工程思想是引入控制论中的闭环反馈(Closed-loop Feedback),在 Agent 架构中体现为动态重规划(Dynamic Replanning)

🕸️ 网络结构拓扑图:重规划的闭环控制流

为了让你更直观地在面试白板上向考官展示,我们可以用状态转移图(DAG 变体)来描述这个机制:

代码段

Pop Step N

Interaction

返回结果/报错

状态: Success ✅

状态: Failed 🚨

打包: 已完成步骤 + 报错日志 + 剩余目标

生成全新的后续步骤

Queue Empty

🎯 User Goal

🧠 Planner: 生成初始计划

📋 Task Queue

🦾 Executor: 执行当前任务

Environment / API / ROS Node

⚖️ Evaluator / 状态监测

更新 Blackboard / 上下文

🛠️ Error Context Builder

🔄 Replanner: 动态修正

🎉 任务完成

🚀 核心机制:纠偏的“三步走”战略

Executor 在执行某一步(比如:调用硬件接口超时、或者前置数据格式错误)导致失败时,系统不能直接崩溃,而是要执行以下纠偏逻辑:

  1. 保护现场 (State Preservation):绝不能让 Agent 从头开始。必须保留全局字典(Blackboard)中已经成功执行的中间状态和数据。
  2. 错误归因 (Error Contextualization):将底层的报错堆栈(Traceback)、API 返回的 Error Code、甚至是执行器的超时警告提取出来。
  3. 局部重构 (Partial Replanning):将【原计划】+【已完成的进度】+【具体的失败原因】作为上下文,整体抛给强推理模型(Planner),要求其生成一条绕过障碍的新路径
🧑‍💻 代码详细解读:动态重规划引擎 (Dynamic Replanner)

下面是一段硬核的代码片段,展示了在调度复杂任务流时,如何优雅地捕获异常并触发 LLM 进行重规划:

import json
from typing import List, Dict

class DynamicAgentContext:
    def __init__(self, objective: str, initial_plan: List[Dict]):
        self.objective = objective
        self.remaining_plan = initial_plan
        self.completed_steps = []
        self.blackboard = {}

class ReplanningEngine:
    def __init__(self, planner_llm):
        self.llm = planner_llm

    def execute_with_replanning(self, context: DynamicAgentContext, tools: dict, max_retries=3):
        """
        🚀 带有自适应纠偏机制的执行主循环
        """
        retry_count = 0
        
        while context.remaining_plan:
            current_step = context.remaining_plan.pop(0) # 取出下一步
            tool_name = current_step['tool']
            
            print(f"▶️ 正在执行: {current_step['task_desc']}")
            
            try:
                # 尝试执行工具 (假设这里可能发生网络断线、节点通信异常等)
                result = tools[tool_name](**current_step['args'])
                
                # ✅ 执行成功:保护现场,推进状态
                context.blackboard[f"step_{current_step['step_id']}"] = result
                context.completed_steps.append(current_step)
                retry_count = 0 # 重置重试计数器
                
            except Exception as e:
                # 🚨 执行失败:触发动态重规划
                print(f"✋ 警告:执行中断!捕获异常: {str(e)}")
                retry_count += 1
                
                if retry_count > max_retries:
                    return f"❌ 任务彻底失败,已达到最大重规划次数。最后错误: {str(e)}"
                
                # 进入纠错流程
                self._trigger_replan(context, current_step, str(e))

        return "✅ 所有规划节点执行完毕!"

    def _trigger_replan(self, context: DynamicAgentContext, failed_step: Dict, error_msg: str):
        """
        🛠️ 函数解析:核心重规划逻辑
        将失败现场打包,让大模型像“架构师救火”一样重新设计剩余路线。
        """
        replan_prompt = f"""
        System: You are an adaptive Agent Planner.
        Global Objective: {context.objective}
        
        [Status Report]
        Successfully completed: {json.dumps(context.completed_steps)}
        Current Memory State: {json.dumps(context.blackboard)}
        
        [Error Incident]
        You attempted to execute: {failed_step['task_desc']} using tool '{failed_step['tool']}'.
        But it failed with this error: "{error_msg}"
        
        [Instruction]
        Do NOT repeat the failed action exactly. 
        Analyze the error. Output a NEW JSON array of steps to achieve the remaining objective, starting from the current state.
        """
        
        # 调用大模型生成新的路线图
        new_plan_json = self.llm.invoke(replan_prompt)
        
        try:
            new_plan = json.loads(new_plan_json)
            print(f"🛡️ 侦测到路线变更!Agent 已生成包含 {len(new_plan)} 个步骤的新计划。")
            # 用新计划覆盖剩余计划
            context.remaining_plan = new_plan 
        except json.JSONDecodeError:
            print("❌ 重规划返回格式异常,保持原计划进行退避重试...")
            # 将失败的步骤塞回队列头部,尝试降级策略
            context.remaining_plan.insert(0, failed_step)
🎤 面试加分项 (Engineering Best Practices)

在面试中,除了讲清楚代码逻辑,一定要抛出这几个工业界防坑经验:

  • 避免“原地撞墙”(Infinite Loop of Doom):如果重规划时大模型只是固执地生成一模一样的计划,就会死循环。必须在 Prompt 中强硬约束:"Do NOT repeat the failed action exactly.",甚至可以在工具层加入惩罚机制。
  • 回退与熔断(Fallback & Circuit Breaker):作为工程人员,我们要知道 LLM 不是万能的。当重规划连续失败 3 次(max_retries)时,Agent 应该触发熔断机制,主动挂起任务,记录下当前的 Blackboard 状态,并发送报警请求人类介入(Human-in-the-loop),而不是无意义地烧毁 Token 额度。

7. 执行过程中发现计划不合理怎么办?

在真实的业务场景中,“计划赶不上变化”是常态。有时候工具并没有报错(API 返回 200),但拿到的数据是空的,或者大模型在执行到一半时,突然发现最初始的假设(Assumption)是错的。这就叫做“计划不合理”或“状态偏移(State Deviation)”。

解决这个问题的核心架构设计,是在传统的 Plan-and-Execute 中强行插入一个 ⚖️ 评估/控制节点(Evaluator/Controller),实现动态重规划(Dynamic Replanning)

🕸️ 网络结构拓扑图:带 Evaluator 的闭环控制流

在标准的执行流中,我们不再让 Executor 无脑跑完所有节点,而是引入了一个“监理”角色。

代码段

🔄 纠偏层

🦾 执行与控制层 (闭环)

🧠 规划层

Pop Step

Observation

✅ 合理 (Expected)

🚨 不合理/报错/数据异常

打包: 历史状态 + 异常报告

生成覆盖后续的 New Plan

🎯 User Goal

Planner: 生成初始 Plan

📋 Task Queue (当前计划)

Executor: 调用工具

⚖️ Evaluator: 结果合理吗?

💾 更新 Blackboard

🛠️ Error Context Builder

Replanner: 动态重规划

🚀 核心机制详解:异常诊断与重构
  1. 预设预期 (Expected State):在 Planner 生成计划时,不仅要输出 tasktool,还要强制要求输出 expected_outcome(预期结果)。
  2. Evaluator 哨兵节点:Executor 执行完后,把真实结果(Actual Observation)和预期结果一起交给 Evaluator(通常是一个较快的小模型或写死的判言)。
  3. 动态触发 (Triggering):如果 Evaluator 发现严重不符,立刻拦截,挂起任务,调用 Planner。
🧑‍💻 代码详细解读:Evaluator 与 Replanner 联动引擎

下面这段代码展示了如何实现带有 “自我纠察” 能力的 Agent 执行循环:

import json

class AdvancedAgentEngine:
    def __init__(self, llm, tools):
        self.llm = llm
        self.tools = tools
        self.blackboard = {}      # 🛡️ 保护现场:记录已完成的成功状态
        self.completed_steps = [] # 记录执行轨迹

    def evaluate_result(self, step_desc: str, actual_result: str, expected_outcome: str) -> dict:
        """
        ⚖️ 函数解析:Evaluator 节点
        用一个小模型快速判断:当前的执行结果是否满足了原始步骤的预期?
        """
        eval_prompt = f"""
        Task: {step_desc}
        Expected Outcome: {expected_outcome}
        Actual Result: {actual_result}
        
        Did the actual result successfully achieve the expected outcome?
        Reply in JSON: {{"success": true/false, "reason": "..."}}
        """
        # 实际工程中这里可用更便宜的模型如 GPT-4o-mini
        eval_res = json.loads(self.llm.invoke(eval_prompt))
        return eval_res

    def run_with_dynamic_replanning(self, user_objective, initial_plan):
        current_plan = initial_plan
        
        while current_plan:
            current_step = current_plan.pop(0)
            print(f"▶️ 执行步骤: {current_step['task']}")
            
            # 1. 执行器工作
            result = self.tools[current_step['tool']](**current_step['args'])
            
            # 2. 🛡️ Evaluator 介入评估
            eval_feedback = self.evaluate_result(
                current_step['task'], str(result), current_step['expected_outcome']
            )
            
            if eval_feedback['success']:
                print("✅ 评估通过,推进状态...")
                self.blackboard[current_step['step_id']] = result
                self.completed_steps.append(current_step)
            else:
                # 🚨 3. 发现不合理!触发动态重规划
                print(f"✋ 警报:计划不合理或执行异常!原因: {eval_feedback['reason']}")
                current_plan = self._trigger_replanning(
                    user_objective, current_step, result, eval_feedback['reason']
                )
                if not current_plan:
                    return "❌ 任务彻底失败,无法重规划。"

        return "🎉 任务圆满完成!"

    def _trigger_replanning(self, objective, failed_step, bad_result, failure_reason):
        """
        🔄 函数解析:动态重规划核心 Prompt
        将原计划、已完成的黑板状态、报错信息打包,强制要求模型调整路线。
        """
        replan_prompt = f"""
        System: You are an adaptive Replanner 🚀.
        Global Objective: {objective}
        
        [Context - What we have done successfully]
        Memory: {json.dumps(self.blackboard)}
        
        [The Failure - What went wrong]
        We tried to do: "{failed_step['task']}"
        But we got this unreasonable result: "{bad_result}"
        Evaluator Analysis: "{failure_reason}"
        
        [Instruction]
        The previous plan is broken. Based on the Current Memory and the Failure Analysis:
        1. DO NOT repeat the exact same failed action.
        2. Generate a NEW JSON array of steps to complete the remaining Global Objective.
        3. If you need to try a different tool or search with different keywords, do so.
        """
        new_plan_json = self.llm.invoke(replan_prompt)
        return json.loads(new_plan_json)
💡 面试高分技巧:如何防止 Agent “过度纠结”?

在面试中,讲完重规划逻辑后,一定要补充它的副作用和工程兜底方案,这会让你显得极具实战经验:

  • 痛点:死循环(Infinite Replanning Loop)。Agent 可能会陷入“执行 -> 发现不合理 -> 重规划出极其相似的步骤 -> 再次执行失败”的死循环。
  • 防御方案 ( 防御性编程 ) 🛡️
    1. TTL (Time To Live) 机制:给重规划设定一个最大阈值(如 max_replans = 3)。一旦超过,立刻熔断(Circuit Break)
    2. 强制工具惩罚:如果在步骤 2 调用 WebSearch 连续失败两次,在下一次传入的 replan_prompt 中,临时从 Available Tools 列表中把 WebSearch 剔除,强迫模型使用备用路径(如 WikiSearch)。
    3. Human-in-the-Loop (人在回路):当连续发生状态异常时,挂起当前 Agent 的 State,通过企微/钉钉发消息给人类:“主管,我查不到 2024 年的数据,是否要用 2023 年的代替?”接收到人类的 Yes/No 指令后,再将该指令注入 Blackboard 继续执行。

8. Reflection 机制是什么?

如果说 Dynamic Replanning(动态重规划)是 Agent 面对外部环境变化时的“随机应变”,那么 Reflection(反思) 则是 Agent 在面对自身失误时的“自我进化”。

从算法工程师的视角来看,Reflection 本质上是基于大模型的 Actor-Critic 架构在自然语言领域的一种变体。在传统的强化学习(如 PPO 算法)中,环境反馈的是标量奖励(Scalar Reward r t r_t rt)来指导策略更新;而在 Agent 架构中,环境反馈的是报错日志,Reflection 节点充当了 Critic 的角色,通过生成具体的文字指导(Textual Gradients)来优化 Actor 的下一步策略。

🧠 核心机制:Verbal Feedback (文字反馈)

Reflection 的核心在于让模型自己骂自己,并总结经验。它要求 Agent 在采取下一步行动之前,或者在任务失败后,对自身的行为轨迹(Trajectory)进行批判性审视。

模型不仅要知道“我错了”,还要结构化地输出:

  1. 诊断 (Diagnosis):“我为什么错?”
  2. 指导 (Guidance):“下次怎么避免?”

🚀 经典场景对比

  • 无 Reflection 的 Agent:遇到代码运行报错,立刻把报错信息扔给大模型说“修复它”。模型可能会盲目尝试修改另一行毫无关联的代码,或者陷入原地死循环。
  • 有 Reflection 的 Agent:在调试复杂的控制逻辑(例如与 ROS 节点通信,或处理多维张量数据)时遇到了异常。Reflection 节点不会立刻采取行动,而是先输出一段反思:“我之前假设 /cmd_vel 话题接收的是标准 Twist 消息,但实际报错显示环境期望的是带有时间戳的 TwistStamped。盲目重试会导致持续阻塞。我需要查阅文档,并修改消息体构造逻辑。” 这种反思文字会追加到 System Prompt 的短期记忆中,彻底改变后续的探索方向。
🕸️ 网络结构拓扑图:Reflexion 经典架构

在面试中,你可以直接画出这套著名的 Reflexion 闭环(Actor-Evaluator-SelfReflection)架构图:

代码段

🌐 外部环境

🧠 Agent 核心心智

1. Action (代码/指令)

2. Observation (日志/状态)

3. 成功 (Success)

3. 失败 (Failed)

4. 分析 Trajectory 产生反思

5. 写入 Verbal Feedback

6. 注入下一次 Prompt

🧑‍💻 Actor (执行者)

🪞 Reflection (反思者)

💾 Episodic Memory (记忆库)

执行器 / 物理引擎 / 终端

⚖️ Evaluator (成败评估)

🎉 任务结束

🧑‍💻 代码详细解读:Reflection 节点的工程实现

下面是一段精简但极具实战价值的 Reflection 引擎代码。重点观察 reflection_memory 是如何累积并影响 Actor 的。

class ReflectiveAgent:
    def __init__(self, llm):
        self.llm = llm
        self.reflection_memory = [] # 🛡️ 核心:存放历史反思的记忆库
        self.trajectory = []        # 存放当前的执行轨迹 (Action + Observation)

    def generate_action(self, task_instruction: str) -> str:
        """
        🧑‍💻 函数解析:Actor 节点。
        在生成 Action 时,不仅看当前任务,还要强制回顾过往的“血泪史”(Reflection Memory)。
        """
        # 将历史反思拼接到 Prompt 中
        reflections_str = "\n".join([f"- {r}" for r in self.reflection_memory])
        
        prompt = f"""
        System: You are an AI assistant. 
        Task: {task_instruction}
        
        [Your Past Reflections (Read carefully to avoid repeating mistakes)]
        {reflections_str if reflections_str else "None yet."}
        
        [Current Trajectory]
        {self.trajectory}
        
        Generate your next Action.
        """
        action = self.llm.invoke(prompt)
        self.trajectory.append(f"Action: {action}")
        return action

    def reflect_on_failure(self, task_instruction: str, error_observation: str):
        """
        🪞 函数解析:Reflection 节点 (Critic)。
        当动作导致失败时被触发。要求 LLM 充当“严厉的导师”,批判自己的轨迹。
        """
        self.trajectory.append(f"Observation: {error_observation}")
        
        reflection_prompt = f"""
        System: You are an expert code reviewer and diagnostician.
        The Agent was trying to achieve: "{task_instruction}"
        But it failed.
        
        [Agent's Trajectory]
        {self.trajectory}
        
        Analyze the exact reason for the failure. 
        Provide a concise, actionable instruction (Verbal Feedback) for the Agent to fix this in the next attempt.
        Start your reflection with: "In the previous attempt, I made a mistake because..."
        """
        # 生成反思文字
        verbal_feedback = self.llm.invoke(reflection_prompt)
        print(f"✋ Agent 正在深刻反思: \n{verbal_feedback}")
        
        # 将反思存入长期记忆库,清空当前轨迹准备重试
        self.reflection_memory.append(verbal_feedback)
        self.trajectory = [] 
🎤 面试高阶对话指南 (加分项)

在面试时,考官可能会问:“Reflection 会无限堆积导致 Context Window 爆炸吗?

你需要展现出资深工程师的防坑意识:

🛡️ “在实际业务中,Reflection Memory 确实不能无限叠加。一方面会导致 Token 消耗剧增,另一方面过多的反思会产生噪音,让模型无所适从(Lost in the Middle)。 我的解决方案是引入反思摘要(Reflection Summarization)机制或者基于相似度的检索。当反思条目超过 5 条时,我会触发一个后台 LLM 调用,将旧的、冗长的反思提炼成一条高密度的核心原则(Policy);或者利用向量数据库,只在 Actor 遇到类似场景时,才召回最相关的 Top-K 条反思。这其实非常契合强化学习中防止经验回放池(Replay Buffer)过拟合的思路。”

9. Self-Refine 是什么?

在 Agent 架构中,如果说 Reflection(反思) 是为了纠正 Agent 的“行为轨迹”(我走错路了),那么 *Self-Refine(自我迭代/优化)* 则是专注于提升 Agent 输出的“产出物质量”(这件作品还不够完美)。

对于大模型算法工程师而言,这是一种针对文本生成、复杂代码编写、甚至高质量图表生成的经典后处理(Post-processing)范式。

🧠 核心差异:Reflection vs Self-Refine (面试必考)
  • 🪞 Reflection (策略反思):关注 过程 (Process)
    • 场景:“我刚才调用 MySQL 工具查错了表名,下次我应该先 SHOW TABLES。”
  • 💎 Self-Refine (产出物打磨):关注 结果 (Artifact)
    • 场景:“这段写好的 Python 代码虽然能跑,但是时间复杂度是 O ( N 2 ) O(N^2) O(N2),而且没有捕获异常,我需要重构它。”
🕸️ 结构树形流程图:Self-Refine 核心飞轮

在白板推演或系统设计时,Self-Refine 的标准流转过程是一个优雅的内部闭环(Generate -> Critique -> Refine):

代码段

🔄 Self-Refine 核心飞轮

发现具体缺陷 (Flaws)

生成迭代版本 (V_next)

满足阈值 / 达到最大迭代

📝 初稿生成 (Initial Draft)

🧐 批判者节点 (Critique)

✍️ 靶向优化节点 (Refine)

🎉 最终高质量交付物 (Final Artifact)

🚀 进阶玩法:多维度评价 (Multi-aspect Critique)

在真实的工业落地中,简单的“找错”是不够的。优秀的 Critique 节点会从多个维度进行结构化打分。例如在代码生成任务中,会让大模型从【功能正确性】、【时间/空间复杂度】、【代码可读性】、【安全漏洞】四个维度分别打分并给出修改意见。

🧑‍💻 代码详细解读:工业级 Self-Refine 引擎

下面这段代码从基础的 Self-Refine 进行了升级,加入了结构化反馈提取打分机制,这是目前 AI 编程助手(如 Cursor、Devin 的底层逻辑片段)常用的手段:

import json

class SelfRefineEngine:
    def __init__(self, llm):
        self.llm = llm

    def generate_initial(self, prompt: str) -> str:
        return self.llm.invoke(f"Write a comprehensive implementation for: {prompt}")

    def generate_critique(self, text: str) -> dict:
        """
        🧐 函数解析:批判者 (Critic)
        强制模型充当苛刻的审查员,输出包含分数和具体修改建议的 JSON。
        """
        critique_prompt = f"""
        System: You are an expert Code Reviewer.
        Review the following output and provide a strict critique.
        
        [Target Output to Review]
        {text}
        
        Output JSON strictly:
        {{
            "score": <int 1-10>,
            "flaws": ["flaw 1", "flaw 2"],
            "improvement_plan": "Step-by-step instructions to fix..."
        }}
        """
        response = self.llm.invoke(critique_prompt)
        return json.loads(response)

    def execute_refine(self, original_text: str, critique_feedback: dict) -> str:
        """
        ✍️ 函数解析:优化者 (Refiner)
        拿着“检查报告”,对原文本进行靶向修改。
        """
        refine_prompt = f"""
        System: You are an expert Developer.
        Revise the original text based strictly on the Critique Feedback.
        
        [Original Text]
        {original_text}
        
        [Critique Feedback]
        {json.dumps(critique_feedback, indent=2)}
        
        Return ONLY the fully revised and polished version.
        """
        return self.llm.invoke(refine_prompt)

    def run(self, task_prompt: str, max_iterations=3, pass_score=9) -> str:
        """
        🚀 引擎主循环
        """
        print(f"▶️ 开始生成初稿...")
        current_artifact = self.generate_initial(task_prompt)
        
        for iteration in range(1, max_iterations + 1):
            print(f"🔄 正在进行第 {iteration} 轮 Self-Refine...")
            
            # 1. 给出修改建议与打分
            feedback = self.generate_critique(current_artifact)
            print(f"   ⚖️ 当前评分: {feedback['score']}/10. 发现缺陷: {len(feedback['flaws'])} 个.")
            
            # 🎯 终止条件:分数达标,无需继续烧 Token
            if feedback['score'] >= pass_score:
                print("✅ 质量达标,提前结束优化!")
                break
                
            # 2. 根据建议进行精细打磨
            current_artifact = self.execute_refine(current_artifact, feedback)
            
        return current_artifact
🛡️ 面试防坑指南:Self-Refine 的“阿喀琉斯之踵”

如果你能在面试中主动指出这个机制的缺陷,考官会对你的工程经验刮目相看:

  1. 盲目自信 (Overconfidence bias):LLM 常常会认为自己写的第一版就是完美的(即在第一轮 Critique 就给自己打 10 分)。解决办法:在 Critique 环节采用不同视角(Persona),或者强制让大模型先列出“至少 2 个缺点”才能打分。
  2. 退化现象 (Degradation / Mode Collapse):有时候改到第 4、第 5 轮,模型为了迎合某一个微小的修改建议,把原本正确的整体逻辑给改坏了(顾此失彼)。解决办法:设置较低的 max_iterations(通常 3-5 次为最佳),并在代码中保存每一个版本的历史,一旦发现分数下降,立刻回滚到上一版(Version Rollback)。

10. 如何判断 Agent 是否需要重新规划?

在真实的复杂业务链条或软硬件协同的 Agent 系统中,“何时触发重规划”往往比“如何重规划”更考验架构师的功底。触发过于频繁会导致系统像无头苍蝇一样耗尽算力和 Token(抖动现象);触发太晚则会导致错误被无限放大(雪崩效应)。

在面试中,我们需要向考官展示一个多级降级防护(Multi-level Fallback)的触发架构,通常包含以下三层递进的判断机制:


🛡️ 第一层:硬规则与异常诊断 (Rule-based Heuristics)

这是最底层、最快、零 Token 消耗的触发器,专门拦截致命错误。

  • 连续报错阈值:如果 Executor 在同一个子任务上连续抛出异常(如 max_retries = 3),说明当前规划的路径根本走不通。
  • 死循环检测:监控工具调用日志,如果发现 Agent 连续 4 次调用同一个工具且传入的参数高度相似,说明它陷入了“原地撞墙”的死循环,必须立刻打断。
  • 特定 Error Code 捕获:在端侧或边缘计算场景中,这一点尤为关键。例如部署在 RK3588 NPU 上的推理节点返回了硬件级别的 OUT_OF_MEMORY 或传感器 ROS 节点返回了 TimeoutError。这种底层环境崩溃不能靠简单重试,必须把状态抛回给 Planner 重新规划另一条降级路线。
📐 第二层:状态偏移判定 (State Deviation) —— 控制论视角的优雅解法

这是真正体现智能体架构水平的一层。它不依赖显式的“报错”,而是监测系统是否“走偏了”。

  • 机制:要求 Planner 在生成每一个步骤时,必须绑定一个 Expected State(预期状态)。执行完毕后,获取环境真实的 Actual State(实际状态) 进行计算。
  • 场景化举例:在复杂的物理控制或策略任务中(例如基于强化学习的火箭垂直回收制导),Planner 规划出一条轨迹流。其中某个节点的预期状态是:“高度下降至 1000m 时,预期垂直速度下降至 80 m / s 80 m/s 80m/s”。然而,受外部阵风干扰,执行器反馈的真实状态是速度仍高达 120 m / s 120 m/s 120m/s此时并没有代码报错(API 一切正常),但产生了严重的“状态偏移”。 如果不立刻打断并让上层 Planner 重新规划制导动作,任务必定失败。
⚖️ 第三层:LLM 异步裁判器 (Asynchronous LLM Watchdog)

这是最高层的语义级监控,用于处理长周期、极其模糊的任务。

  • 机制:对于长达数十步的任务,设置一个轻量级裁判模型(如微调过的小模型)。不参与具体干活,只负责“冷眼旁观”。每隔 N 步(或每隔 5 分钟),它会拉取全局 Blackboard 的进展,问自己一个问题:“基于目前的轨迹,最初的目标是否还在掌控中,且有望在预算内完成?”
  • 防偏移:这能有效防止 Agent 产生幻觉后“一本正经地胡说八道”。如果裁判判定 Confidence Score < 0.4,就会强制触发系统级的反思和重规划。

🕸️ 网络结构拓扑图:三级 Replanning 触发架构

你可以用这个流程图在面试时展现清晰的系统设计思路:

代码段

🚦 多级触发引擎 (Replanning Monitor)

🦾 执行循环 (Executor)

1. 检查底层报错

Pass ✅

Pass ✅

Failed 🚨

Deviation > Threshold 🚨

Confidence Low 🚨

Pass ✅

执行 Step N

获取环境 Observation / 日志

🛡️ Level 1: Rule Check
(异常/死循环?)

📐 Level 2: State Check
(预期 vs 实际偏移度)

⚖️ Level 3: LLM Judge
(每 N 步: 大方向对吗?)

🔥 触发动态重规划 (Replan)

✅ 继续执行 Step N+1


🧑‍💻 代码详细解读:Replanning 触发器引擎实现

下面的代码展示了如何将这三种判断机制封装为一个强大的守护进程(Monitor):

import json
import numpy as np

class ReplanningTriggerEngine:
    def __init__(self, llm_judge, max_retries=3, deviation_threshold=0.2):
        self.llm_judge = llm_judge
        self.max_retries = max_retries
        self.deviation_threshold = deviation_threshold # 允许的系统状态偏移容忍度
        
    def check_should_replan(self, step_info: dict, actual_result: dict, context_history: list) -> dict:
        """
        🚦 核心防线:多级检验当前状态是否需要打断 Agent
        返回格式: {"should_replan": bool, "reason": str}
        """
        
        # ==========================================
        # 🛡️ 第一层:硬规则与硬件级异常诊断
        # ==========================================
        if "error_code" in actual_result:
            if actual_result["error_code"] in ["RESOURCE_EXHAUSTED", "TIMEOUT", "HARDWARE_FAULT"]:
                return {"should_replan": True, "reason": f"Level 1 Trigger: 捕获到底层致命错误 {actual_result['error_code']}。"}
                
        # 死循环检测:查看过去 3 步是否都在调用同一个失败的工具
        recent_tools = [h.get("tool_name") for h in context_history[-3:]]
        if len(recent_tools) == 3 and len(set(recent_tools)) == 1 and actual_result.get("status") == "fail":
             return {"should_replan": True, "reason": "Level 1 Trigger: 侦测到 Agent 工具调用死循环 (原地撞墙)。"}

        # ==========================================
        # 📐 第二层:量化状态偏移判定 (State Deviation)
        # ==========================================
        expected_state = step_info.get("expected_metrics", {})
        actual_state = actual_result.get("actual_metrics", {})
        
        if expected_state and actual_state:
            # 计算欧氏距离或百分比偏差 (视业务场景而定)
            for key in expected_state:
                if key in actual_state:
                    expected_val = float(expected_state[key])
                    actual_val = float(actual_state[key])
                    
                    # 关键逻辑:如果偏差超过阈值(如 20%),触发熔断
                    deviation = abs(expected_val - actual_val) / (expected_val + 1e-9)
                    if deviation > self.deviation_threshold:
                        return {
                            "should_replan": True, 
                            "reason": f"Level 2 Trigger: 物理/数值状态严重偏移。指标 '{key}' 期望值 {expected_val},实际值 {actual_val},偏差率达 {deviation*100:.1f}%。"
                        }

        # ==========================================
        # ⚖️ 第三层:LLM 语义级异步裁判 (每 N 步触发)
        # ==========================================
        step_id = step_info.get("step_id", 1)
        if step_id % 3 == 0:  # 例如每 3 步进行一次全局宏观体检
            print("⚖️ 正在唤醒 LLM 裁判器进行全局轨迹评估...")
            judge_prompt = f"""
            You are a stern Project Manager Agent.
            Global Goal: {step_info['global_goal']}
            Recent Trajectory: {json.dumps(context_history[-3:])}
            
            Based strictly on the trajectory, is the agent hopelessly lost or hallucinating? 
            Respond in JSON format: {{"is_lost": true/false, "explanation": "..."}}
            """
            judge_response = json.loads(self.llm_judge.invoke(judge_prompt))
            
            if judge_response.get("is_lost", False):
                return {
                    "should_replan": True, 
                    "reason": f"Level 3 Trigger: LLM 裁判判定任务偏离主线。原因: {judge_response.get('explanation')}"
                }

        # 所有检查通过,允许继续执行
        return {"should_replan": False, "reason": "All checks passed. System nominal."}

💡 面试谈吐加分项

“在架构设计中,我们不能完全信任大模型(Level 3 会有幻觉且耗时),也不能完全依赖硬代码(Level 1 缺乏语义理解)。Level 2(预期与实际的状态对齐)才是智能体架构设计的灵魂,它迫使大模型在给出计划的同时,必须给出可供程序校验的量化验收标准(Acceptance Criteria),这才是实现 Agent 确定性落地的关键路径。”

11. 多步骤任务怎么拆分?

在 Agent 架构中,Planner(规划者)的水平高低,直接体现在它拆解复杂任务的颗粒度与拓扑结构上。一个初级 Agent 只能像流水线一样串行工作,而工业级 Agent 能够像优秀的微服务调度器一样,精准识别任务间的依赖关系,实现高并发执行。

在面试中,你需要向考官展示你对这两种拆分模式的深刻理解,尤其是后者的工程实现方案。


🛤️ 模式一:时序拆分 (Sequential Execution) —— 传统的线性执行

这是最基础的拆分方式,按照时间先后顺序(Step 1 -> Step 2 -> Step 3)进行排队。

  • 适用场景:上一步的输出是下一步的绝对输入。例如:“查阅今天的天气 -> 根据天气写一首诗 -> 将诗翻译成英文”。
  • 痛点:效率极低。如果任务链很长,且包含多个无关的检索任务,串行等待会导致 Agent 响应延迟(Latency)爆炸。
🕸️ 模式二:依赖图拆分 (DAG 调度) —— 现代 Agent 的并发核心

DAG(Directed Acyclic Graph,有向无环图) 是高级 Agent 任务调度的灵魂。它的核心思想是:让大模型在规划时,显式地输出每个子任务的“前置依赖(Depends On)”

  • 业务场景举例:用户要求“调研苹果和微软 2023 年 Q3 的财报,并生成对比柱状图”。
    • 如果用线性拆分:拉苹果数据(10s) -> 拉微软数据(10s) -> 合并(2s) -> 画图(5s) = 总耗时 27s。
    • 如果用 DAG 拆分:拉苹果和拉微软完全不相干,可以并发 (Parallel)!总耗时降至 10s + 2s + 5s = 17s。
🗺️ 网络结构拓扑图:复杂数据分析任务的 DAG 拆分流

我们在白板上可以用这个图来向考官解释依赖流的运作机制:

代码段

🕸️ 复杂任务的 DAG 依赖流 (并发提效)

提供 Apple_Data

提供 MSFT_Data

输出标准化 JSON

🎯 节点 A: 解析用户最终目标

🌐 节点 B: 爬取苹果 Q3 财报

🌐 节点 C: 爬取微软 Q3 财报

🧮 节点 D: 数据清洗与指标对齐

📊 节点 E: 调用 Python_Plot 生成对比图表

🎉 任务结束返回给用户

(👆 面试话术:“在这个图中,B 和 C 的入度都只依赖 A。一旦 A 完成,Executor 就可以开启两个线程并发执行 B 和 C。D 的入度是 B 和 C,所以它必须处于阻塞/等待状态,直到 B 和 C 都返回成功信号。”)


🪄 提示词技巧与 Schema 设计 (Prompt Engineering)

为了让大模型输出我们可以用代码直接解析的 DAG,Prompt 的设计至关重要。你必须通过 JSON Schema 强约束其输出格式,特别是 depends_on 字段。

Prompt 模板示例:

System: You are a Task Decomposition Engine.
Break down the objective into an optimal, parallelizable workflow.
Output a JSON object strictly matching this schema:
{
  "tasks": [
    {
      "task_id": "T1",
      "action": "...",
      "tool": "...",
      "depends_on": [] // Array of task_ids that must finish before this starts. Empty if it can start immediately.
    }
  ]
}

🧑‍💻 代码详细解读:工业级 DAG 任务调度器 (DAG Scheduler)

光说不练假把式。在面试中,手撕或者口述一段拓扑排序(Topological Sort)与任务调度的代码逻辑,是展现你 AI 算法与工程双修的最强杀手锏。

下面是一个精简版的 DAGScheduler,它展示了如何解析 Planner 的输出,并提取当前可以并行的任务:

import time
import threading

class DAGScheduler:
    def __init__(self, plan_json):
        """
        初始化调度器,输入是 Planner 生成的包含 depends_on 的 JSON 计划
        """
        self.tasks = {task['task_id']: task for task in plan_json['tasks']}
        # 记录每个任务剩余的前置依赖数量 (入度 In-degree)
        self.dependencies_count = {
            t_id: len(task.get('depends_on', [])) for t_id, task in self.tasks.items()
        }
        # 建立反向映射:记录“我被哪些任务依赖”,方便完成时去解锁它们
        self.unlocks = {t_id: [] for t_id in self.tasks}
        for t_id, task in self.tasks.items():
            for dep in task.get('depends_on', []):
                if dep in self.unlocks:
                    self.unlocks[dep].append(t_id)

    def get_ready_tasks(self) -> list:
        """
        🚀 核心函数:获取当前入度为 0(没有挂起的依赖),可以立即并发执行的任务
        """
        return [t_id for t_id, count in self.dependencies_count.items() if count == 0]

    def mark_completed(self, task_id: str, result_data: dict):
        """
        🛡️ 状态推进:一个任务完成后,解锁它下游的任务
        """
        print(f"✅ 任务 [{task_id}] 已完成!")
        # 防止重复标记
        if self.dependencies_count[task_id] == -1: 
            return
            
        self.dependencies_count[task_id] = -1 # 标记为已完成
        
        # 解锁下游依赖:将依赖该任务的下游节点的“前置计数器”减 1
        for downstream_task in self.unlocks.get(task_id, []):
            self.dependencies_count[downstream_task] -= 1
            if self.dependencies_count[downstream_task] == 0:
                print(f"🔓 下游任务 [{downstream_task}] 的依赖已全部满足,进入就绪队列!")

# ================= 模拟执行过程 =================
mock_plan = {
    "tasks": [
        {"task_id": "T1", "desc": "明确指标", "depends_on": []},
        {"task_id": "T2", "desc": "爬取苹果", "depends_on": ["T1"]},
        {"task_id": "T3", "desc": "爬取微软", "depends_on": ["T1"]},
        {"task_id": "T4", "desc": "数据合并", "depends_on": ["T2", "T3"]}
    ]
}

scheduler = DAGScheduler(mock_plan)

# 引擎主循环
while True:
    ready_tasks = scheduler.get_ready_tasks()
    if not ready_tasks:
        # 如果没有就绪任务,且还有任务未完成,说明图有环(死锁)或者全完成了
        break
        
    print(f"▶️ 调度器:当前可 [并发执行] 的任务批次 -> {ready_tasks}")
    
    # 模拟并发执行完成 (实际工程中这里是用 asyncio.gather 或者线程池执行 Tool)
    for t_id in ready_tasks:
        # 假设执行成功
        scheduler.mark_completed(t_id, result_data={})
        
print("🎉 整个 DAG 任务图谱执行完毕!")
🎤 面试进阶防坑 (加分项)

考官可能会追问:“如果大模型出现了幻觉,在输出 JSON 时搞出了循环依赖(比如 A 依赖 B,B 依赖 A)怎么办?”

你的完美回答:

✋ *"大模型输出的图确实不一定是绝对安全的 DAG。所以我们在拿到 JSON 后,不能直接丢给调度器。必须在构建执行队列前,跑一遍标准的拓扑排序(如 Kahn 算法)*或者*深度优先搜索(DFS)的环检测。如果检测到环,系统绝不能启动执行,而是应该将错误信息打包,抛出 DAGValidationError,利用我们在上文提到的重规划(Replanning)*机制,强制要求 Planner 修正依赖逻辑并重新输出。"

12. 如何避免 Agent 过度拆分任务?

在开发 Agent 时,我们经常会遇到一种令人崩溃的现象:“微操大师”综合征

大模型为了展现其强大的逻辑能力(受到 CoT 训练习惯的影响),往往会把一个简单的任务拆碎成几十个毫无意义的微观步骤。例如,用户要求“写一段冒泡排序并运行”,Agent 可能会拆解出:1. 定义数组变量 -> 2. 写外层循环 -> 3. 写内层循环 -> 4. 打印结果。这会导致系统频繁调用 API,陷入死循环,且浪费巨量 Token。

解决这个痛点,是体现你 Prompt 工程与架构控制能力的绝佳面试考点。

🕸️ 结构树形对比图:微操大师 vs 架构师

在白板上,你可以用这幅对比图向考官直观展示“过度拆分”与“合理拆分”的本质区别:

代码段

✅ 对齐工具粒度的拆分 (架构师)

🎯 目标: 写一段 Python 冒泡排序并测试

Step 1: 调用 Tool [Python_Coder] 一步生成并运行代码

❌ 灾难性的过度拆分 (微操大师)

🎯 目标: 写一段 Python 冒泡排序并测试

Step 1: 创建 test.py 文件

Step 2: 导入必要库

Step 3: 编写 def bubble_sort

Step 4: 编写两层 for 循环

Step 5: 调用 python 运行


🚀 核心破解策略与工程实现

要治愈 Agent 的过度拆分,我们需要在提示词层(Prompt)代码逻辑层(Code)双管齐下:

1. 🔧 对齐工具粒度 (Tool-Granularity Alignment)

Agent 不知道你的工具到底有多强大。你必须在 Planner 的 System Prompt 中清晰地界定工具的能力边界(Capability Boundary)。

  • Prompt 话术规范

    “你必须严格根据【已有工具的威力】来拆分任务。如果一个子目标可以直接被现有工具(如 Python_InterpreterData_Analyzer)一次性解决,请绝对不要继续向下拆分成更细的代码逻辑或步骤。 你的职责是调度工具,而不是手写工具内部的执行细节!”

2. 🎭 Few-Shot Examples (小样本规范化)

大模型是高度依赖 In-context Learning(上下文学习)的。给出 1-2 个具体的“反例”和“正例”,比写一万句规则都管用。

  • Prompt 注入示例

    [
      {
        "user_query": "统计 data.csv 里的缺失值并画个饼图",
        "bad_plan": ["读取文件", "检查列1缺失", "检查列2缺失", "计算总数", "调用画图工具"],
        "good_plan": ["调用 Tool: [Pandas_Data_Analyzer] 一步完成缺失值统计与画图"]
      }
    ]
    
3. 🛡️ 设置最大深度/步骤阈值 (代码级强制卡点)

在代码层面引入一个 Validator(验证器),拦截那些显然已经失控的长串计划。

🧑‍💻 代码函数解析:防过度拆分拦截器

class PlanValidator:
    def __init__(self, max_steps=5):
        self.max_steps = max_steps
        
    def validate_and_compress(self, plan_json: dict) -> dict:
        """
        🛡️ 核心验证逻辑:如果发现生成的计划过长,直接打回或进行融合。
        """
        tasks = plan_json.get("tasks", [])
        
        # 1. 拦截超长计划 (硬熔断)
        if len(tasks) > self.max_steps:
            print(f"🚨 警告:检测到过度拆分行为!步骤数 ({len(tasks)}) 超过阈值 ({self.max_steps})。")
            raise ValueError(f"Plan too complex. Please compress your plan to under {self.max_steps} steps based on tool capabilities.")
            
        # 2. 启发式警告 (Heuristic Check)
        # 如果连续 3 个任务调用的都是同一个基础工具 (比如写文件的 bash 命令),大概率是拆分过度了
        tool_sequence = [t.get("tool") for t in tasks]
        for i in range(len(tool_sequence) - 2):
            if tool_sequence[i] == tool_sequence[i+1] == tool_sequence[i+2]:
                print("✋ 警告:侦测到工具的连续冗余调用,系统可能会陷入微操黑洞。")
                # 可以在此处触发重新规划,要求模型把这三步合为一步
                
        return plan_json
💡 面试进阶加分项:Macro-Operator (宏动作) 思想

考官如果问:“那如果任务确实很复杂,5步做不完怎么办?”

你可以抛出高级架构思维:引入宏动作(Macro-Operator)或分层 Agent(Hierarchical Agents)

“如果我发现 Agent 在很多任务中,总是把 A 拆成 B、C、D 三步,这说明我们提供的底层工具粒度太细了。在工程实践中,我不应该让 Agent 每次都去拆分,而是应该在代码层写一个新的组合工具(Tool E = B + C + D)。这就像在操作系统中封装高阶 API 一样。让高层 Planner 只调度宏观任务,具体的细碎步骤下放给底层的 Sub-Agent(子智能体)用写死的代码逻辑去执行。这才是解决过度拆分的终极工业级方案。”


第四部分:长上下文与状态管理

13. 复杂任务中如何保存中间状态?

状态管理(State Management)决定了 Agent 到底是一个“只有 7 秒记忆的健忘症”,还是一个“步步为营的可靠助手”。在动辄长达十几分钟、包含几十次工具调用的复杂任务中,如果状态管理崩溃,Agent 就会陷入“我是谁?我在哪?我刚才干了什么?”的死循环。

在面试中,向考官展示你对**分层记忆架构(Hierarchical Memory Architecture)*的理解,是拿下高分的核心。现代 Agent 通常采用类似人类大脑的*三级存储设计

🕸️ 网络结构拓扑图:Agent 分层记忆流转图

我们在架构设计时,绝不能把所有信息都无脑塞进 Prompt 里,而是要进行冷热数据分离

代码段

💾 分层记忆系统 (State Management)

🧠 Agent 运行中枢

1. 写入微观执行日志

2. 更新核心进度与指针

3. 存储超长文本/原始文档

返回 doc_id (指针)

核心状态注入下轮 Prompt

近期上下文注入下轮 Prompt

🦾 Executor (执行当前步骤)

📋 Scratchpad (短时工作台)
[最近3-5步推理轨迹, 滑动窗口]

🗂️ Blackboard (全局黑板/状态机)
[JSON 键值对, 全局变量指针]

📚 Vector DB (长记忆存储)
[Chroma/Milvus 向量库]


🚀 核心机制解析与场景落地
1. 黑板模式 (Blackboard / Context Dict) —— Agent 的“内存 (RAM)”

这是最常用的全局状态机,通常维护一个全局 JSON 对象。Executor 在每步结束后,只在这个 JSON 中更新关键的、结构化的变量。

  • 设计原则:只存结果和“指针”,不存长篇大论。

  • 示例结构

    {
      "global_goal": "分析2023年Q3财报",
      "current_step": 2,
      "status": "in_progress",
      "variables": {
         "downloaded_file_path": "/tmp/q3_report.pdf", 
         "extracted_tables": ["table1", "table2"],
         "summary_doc_id": "vec_db_uuid_8848" // 🛡️ 核心技巧:这里只存向量库的 ID 指针
      }
    }
    
2. 短记忆 (Scratchpad) —— Agent 的“L1 缓存”

存放最近 3-5 步的推理轨迹(Thought)和简短的观测结果(Observation)。

  • 痛点解决:防止 Context Window 溢出。如果任务执行了 20 步,把 20 步的日志全塞进去,模型会产生严重的注意力漂移(Lost in the Middle)
  • 滑动窗口机制:采用 FIFO(先进先出)队列,永远只保留最近 5 步的动作,或者在达到特定 Token 数量时,强制调用小模型将前 10 步总结为一句话(Memory Compression)。
3. 长记忆 (Vector Database) —— Agent 的“硬盘”

用于保存极其冗长的中间结果,例如抓取到的 50 页网页文本、数万行的日志文件。

  • 技术栈:Chroma, Milvus, FAISS。
  • 工作流:Executor 抓取到长文本后,立刻将其切片(Chunking)、向量化并存入长记忆,然后在 Blackboard 中记下一个 Document_ID。当后续步骤需要查阅这些细节时,Agent 调用特定的“检索工具(Retrieval Tool)”,带着问题去长记忆里捞取 Top-K 的相关片段。

🧑‍💻 代码函数解析:Agent Memory Manager 引擎

以下这段工业级代码片段,展示了如何在代码中优雅地统筹这三种记忆机制:

import json
from collections import deque

class AgentMemoryManager:
    def __init__(self, max_scratchpad_steps=5, vector_db_client=None):
        # 1. 初始化黑板 (全局状态)
        self.blackboard = {
            "global_goal": "",
            "step_count": 0,
            "variables": {}
        }
        # 2. 初始化短记忆 (使用双端队列实现滑动窗口)
        self.scratchpad = deque(maxlen=max_scratchpad_steps)
        # 3. 初始化长记忆 (向量数据库客户端)
        self.vector_db = vector_db_client

    def initialize_task(self, goal: str):
        self.blackboard["global_goal"] = goal

    def update_blackboard(self, key: str, value: any):
        """🛡️ 更新全局变量库"""
        self.blackboard["variables"][key] = value
        print(f"🗂️ 黑板已更新: {key} = {value}")

    def add_to_scratchpad(self, action: str, observation: str):
        """📝 记录近期轨迹(滑动窗口自动剔除旧数据)"""
        self.blackboard["step_count"] += 1
        step_log = f"Step {self.blackboard['step_count']} | Action: {action} | Obs: {observation[:100]}..."
        self.scratchpad.append(step_log)

    def store_long_term_data(self, data_key: str, massive_text: str) -> str:
        """
        📚 处理长文本的杀手锏:将数据沉淀到向量库,向黑板返回一个指针(ID)。
        """
        if not self.vector_db:
            raise ValueError("Vector DB not initialized!")
            
        # 模拟存入向量库并获取唯一 ID
        doc_id = self.vector_db.insert_document(massive_text)
        
        # 🛡️ 核心技巧:黑板里千万别存 massive_text,只存 doc_id
        self.update_blackboard(f"{data_key}_pointer", doc_id)
        return doc_id

    def build_next_prompt(self, current_task_desc: str) -> str:
        """
        🚀 动态拼装发给大模型的 Prompt,实现冷热数据完美融合
        """
        prompt = f"""
        [Global Objective]
        {self.blackboard['global_goal']}
        
        [Current System State (Blackboard)]
        {json.dumps(self.blackboard['variables'], indent=2)}
        
        [Recent Trajectory (Scratchpad)]
        {chr(10).join(self.scratchpad) if self.scratchpad else "No actions taken yet."}
        
        [Current Task]
        {current_task_desc}
        """
        return prompt
🎤 面试高分对答技巧 (Pro-Tips)

在面试中,如果考官追问:“黑板模式里的变量谁来定义?大模型怎么知道要存哪些变量?”

你可以这样回答:

✋ *"在传统的 Plan-and-Execute 架构中,这些变量通常是在 Planner 生成初始 JSON 计划时就**预声明(Pre-declared)*好的。这就好比我们在写 C++ 时先定义变量名。 比如 Planner 规划:{"step": 1, "task": "下载数据", "output_var": "raw_data_path"}。Executor 在执行完这一步后,就会强制把结果写到黑板的 raw_data_path 这个 key 里。下游的任务在执行时,Prompt 会自动去黑板里解析并提取这个变量的值。这种强契约的设计,极大地提高了多步骤任务的数据流转稳定性。"

14. 如何让 Agent 支持长任务?

当你的 Agent 从“帮我查个天气”进化到“帮我自动开发一个电商网站的后端代码,并完成部署”时,任务周期可能会从几秒钟拉长到几个小时甚至几天。此时,传统的单体 Agent 架构会瞬间崩溃。

在面试中,考官最喜欢用长周期任务来考察求职者的工程化落地能力。长任务的两大死穴是:Context Window 溢出导致的 API 报错,以及“Lost in the Middle”(注意力漂移)导致的遗忘与幻觉。

为了打造能连续运行 7x24 小时的工业级 Agent,我们需要引入以下三大核心架构机制:


🕸️ 网络结构拓扑图:长任务分层与压缩流

在白板上推演长任务时,必须展现出多智能体协同与内存降维的拓扑结构:

代码段

💾 持久化与压缩层

👷 Worker Agents (底层干活/高频擦写)

👔 Manager Agent (中继协调)

👑 CEO Agent (全局规划/长期视野)

派发 Phase 1: 数据库设计

调用 DBA Agent

调用 Python Agent

返回结果 (隐藏重试/报错细节)

返回结果 (隐藏代码调试轨迹)

累积超 8k Tokens

总结为精炼状态

每个 Phase 结束

接收长任务: '开发一个完整的电商后端'

粗粒度拆解为 Phase 1, Phase 2, Phase 3

拆解为表结构设计、ORM代码编写

生成并验证 SQL

编写 SQLAlchemy 模型

🗜️ Memory Compressor (记忆压缩器)

💽 DB: State Checkpointing (状态快照)


🗜️ 机制一:记忆压缩 (Memory Compression) —— 抛弃冗余,提炼核心

在漫长的探索过程中,Agent 可能会为了配置一个环境报错重试 20 次。如果把这 20 次啰嗦的来回对话全放在 Prompt 里,模型会被噪音淹没(Lost in the middle)。

具体做法:引入一个后台的 Summarizer(压缩节点)。设置一个 Token 阈值(如 8000 Tokens)或步骤阈值。触发时,调用小模型将前面的“血泪史”强制压缩为高度密集的陈述性事实

🧑‍💻 代码函数解析:自适应上下文压缩器

class ContextCompressor:
    def __init__(self, llm, max_tokens=8000):
        self.llm = llm
        self.max_tokens = max_tokens
        
    def compress_if_needed(self, conversation_history: list) -> list:
        """
        🚀 函数解析:当对话历史超载时,截断早期记录,用一句高度概括的摘要替换。
        保留最近的 3 条记录以维持工作上下文。
        """
        current_tokens = self._estimate_tokens(conversation_history)
        
        if current_tokens < self.max_tokens:
            return conversation_history # 未超载,保持原样
            
        print("🗜️ 警告:Context Window 即将溢出,触发记忆压缩机制!")
        
        # 将历史分为:[待压缩的早期历史] + [保留的近期历史]
        early_history = conversation_history[:-3]
        recent_history = conversation_history[-3:]
        
        # 强制大模型提炼事实,剥离闲聊和报错重试的噪音
        compression_prompt = f"""
        Summarize the following interaction history into concise, factual bullet points.
        Focus ONLY on:
        1. Environment states confirmed or variables configured.
        2. Sub-tasks successfully completed.
        3. Critical constraints discovered.
        
        History to compress: {early_history}
        """
        summary = self.llm.invoke(compression_prompt)
        
        # 重新拼接压缩后的上下文
        compressed_history = [
            {"role": "system", "content": f"[Previously Condensed Memory]:\n{summary}"}
        ] + recent_history
        
        return compressed_history
🏢 机制二:分层架构 (Hierarchical Multi-Agent) —— 隔离上下文污染

就像真实的大公司运作一样,CEO 不需要知道清洁工是用哪个牌子的拖把扫地的。为了支持长周期任务,必须将 Agent 拆分为不同层级,阻断上下文的向上传递污染。

  • CEO Agent (Global Planner):只维护高阶的 DAG 图(比如长达一周的项目里程碑)。它的上下文里只有:阶段 A 完成、阶段 B 进行中。
  • Manager Agent (Router):负责将里程碑转化为具体的 API 调用逻辑或分发给特定的专家组。
  • Worker Agent (Executor):纯粹的牛马。比如代码执行 Agent,它的上下文中只包含当前要写的那一个函数。当它写完并测试通过后,它只向 Manager 返回一句:"代码已写入 login.py,测试覆盖率 100%"。它刚才改 Bug 经历的 5000 个 Token 对话被直接丢弃,绝不返回给 CEO。

面试话术:“这种分层架构(如 CrewAI 或 LangGraph 的 Subgraphs 实现)不仅解决了长任务的 Context 溢出,还能让底层 Worker 采用更便宜、速度更快的模型,大幅降低系统整体的运行 Cost。”

💾 机制三:状态快照与断点续传 (Checkpointing & Resume)

对于需要运行几天甚至几周的任务(如持续监控舆情、自动化数据标注流水线),程序崩溃、API 超时、网络断开是 100% 会发生的。没有持久化的 Agent 只是玩具。

具体做法:将我们在前文提到的 Blackboard(黑板字典),定期序列化为 JSON 并落盘(Redis, PostgreSQL, 或本地 SQLite)。这被称为打快照(Checkpoint)。

🧑‍💻 代码详细解读:Agent 的“游戏存档”机制

import json
import sqlite3
from datetime import datetime

class AgentCheckpointManager:
    def __init__(self, db_path="agent_states.db"):
        self.conn = sqlite3.connect(db_path)
        self._init_db()
        
    def _init_db(self):
        cursor = self.conn.cursor()
        cursor.execute('''
            CREATE TABLE IF NOT EXISTS checkpoints (
                task_id TEXT PRIMARY KEY,
                state_json TEXT,
                last_updated TIMESTAMP
            )
        ''')
        self.conn.commit()

    def save_checkpoint(self, task_id: str, current_blackboard: dict):
        """
        🛡️ 游戏存档:在每个重要宏观节点执行完成后,将 Agent 的灵魂(状态)持久化。
        """
        state_str = json.dumps(current_blackboard)
        cursor = self.conn.cursor()
        cursor.execute('''
            INSERT OR REPLACE INTO checkpoints (task_id, state_json, last_updated)
            VALUES (?, ?, ?)
        ''', (task_id, state_str, datetime.now()))
        self.conn.commit()
        print(f"💾 任务 [{task_id}] 状态快照已保存至数据库!")

    def resume_from_checkpoint(self, task_id: str) -> dict:
        """
        🚀 断点续传:服务重启后,根据 Task ID 拉取状态,继续干活。
        """
        cursor = self.conn.cursor()
        cursor.execute('SELECT state_json FROM checkpoints WHERE task_id = ?', (task_id,))
        row = cursor.fetchone()
        
        if row:
            print(f"🔄 侦测到任务 [{task_id}] 的历史快照,正在进行热恢复...")
            return json.loads(row[0]) # 返回恢复后的 Blackboard
        else:
            print("🆕 未发现历史状态,启动全新任务。")
            return {"status": "init", "completed_steps": [], "variables": {}}

# ================= 实际业务调度流 =================
def run_long_agent_task(task_id, objective):
    db_manager = AgentCheckpointManager()
    
    # 尝试从数据库复活 Agent
    blackboard = db_manager.resume_from_checkpoint(task_id)
    
    if blackboard["status"] == "init":
        blackboard["plan"] = planner.generate_plan(objective)
        blackboard["status"] = "running"
        
    # 从上次崩溃的地方继续执行
    while blackboard["plan"]:
        current_step = blackboard["plan"][0] # Peek, 不 pop
        
        try:
            # 执行耗时极长的任务
            result = execute_step(current_step) 
            blackboard["completed_steps"].append(current_step)
            blackboard["plan"].pop(0) # 成功后才移出队列
            
            # ✅ 每走稳一步,就保存一次状态 (Checkpoint)
            db_manager.save_checkpoint(task_id, blackboard)
            
        except Exception as e:
            print(f"🚨 突发异常导致进程崩溃: {e}")
            print("🛡️ 别慌,由于 Checkpoint 机制,下次重启进程时将跳过已完成步骤!")
            break # 进程退出,等待调度系统重启

💡 面试高频追问: 如果大模型在生成中间结果时产生了带有不可见特殊字符的脏数据,导致序列化(json.dumps)失败怎么办?

你的硬核回答:“在工业界,我们不会直接无脑 json.dumps。我们在打快照前,会引入 Pydantic 模型进行强制类型校验和过滤。将非结构化的自由文本隔离,并清洗掉所有无法 JSON 序列化的对象(如文件句柄、网络连接 Socket),确保存入数据库的 State 是绝对纯净且符合 Schema 的。这叫防腐层(Anti-Corruption Layer)设计。”


第五部分:Agent 评估

15. 如何评估 Agent 的任务完成率?

评估 Agent 毫无疑问是目前大模型工业界的一大核心痛点和深水区。作为将要面试高阶 AI 应用工程师的你,必须向考官展现出一种范式转移(Paradigm Shift)的认知:评估 Agent 绝不能像评估传统 NLP 模型那样看 BLEU/ROUGE,也不能仅仅看“对话是否流畅”,更不能盲目迷信 LLM-as-a-Judge(让大模型自己当裁判)。我们真正要看的是“事情是否办成”,即环境状态是否发生了预期的改变(State Transition)。

为了全面、客观地量化 Agent 的能力,业内通常采用以下四维评估体系,并结合自动化隔离沙盒(Automated Sandbox Evaluation)进行打分。


📐 四维评估指标体系 (Evaluation Metrics)

1. Binary Success Rate (二元成功率 / 硬核成功率)

这是最硬核、最没有水分的指标。在隔离的沙盒环境(如专门用来评测 Web Agent 的 WebArena,或评测系统 Agent 的 OSWorld)中,任务下达后,直接用脚本检测系统最终的物理/数字状态

  • 评判标准:非 1 即 0。比如任务是“将桌面上的 data.csv 重命名为 report.csv 并发邮件给 Boss”。无论 Agent 输出了多么华丽的规划日志,只要最后邮箱里没这封信,或者附件名字不对,就是 0 分。

2. Sub-goal Completion Rate (子目标完成率 / Partial Success)

对于超长周期的多步任务,如果全盘成功太难(硬核成功率可能接近 0%),为了区分模型的真实水平,可以拆解检查点(Checkpoints)看子节点的命中率。

  • 计算方式:总共有 5 个关键的子目标节点(例如:成功登录系统、成功爬取数据、成功生成图表、成功写入文件、成功发送邮件)。如果 Agent 在第 4 步崩溃,它依然能获得 3 5 = 60 % \frac{3}{5} = 60\% 53=60% 的局部成功分。这能非常精细地测出不同大模型的“任务续航极限”。

3. Trajectory Efficiency (轨迹效率)

不仅要看 Agent 能不能做成,还要看它是不是绕了远路、浪费了算力

  • 公式推导

    E f f i c i e n c y = N o p t i m a l N a g e n t Efficiency = \frac{N_{optimal}}{N_{agent}} Efficiency=NagentNoptimal

    其中 N o p t i m a l N_{optimal} Noptimal 是人类专家或最优策略完成该任务的最少行动步数(例如 3 步), N a g e n t N_{agent} Nagent 是 Agent 实际使用的步数。如果 Agent 疯狂试错、频繁重规划,用了 15 步才歪打正着完成任务,那么它的效率分只有 3 15 = 20 % \frac{3}{15} = 20\% 153=20%,这在计算 API Cost 的商业落地中是不可接受的。

4. 鲁棒性与安全惩罚 (Robustness & Safety Penalties)

这属于扣分项,主要衡量 Agent 在复杂环境中的“智商掉线”频率:

  • API Hallucination Rate (工具幻觉率):大模型无中生有,调用了根本不存在的工具(如 Tool_Hack_Bank_Account),或传入了不符合 Schema 的参数。
  • Fallback Rate (降级求助频率):系统遇到异常时无法自主通过 Reflection 修复,频繁触发兜底机制求助人类(Human-in-the-loop)的次数。求助越多,Agent 的自治级别(Autonomy Level)越低。

🕸️ 网络结构拓扑图:自动化沙盒评测流水线

在面试中,如果考官问:“那具体怎么写评测代码?”你可以直接画出这套基于 Docker 容器的环境隔离自动化评测图

代码段

⚖️ 评测引擎 (Evaluator)

🛡️ 隔离的 Docker 沙盒环境

📊 Benchmark 评测集

调用 Bash, Python, SQL 工具

验证表是否存在且字段正确

验证失败或执行超时

Task: 在数据库中新建一张用户表

获取 Expected State (预期状态)

初始化环境 (重置 DB, 文件系统)

🦾 注入 Agent 开始执行

环境状态发生改变

运行验证脚本 (Verification Script)

✅ 成功 (Score = 1)

🚨 失败 (Score = 0)


🧑‍💻 代码详细解读:工业级沙盒评测函数解析

这部分是面试的终极杀手锏。不要提用另一个大模型来当裁判(LLM-as-a-Judge 无法验证真实世界的代码是否真正跑通了),而是要展示你具备写自动化状态校验脚本(State Verification Script)的能力

import subprocess
import json

class SandboxEvaluator:
    def __init__(self, container_id="agent_sandbox_ubuntu"):
        self.container_id = container_id

    def execute_in_sandbox(self, command: str) -> dict:
        """
        🚀 底层机制:在隔离的 Docker 沙盒中无状态地执行验证命令。
        """
        docker_cmd = f"docker exec {self.container_id} {command}"
        result = subprocess.run(docker_cmd, shell=True, capture_output=True, text=True)
        return {
            "success": result.returncode == 0,
            "stdout": result.stdout.strip()
        }

    def evaluate_task_create_file(self, target_path: str, expected_content: str) -> int:
        """
        ⚖️ 评测函数示例:检验 Agent 是否成功创建了文件并写入了正确内容。
        """
        # 1. 检查文件是否在沙盒中物理存在
        check_exist = self.execute_in_sandbox(f"test -f {target_path}")
        if not check_exist["success"]:
            print("❌ 评测失败:文件未被创建。")
            return 0
            
        # 2. 检查文件内容是否正确 (防范 Agent 的幻觉)
        read_file = self.execute_in_sandbox(f"cat {target_path}")
        if expected_content not in read_file["stdout"]:
            print(f"❌ 评测失败:文件存在,但内容错误。实际内容: {read_file['stdout']}")
            return 0
            
        print("✅ 评测通过:硬核二元成功率得 1 分!")
        return 1

    def calculate_efficiency(self, agent_steps_log: list, human_optimal_steps: int) -> float:
        """
        📈 计算轨迹效率 (Trajectory Efficiency)
        """
        actual_steps = len(agent_steps_log)
        if actual_steps == 0:
            return 0.0
            
        efficiency = human_optimal_steps / actual_steps
        # 限制上限为 100%(以防 Agent 找到了比人类专家设定的更短的罕见捷径)
        return min(efficiency, 1.0) 

# ================== 面试模拟对答场景 ==================
# 考官:如果这个任务是让 Agent 总结一份极其主观的 100 页研报呢?沙盒里没法用 cat 命令校验对错怎么办?
# 你的回答 ✋:"对于强客观、操作类的系统控制任务(如写代码、改配置),必须用我上面写的沙盒状态校验法。
# 但对于主观生成类任务(Summarization/Creative Writing),物理校验确实会失效。
# 此时,我们才会降级使用 LLM-as-a-Judge,比如引入 GPT-4 作为裁判,或者采用 RAG 领域常用的
# RAGAS 评估框架,从忠实度(Faithfulness)和答案相关性(Answer Relevance)等维度进行打分。
# 但作为 Agent 工程师,我要强调:执行类的 Action 必须靠物理状态评估,生成类的 Artifacts 才能靠 LLM 评估。绝不能一刀切!"
🎤 黄金面试话术总结

🛡️ “在评估 Agent 时,我非常推崇将任务环境彻底隔离并容器化。因为目前很多开源大模型在『嘴炮』上非常厉害,能够生成看似完美的思考过程(Reasoning Log),但一旦真枪实弹去调用工具,就会报出无数底层环境错误。因此,抛弃基于文本比对的 NLP 传统评测,拥抱基于状态变更(State-Match)的自动化沙盒评测,才是检验一个 Agent 能否真正落地的唯一标准。”

更多推荐