Skip to main content
人机协同(HITL)中间件允许您为智能体的工具调用添加人工监督。 当模型提出可能需要审查的操作时——例如写入文件或执行 SQL——中间件可以暂停执行并等待决策。 它通过根据可配置的策略检查每个工具调用来实现这一点。如果需要干预,中间件会发出一个 interrupt 来暂停执行。图状态会使用 LangGraph 的持久化层保存,因此执行可以安全地暂停并在稍后恢复。 然后,人工决策将决定接下来发生什么:操作可以按原样批准(approve)、在运行前修改(edit)或拒绝并附带反馈(reject)。

中断决策类型

中间件定义了三种内置的人工响应中断的方式: 每个工具可用的决策类型取决于您在 interrupt_on 中配置的策略。 当多个工具调用同时暂停时,每个操作都需要单独的决策。 决策必须按照中断请求中操作出现的顺序提供。
编辑工具参数时,请保守地进行更改。对原始参数的重大修改可能导致模型重新评估其方法,并可能多次执行工具或采取意外操作。

配置中断

要使用 HITL,请在创建智能体时将该中间件添加到智能体的 middleware 列表中。 您需要配置一个从工具操作到每个操作允许的决策类型的映射。当工具调用匹配映射中的操作时,中间件将中断执行。
您必须配置一个检查点以在中断之间持久化图状态。 在生产环境中,请使用持久化检查点,如 AsyncPostgresSaver。对于测试或原型设计,请使用 InMemorySaver调用智能体时,传递一个包含线程 IDconfig,以将执行与会话线程关联。 详情请参阅 LangGraph 中断文档
dict
required
工具名称到批准配置的映射。值可以是 True(使用默认配置中断)、False(自动批准)或一个 InterruptOnConfig 对象。
string
default:"Tool execution requires approval"
操作请求描述的前缀
InterruptOnConfig 选项:
list[string]
允许的决策列表:'approve''edit''reject'
string | callable
自定义描述的静态字符串或可调用函数

响应中断

当您调用智能体时,它会一直运行直到完成或引发中断。当工具调用匹配您在 interrupt_on 中配置的策略时,会触发中断。使用 version="v2" 时,结果是一个带有 interrupts 属性的 GraphOutput,其中包含需要审查的操作。然后,您可以将这些操作呈现给审查者,并在提供决策后恢复执行。

决策类型

使用 approve 按原样批准工具调用并执行,不做更改。

人机协同流式处理

您可以使用 stream() 而不是 invoke() 来在智能体运行和处理中断时获取实时更新。使用 stream_mode=['updates', 'messages']version="v2",以统一的 v2 格式流式传输智能体进度和 LLM 令牌。
有关流模式的更多详情,请参阅流式处理指南。

执行生命周期

中间件定义了一个 after_model 钩子,该钩子在模型生成响应后但在任何工具调用执行前运行:
  1. 智能体调用模型生成响应。
  2. 中间件检查响应中的工具调用。
  3. 如果有任何调用需要人工输入,中间件构建一个包含 action_requestsreview_configsHITLRequest 并调用 interrupt
  4. 智能体等待人工决策。
  5. 根据 HITLResponse 决策,中间件执行已批准或已编辑的调用,为被拒绝的调用合成 ToolMessage,并恢复执行。

自定义 HITL 逻辑

对于更专业的工作流,您可以直接使用 interrupt 原语和中间件抽象构建自定义 HITL 逻辑。 请查看上面的执行生命周期,了解如何将中断集成到智能体的操作中。