什么时候该让 Agent 自主,什么时候该收权?
把自动化做得更强之前,先把边界和观测做清楚。
自主不等于放手不管
很多人一谈 Agent,就会默认它应该“尽量自动”。但如果没有边界、反馈和回退机制,自动化很容易从助力变成风险源。
我更在意的不是能力上限
而是三个更实际的问题:
- 它什么时候应该自己继续做?
- 它什么时候应该停下来问人?
- 它做错了之后,人能不能快速接管?
一个更像产品的问题
Agent 设计不只是模型问题,也不是 prompt 问题,它本质上也是产品设计问题。
- 要定义可以自主推进的范围。
- 要定义必须征求确认的节点。
- 要定义出现偏差后的恢复路径。
如果一个系统不能优雅地失败,那它通常也很难安全地自动成功。
我当前更认可的做法
- 先把动作拆小。
- 先把可观测性做好。
- 先让人可以轻松接管。
Autonomy = Capability + Boundaries + Recovery