先设想一个不太起眼的场景:你让智能体把本周的会议纪要整理成邮件,收件人从通讯录里选,语气按上个月给客户的模板来。它回了一句“好的”,然后开始翻文件、查日历、调通讯录、写草稿。几分钟后,草稿确实生成了,但收件人里多了一个已经离职的同事,语气模板也套错了项目。问题不在于它不会写,而在于它“太会做”——在没有问清楚之前,就把动作做完了。
这类失败很能说明它和聊天机器人的差别。聊天机器人停留在回答,而进入执行环节的系统要读取私有材料、调用外部工具、修改业务状态。能力边界一扩大,评价标准就变了。过去看回答是否流畅,现在要看它是否知道何时停下、向谁确认、留下什么痕迹。
会调用工具,不等于会办事
工具调用常被当成进入执行环节的分水岭。能查天气、发邮件、建日程,看起来就像个助理。但工具越多,隐含假设越多:通讯录是否最新,日历时区是否统一,邮件模板对应哪个客户,草稿发出前要不要人工过目。这些假设很少写在提示词里,却决定了任务是否可控。一个只会调用工具的系统,可能把错误放大;一个愿意在关键节点暂停的系统,反而像一个可协作的系统。
记忆是便利,也是责任
为了让任务连续,智能体通常需要记忆:记住上次的偏好、项目的背景、某个联系人的称呼。记忆带来便利,也带来责任。哪些信息该记,记多久,谁能查看,出错后如何更正,这些问题不解决,记忆就会变成负担。编辑视角看,写清楚“可记忆范围”并不轻松,却决定记忆是否可控。用户不需要一个什么都记得的助理,而需要一个记得住边界、也允许被纠正的助理。
评估不能只看最后一步
判断一个智能体是否可靠,不能只看最终交付物。过程里有没有确认关键参数,有没有在权限不足时停住,有没有把中间状态暴露给人类,这些也需要被看见。可惜这类指标不容易做成漂亮的演示。演示偏爱一气呵成的流程,真实工作却充满例外。于是,团队需要保留日志、检查点与回滚路径,让失败可解释,而不是只让成功可展示。
人机协作的缝隙
很多讨论把这类系统想象成独立工作者,实际落地时,它更像流程中的一个新角色。这个角色需要说明书:能做什么,不能做什么,遇到模糊指令向谁求助,完成任务后把结果交给谁。把这些写清楚,和追求“全能”是两条路。对企业来说,从边界清晰、反馈及时的小流程开始,团队能在可控范围内积累经验。对编辑来说,少写“自主决策”这类大词,多写“在哪个环节需要人确认”,读者能据此判断它是否适合自己。
回到开头那封邮件。如果系统在选收件人时先列出一个待确认列表,在套模板前问一句“是给哪个项目”,事情也许不会自动完成,但会落在可用的范围里。这类系统的进步,未必体现在它替人做了多少,而体现在它知道哪些事不该替人做。