司法服务智能体出错后,如何纠正提供给当事人的信息
司法服务智能体出错后,如何纠正提供给当事人的信息
当事人按照司法智能体的回答跑到错误窗口,不能只得到一句“模型可能出错”。机构应先保存当时的提问、回答、知识库版本和页面提示,在保护隐私的前提下核实错误是否已经影响期限、材料或费用。对已经受影响的人,提供明确的人类联系人,说明正确做法以及可行的补救途径。
假设智能体告诉用户“可以邮寄材料”,实际该事项必须现场核验。用户往返一次后,机构不能只改数据库,应该询问是否错过时限、花了多少必要费用,以及有没有可补办的途径。重大错误需由有权限的工作人员出具正式说明和补救方案,机器人只能辅助整理经过。
纠错不能只改后台答案。若同一错误信息通过网页、短信或自助机传播,机构应逐个渠道撤换,并主动提醒可能看到过旧答复的用户。对重要事项,界面应让人容易找到正式文件和咨询电话;模型回答不确定时要说清楚,不能用流畅语气盖住资料空白。
内部事件记录可包括错误答案、引用来源、知识库版本、首次发现时间、影响范围和修复测试。若错误是过期政策造成,负责维护政策的人和软件供应商共同查;若界面把“仅供参考”放得太隐蔽,也要改设计。把责任拆明,才不会每次出事都只让一线客服道歉。
出现错误告知后,受影响用户不一定会再打开原聊天。机构应评估是否通过已获授权的短信、电话或其他渠道主动更正;联系不到的人,也应在相同入口显著提示。纠错结果包括“用户已按旧指引行动”,不能只统计网页已经更新。内部报告说明为什么发生、谁批准修复、如何防止再犯,让下一次工作人员不必靠记忆追查。
对错误造成的实际花费或期限损失,机构应按既有程序认真处理,不应让用户在机器人里重复得到“很抱歉”的自动回复。
内部复盘要分清来源:法规更新未同步、检索命中错误、模型误解问题,还是工作人员批准了不准确的模板。修复后用原问题和相似问法复测,观察是否引入新错误。统计每类错误造成的实际损失,而非仅统计机器人回复率。
机构还可定期用真实问题做回归测试,包含方言、错别字和不完整提问。司法用户往往在紧张时表达含糊,系统若只在标准问句上准确,离可靠服务还有距离。
最基本的补救,是让错误答案不再继续流传,并帮已经相信它的人找到正确的路。
信任来自能纠错。一个司法服务系统愿意公开“上周这条指引错了,现在应这样办理”,比永远声称自己准确更可靠。