审计、测试与可观测性
工具调用、MCP 与业务操作集成#FDE#第十五阶段#工具调用、MCP 与业务操作集成#审计、测试与可观测性约 398 字 · 1 分钟阅读
追问显示点击任意追问卡片可收起 / 展开
一次工具调用审计应记录哪些信息?
追问 身份、目标、参数、授权、执行结果和时间怎样关联?
模型日志与工具执行日志如何建立关联?
追问 调用 ID、业务任务 ID 和链路追踪 ID 怎样分工?
敏感工具参数怎样在日志中脱敏?
追问 保留复现价值与减少暴露如何兼顾?
工具契约测试应覆盖哪些边界?
追问 未知字段、恶意参数、租户错配和空值如何测试?
如何用模拟下游系统测试工具失败?
追问 限流、超时、半成功和不确定提交怎样模拟?
MCP 端到端测试为何不能只直接调用工具函数?
追问 序列化、发现、传输和授权有哪些额外问题?
如何测试确认机制不被参数变化绕过?
追问 确认过期、重放和目标替换用例怎样构造?
如何监控工具使用异常?
追问 高频调用、连续失败和批量写入如何触发告警?
工具成功率之外还应观察什么?
追问 错误操作率、人工撤销和授权拒绝如何反映业务质量?
工具升级后如何验证实际副作用没有变化?
追问 契约回归、预演和下游回读如何组织?