AI 客服 Agent 做了一年，最后把效果卡进了 CI 门禁

PMNote日常 · 2026-09-14T06:52:42.203Z

#AI智能体做了一年跨境电商 AI 客服 Agent 的后端，技术栈是 Go。最大的体会不是 prompt 怎么写，而是模型效果如果不能在 CI 里卡住上线，就还只是体感，算不上工程指标。我们线上积了 12 万条对话，最近开始把它们整理成评测集，想把这套做法写下来，给同样在做 Agent 落地的人参考。目前的思路是先分层：LLM 只负责结构化的语义路由、槽位抽取和受约束的措辞优化，不直接写最终答案。订单事实判断、动作权限、回复阶梯、转人工边界这些，交给确定性的业务逻辑处理。这样模型换版本、prompt 调整之后，效果变化能在 CI 里直接暴露出来。

讨论话题

发现投票抽奖优惠码盲盒

发现产品榜单精选讨论