01

60 秒回答模板

我会按“业务目标到模型约束”的顺序解释模型选型。智能客服不是单纯追求通用大模型最强，而是要看它能否稳定解决目标场景，比如意图识别、知识问答、工单分流、话术生成、人工辅助和多轮追问。第一层先定义目标和边界：覆盖哪些咨询类型，哪些问题必须转人工，哪些答案需要引用知识库或受合规限制。第二层建立评测基线，用真实会话、历史工单和人工标注样本比较候选模型的准确率、可用率、拒答、幻觉、上下文理解、多轮一致性和人工接管率。第三层看工程和部署约束，包括是否支持私有化、数据安全、延迟、并发、上下文长度、工具或 RAG 接入、可观测性和稳定性。第四层看成本，不能只看单次调用价格，还要看平均轮次、token 消耗、缓存、人工兜底成本和误答带来的服务风险。第五层讲上线策略：先灰度到低风险场景，配置知识库、规则兜底、置信度阈值和人工转接，持续通过 badcase 和满意度迭代。最后，如果面试官问我是否参与决策，我会明确区分自己实际做过的部分，比如需求定义、评测集构建、指标分析、竞品调研或上线复盘；没参与模型最终拍板就不能包装成自己主导，应该说我如何提供决策依据。

考点 任务边界
难度 真实面经题
回答目标 让候选人能把智能客服模型选型讲成有证据的产品决策：目标场景、统一评测、服务指标、部署成本、风险兜底和个人决策参与边界都说清楚。
02

深入解析

01

从客服任务定义模型要求

智能客服的模型选择要从任务出发。售前咨询、售后问题、知识库问答、工单分类、投诉安抚、客服坐席辅助和自动闭环的要求不同。产品经理要先定义哪些场景自动回答，哪些只给人工建议，哪些必须转人工，以及答案是否需要可追溯、可解释、可控语气和合规边界。

02

候选模型要用同一套样本比较

模型选型不能停留在排行榜或单个 demo。要构造来自真实客服语料的评测集，覆盖高频问题、长尾问题、多轮上下文、模糊表达、情绪化表达、知识库缺失和风险问题。对候选模型用同一套 prompt、知识库和判分标准评测，才能比较准确率、召回、幻觉、拒答、格式稳定性和多轮一致性。

03

效果指标要连接服务指标

大模型指标要能映射到客服业务结果。除了答案正确率，还要看一次解决率、人工转接率、平均处理时长、用户满意度、投诉率、客服采纳率和安全误答率。若模型回答看起来流畅但无法降低转人工或提升解决率，产品上就不能称为真正有效。

04

部署和数据约束会改变最优解

智能客服常涉及用户信息、企业知识库和服务流程，因此部署方式很关键。需要评估公有云 API、私有化部署、混合架构或轻量模型的取舍；同时考虑数据权限、日志脱敏、延迟、并发峰值、上下文长度、知识库/RAG 接入、工具调用能力、监控告警和版本回滚。

05

成本要算端到端服务账

模型成本不只是 token 单价。一个客服场景可能有多轮对话、检索、重写、审核、兜底和人工接管。应综合调用成本、部署资源、缓存命中、平均轮次、人工客服节省、错误答案损失和维护成本。更大的模型不一定最适合，如果小模型加知识库和规则兜底能达到目标指标，可能是更优产品方案。

06

说明自己参与了哪部分决策

这类面试很容易追问“你是否参与决策”。回答时要把事实说清：自己是参与需求定义、评测集构建、数据分析、竞品调研、灰度复盘，还是参与最终模型选型会议。不能把团队决策包装成个人拍板；更好的表达是说明自己提供了哪些证据、发现了什么风险、如何影响了选择。

03

易错点

  • 把答案写成某个具体模型的当前产品评测，而不是智能客服模型选型方法。
  • 只说模型效果好，没有说明智能客服的目标场景、转人工边界和服务指标。
  • 只比较通用榜单分数，没有用真实客服会话和统一标准评测候选模型。
  • 忽略数据安全、私有化部署、延迟、并发和知识库接入等工程约束。
  • 只算模型调用单价，不算多轮对话、人工兜底、误答风险和维护成本。
  • 面试中夸大自己参与最终决策，没有区分实际做过的分析、评测和决策责任。
04

面试官追问

为什么智能客服不一定选择能力最强的大模型？

因为客服场景看的是稳定解决率、成本、延迟、可控性和安全边界。通用能力强但成本高、延迟大或幻觉难控的模型，未必比小模型加知识库、规则和人工兜底更适合。

如果两个模型离线准确率接近，怎么继续选？

看错误类型、风险等级、延迟、成本、稳定性、部署方式、知识库接入难度、监控能力和人工接管效果。离线总分相近时，业务关键切片和上线维护成本更重要。

客服模型接入 RAG 后，评测重点会有什么变化？

除了答案质量，还要评估检索召回、引用准确性、知识时效、无答案识别、检索失败兜底和答案是否忠于知识库。否则模型可能编造知识库没有的内容。

如何设计灰度上线？

先选低风险、高频、标准化问题灰度，设置置信度阈值和人工转接，监控一次解决率、转人工率、满意度、误答和投诉，再逐步扩大场景并回灌 badcase。

面试官问“你是否参与决策”时怎么回答更稳？

如实说明自己的职责边界，讲清参与了哪些证据生产环节，例如样本构建、指标分析、方案对比或复盘建议。不要把旁听或执行包装成主导决策。