面向智能硬件售后问答、选购咨询及使用报告场景,构建包含混合检索、运行预算控制、工具权限治理、HITL 审批、Trace 与 Artifact 持久化的可治理 Agent 平台。
- 实现 Dense 向量检索与中文 BM25 双路召回,并通过 RRF 排名融合;30 条独立检索样本中 Recall@5 由 80.56% 提升至 93.33%,MRR 由 0.8778 提升至 0.9333,nDCG@5 由 0.7683 提升至 0.9035。
- 对 Top 20 候选接入 BAAI/bge-reranker-v2-m3 精排并返回 Top 5;因本地 CPU 平均单查询延迟约 29.4s,将 Cross-Encoder 设计为可选能力而非默认链路。
- 实现基于锁保护的请求级 BudgetManager,调用前 reserve、成功后 commit、异常或取消时 release,统一约束步骤数、工具次数、Token、成本和 Deadline。
- 构建 Claim-Evidence 校验、引用合法性检查及选择性 LLM-as-Judge;累计 255 项自动化测试纳入 CI 门禁,覆盖工具路由、预算超限、Prompt Injection、HITL 审批和异常降级。