方法更新 2026-10-15

检索事实、范例与流程:三种依据怎样进入交付

本页目录 · 4 个段落

运营要给“未付款买家”改一条促销通知,分析员要找“上季度处理超过两笔工单且平均处理时间最短的人”。两者都能检索,但前者找写法范例,后者找查询流程与当前业务事实。把三种材料混成一个向量库,会让旧活动优惠或旧季度名单悄悄成为今天的答案。

改通知时,检索相似写法而不继承旧活动事实

CRMAgent的目标是营销消息模板,不是CRM查询。论文§3使用同商户、同受众的高低表现模板进行结构诊断;缺少同组优质范例时,按受众、产品品类和优惠属性寻找跨商户参考;没有合适参考时用规则改写。产品与券元数据都缺失会跳过RetrievalAgent。CRMAgent v2

以下是原创任务,不是论文商户样本:原文“您有券,回来看看”,本次活动记录为满200减20、明天23:59截止、仅适用水杯类。运营要一条可审阅草稿。

中间产物保存什么反例与修正
本次活动事实受众、门槛、优惠、时间、品类、来源和版本参考文案“无门槛50元”不能覆盖本次满200减20
原文诊断优惠不明确、行动入口缺失;不是任意新活动建议“加紧迫感”不能允许编造“最后3件”
范例与选择理由同组范例或跨商户的品类/券相似性;无参考则标fallback向量接近却券型不同,须降为写法参考或不用
候选草稿如“水杯订单满200减20,券明晚到期;打开购物车查看适用商品”是否可用仍须核实际券规则与渠道长度
审阅记录活动事实保真、受众适合、表达清楚;修改与发送分开Judge偏好候选≠发送授权≠真实转化提升

论文EvaluateAgent用1/3/5评价受众匹配和营销质量,另作匿名成对比较;BERTScore/chrF检查语义相近。这里可借鉴分量尺,却不能仅靠相似度检查优惠保真。活动门槛、时间和禁止承诺应有字段级断言。论文GPT-4o的偏好与分数不是CTR;没有真实试验时,只能说草稿质量评估。四个角色可以用一个模型的四个确定步骤实现,只有并行、隔离或职责要求值得时再拆Agent。

查业务时,记住流程,不记住上季度答案

CRMWeaver是业务查询训练与记忆研究,不是上述营销系统。论文§3.4/Algorithm1检索相似任务的workflow guideline;相似度够时注入流程,缺少时由较强模型离线求解并形成新指南。更新阶段跑两次,以结果一致性决定是否写入;保存的是高层步骤而非整份轨迹。CRMWeaver v1

原创查询:“Q3处理超过两笔工单、平均处理时间最短的客服是谁?”可复用指南是:确定期间与时区→按负责人聚合→过滤计数→计算平均时长→排序→核对并列与空集。当前结果必须来自当前授权数据。记忆里“冬季2021张某最短”不可直接答本季度。

{
  "guideline_id": "DEMO-AGENT-HANDLE-TIME-r1",
  "task_family": "aggregate-filter-rank",
  "prerequisites": ["current schema", "authorized scope", "time-zone definition"],
  "steps": ["filter period", "group by agent", "require count > 2", "compute mean", "rank and check ties"],
  "excluded_content": ["customer rows", "previous winning agent"],
  "review_status": "human-approved teaching guideline"
}

这是参考设计,不是论文Schema。模型可能两次得到同一错误,故“一致”不等于已核实;企业试点还要用可信fixture、SQL结果和业务定义验收。若处理时长口径从首次响应改为解决耗时,即使任务语义相近也应失效旧指南。流程记忆与身份权限、schema版本共同决定是否可用,不建议复制论文相似度阈值。

该论文同时研究关系图合成跨表问题、SFT和DAPO;数据分析奖励依赖答案精确匹配,QA用F1,格式奖励仅是另一分量。它们在CRMArena/CRMArena-Pro环境中研究,不能称已部署Salesforce业务收益。普通企业可先验证指南检索与只读查询,只有有代表轨迹、可验证奖励、训练维护能力及明显基线差距时才讨论训练。

不同内容需要不同完成证明

当前事实怎样进入答复,见第11章北辰任务的资料、筛选与结果。本专题进一步解释检索写法范例和流程指南时,为什么还要重取当前事实;两者分别承担不同职责。

Finch所示的字段、值及表规则用于解释企业数据语义;Bosch裁剪的是本体/schema,不是普通文档分块。生成一段貌似合理文本不能证明SQL、SPARQL或图表正确。任务交付至少要保留定义版本、查询或计算产物、执行结果及引用。

对通知,验活动字段和未经批准的承诺;对聚合查询,验分母、期间、权限、聚合和并列;对图文报告,验数据来源、代码执行与图表标签。具体图文任务在反馈的图文产物小节展开;查询路线从检索主线进入。判断哪种材料进入上下文后,再选择重排序、记忆或微调,不能仅因都有“检索”就共用一套评分。

参考资料

  • CRMAgent v2,§3.1–3.4、§4.1、图3–6:营销诊断、参考检索与评分;未复现或读取商户私有数据。
  • CRMWeaver v1,§3.1–3.4、Algorithm1、奖励与限制:流程指南检索与离线更新一致性;未复现训练或基准。
  • Finch工程文章为作者披露;Bosch案例保存17题基准边界。
  • 本文活动与工单例、指南JSON均为合成教学设计,不复制原图或原商户数据。

把这一页用到你的工作里

来源与使用范围

方法综合公开研究与教学推演;参考资料、适用条件和示例边界见正文。

一起判断下一步

带一笔任务,聊一个具体决定。

培训、方案评审或落地辅导,从你的工作材料与当前困难开始。

交流我的场景