Templates
读者模板库
把书中的方法沉淀为可复制、可改造、可直接带回团队使用的工作资产。
业务目标拆解
样本设计
Eval Case Schema 模板
Eval Case Schema 模板 字段 值 版本 v1.0 最后更新 2026 07 使用时机 评测样本设计/数据集建设时 填写角色 评测工程师 下游消费者 Evaluator 开发者、平台工程师 适用场景 用于定义可自动执行、可复现、可归因的通用评测样本。 字段说明 字段 说明 case id 样本唯一标识 scenario 业务场景 user in
查看内容 模板 / 样本设计RAG Eval Case 模板
RAG Eval Case 模板 字段 值 版本 v1.0 最后更新 2026 07 使用时机 RAG 组件专项评测设计时 填写角色 评测工程师+RAG 工程师 下游消费者 RAG 优化团队 适用场景 用于评测知识链路，区分文档解析、Chunk、索引、召回、Rerank、上下文组装、生成和引用问题。 字段说明 字段 说明 query 用户问题 gold ev
查看内容评估器设计
Agent 过程评测
自动化执行
发布决策
线上运营
归因修复
Bad Case 归因模板
Bad Case 归因模板 字段 值 版本 v1.0 最后更新 2026 07 使用时机 发现失败样本后根因分析时 填写角色 评测工程师+对应组件 Owner 下游消费者 优化团队、回归测试 适用场景 用于将失败样本从“系统错了”拆解为具体层级、证据和根因。 字段说明 字段 说明 case id Bad Case 标识 error type 错误类型 ris
查看内容 模板 / 归因修复修复验证与防复发模板
修复验证与防复发模板 字段 值 版本 v1.0 最后更新 2026 07 使用时机 问题修复后回归验证和沉淀时 填写角色 修复 Owner+评测工程师 下游消费者 Regression Set、发布门禁 适用场景 用于将 Bad Case 修复动作转化为可验证、可回归、可防复发的长期资产。 字段说明 字段 说明 source bad case 来源 Bad
查看内容