AB测试设计教练

AB测试设计：AB测试设计与效果评估。用科学方法论带你把事做成、做好。

一、这个技能解决什么（企业场景）

很多人在「AB测试设计」上要么没方法、要么没体系，产出质量起伏较大。本技能把「AB测试设计」拆成标准流程：理需求 → 备数据 → 建模 → 出洞察 → 跟踪（分析五步法），让你按标准流程把事做对、可复制。

二、什么时候用 / 什么时候不要用

适用

需要「AB测试设计」的系统化方法
「AB测试设计」效果不稳定想提升
要标准流程与模板
要长期陪跑与复盘

不适用（请转专业渠道）

敏感数据脱敏
口径先统一
无法担保分析准确率

三、能力地图

| 模块 | 做什么 | 产出 | |---|---|---| | 需求梳理 | 分析目标与数据口径 | 需求单 | | 数据准备 | 取数/清洗/合并 | 数据集 | | 分析建模 | 指标/图表/模型 | 分析结果 | | 洞察输出 | 结论+建议+行动 | 分析报告 | | 落地跟踪 | 指标监控+迭代 | 跟踪方案 |

四、标准流程

方法论：理需求 → 备数据 → 建模 → 出洞察 → 跟踪（分析五步法）

输入：分析目标/数据
需求：明确问题
数据：清洗与整理
建模：指标与模型
洞察：结论与建议
跟踪：落地与复盘

五、怎么用（输入→产出）

把你的场景和关键信息发给本技能，例如：

「帮我做一份AB测试设计方案」
「AB测试设计怎么做才能持续稳定产出？」
「AB测试设计的常见坑有哪些？」

六、输出样例

数据分析方案
指标与图表体系
数据洞察报告
落地跟踪机制

七、卡点自救

数据不全 → 用样本+假设并标注
口径乱 → 先统一口径
要上线 → 进阶版输出指标体系

八、质量护栏

数据脱敏；口径统一；无法担保准确率。

九、与其他技能的边界

本技能聚焦「AB测试设计教练」单点做深做透；如需跨场景编排或整体增长方案，参见同系列技能（kunlun-agent-builder / kunlun-knowledge-base / kunlun-workflow-automation）。

十、检查清单（技术实施前自检）

以下检查清单用于AB测试设计技术实施前的自检，全部通过后方可开发：

| 序号 | 检查项 | 通过标准 | 未通过处理 | |---|---|---|---| | 1 | 需求明确性 | AB测试设计需求已文档化且有验收标准 | 先明确需求 | | 2 | 架构设计完成 | 技术选型和架构方案已评审通过 | 先完成架构设计 | | 3 | 代码规范确认 | 编码规范/Lint规则已配置 | 先配置代码规范 | | 4 | 测试方案就绪 | 单元测试+集成测试方案已设计 | 先设计测试方案 | | 5 | 部署方案确认 | 部署流程和环境已准备 | 先准备部署环境 | | 6 | 回滚预案建立 | 有回滚机制和故障恢复预案 | 建立回滚预案 |

以上为AB测试设计实施前的自检表，建议每次启动前逐项核对。

十一、识别信号（技术适用判定）

适合使用AB测试设计教练的信号

AB测试设计需求清晰，可拆分为明确的开发任务
有CI/CD流水线和自动化测试基础
团队有相关技术栈经验
有code review和测试覆盖机制
有监控和告警体系

不适合使用AB测试设计教练的信号

需求模糊，频繁变更
无CI/CD，纯手工部署
团队无相关技术经验
无测试机制，靠人工验证
无监控体系，出问题靠用户反馈

以上识别信号用于判断AB测试设计教练是否适用于当前场景，建议在立项阶段评估。

十二、评分标准（技术质量评估矩阵）

| 维度 | 权重 | 评分标准（1-5分） | 达标阈值 | |---|---|---|---| | 代码质量 | 25% | 5=零技术债；3=可管控；1=债务堆积 | ≥3分 | | 测试覆盖 | 25% | 5=覆盖率>80%；3=50-80%；1=<50% | ≥3分 | | 部署效率 | 20% | 5=一键部署；3=半自动；1=纯手工 | ≥2分 | | 性能指标 | 15% | 5=超预期；3=达标；1=不达标 | ≥2分 | | 可维护性 | 15% | 5=文档齐全易接手；3=基本可维护；1=无人能接手 | ≥2分 |

总分 = Σ(维度得分 × 权重) 总分 ≥ 4.0 为优秀，3.0-3.9 为合格，<3.0 需重新评估方案此评估矩阵用于AB测试设计教练上线后的效果验收和持续优化。