中文 EN
research Claude
4.6 (567 ratings)

实验设计 - A/B测试

设计严谨的A/B测试实验,包括假设、样本量计算和统计方法

Used 3,456 times Updated 2024-03-05

Prompt Content

请帮我设计一个A/B测试实验。

## 实验背景
- 实验目的:[你想验证什么假设]
- 优化指标:[如:点击率、转化率、用户满意度]
- 辅助指标:[如:页面停留时间、跳出率]

## 实验对象
- 用户群体:[描述目标用户]
- 样本量:[当前用户量]
- 分流比例:[如:50/50]

## 实验组和对照组
### 对照组 (A)
- 当前版本:[描述现有设计/流程]

### 实验组 (B)
- 改动内容:[你要测试的改动]
- 改动假设:[为什么这个改动会有效]

## 实验假设
- 原假设 (H1):[B版本会优于A版本]
- 零假设 (H0):[B版本与A版本无显著差异]

## 实验设计细节

### 随机化方法
- [ ] 用户级别随机
- [ ] 会话级别随机
- [ ] 页面级别随机

### 样本量计算
- 基线转化率:[%]
- 最小可检测效应 (MDE):[%]
- 统计功效 (Power):[通常80%]
- 显著性水平 (Alpha):[通常5%]

### 实验周期
- 预计每天样本量:[X]
- 预计所需天数:[计算得出]

## 数据收集
- 跟踪指标:[列出]
- 跟踪工具:[如:Google Analytics、Mixpanel]

## 分析方法
- [ ] t检验
- [ ] 卡方检验
- [ ] 回归分析
- [ ] 贝叶斯分析

## 风险与 Mitigation
- 潜在风险:[如: novelty effect]
- 应对措施:[如何减少干扰因素]

## 要求
1. 确保样本量足够
2. 控制干扰变量
3. 考虑ethical issues
4. 制定停测标准

请帮我设计完整的A/B测试方案。

Instructions

1. 实验前确定好指标 2. 不要在实验中途改变指标 3. 考虑外部因素影响

Use Cases

适用于:产品优化、UI测试、算法评估