电商经营工作台经营决策中枢
经营路径

情报 → 判断 → 选品 → 上架

经营主流程

AI 情报
每日 AI 情报开源项目与 Skills
今日工作台方法库经营 Agent任务记录PDD 采价记录候选商品上架商品价格换算物流价格浏览器任务订单管理
智能客服
在线客服入口客户入口管理客服会话售后确认客服知识

治理与复盘

规则库规则建议运行日报任务控制台策略配置
登录

经营与 AI 决策视角

电商经营工作台
AI情报工作台选品池上架
返回方法库

方法详情

预注册与分组完整性约束的店铺运营实验判定法

先定义分组、指标和停止条件,再检查实际分组是否有效,可降低把随机波动或流量偏移误认成运营改进的概率。
领域:运营运营方法、数据分析方法待人工复核待人工确认
可执行性
89
CEO:待人工复核

决策路径

系统审核结论

待人工复核

决定是否展示创建经营任务入口。

我的处理状态

待人工确认

只代表人工跟进意图,不会单独解锁创建入口。

下一步

先完成人工复核

先处理审核结论,别把人工标记误当成任务入口。

来源

平台:GitHub(code_repository、open-source workflow)

作者/项目:GrowthBook

去重使用的来源链接:

https://github.com/growthbook/growthbook

适用范围

市场:US

平台:淘宝、拼多多(参考GrowthBook实验分析方法迁移)

类目:通用消费品,排除Electronics和High-return fashion, 母婴作为可选业务背景

审核分解

来源可信度:16/20

步骤清晰度:22/25

结构化程度:19/20

边界清晰度:15/15

执行可行性:17/20

我的处理状态

当前:待人工确认。处理状态用于记录人工判断;是否能创建经营任务,仍以页面上方“系统审核结论”为准。

下一步:先处理系统审核结论

当前 CEO 审核状态是「待人工复核」。只有标记为「可创建任务」的方法才会展示创建入口。

去方法审核队列处理查看可创建任务的方法

如果这个方法已经人工确认可执行,需要在审核队列把 CEO 审核结论推进到「可创建任务」;只改下方人工决策状态不会打开创建入口。

CEO 审核结论

分析流程清晰,但平台随机化能力、数据口径和项目版本尚待核验。

建立实验预注册及只读分析Agent;缺少有效随机分组时自动标记不可作因果判断,运营变更由人工执行。

执行步骤

  1. 1.确认平台是否提供适用且获准的随机实验或分组能力;只有观察数据时,不将前后对比包装为随机实验。
  2. 2.选择一个可单独改变的运营要素,预先记录主指标、护栏指标、最小有意义效果、随机化单位和观察窗口。
  3. 3.按基线转化与业务可接受误差估算样本需求,确认各组能够覆盖相同经营周期。
  4. 4.执行前检查分流比例、重复用户处理和跨组暴露;执行中检查样本比例异常与数据缺失。
  5. 5.冻结无关变更,等待预设观察窗口结束及退款数据成熟,使用与实验设计匹配的统计方法。
  6. 6.同时报告效果区间、护栏结果和数据质量;输出推广、继续收集或无结论,不只输出显著与否。

判断指标

  1. 1.分组比例偏差及样本比例异常检验
  2. 2.主指标效果估计与不确定性区间
  3. 3.成熟退款率和单位贡献等护栏变化
  4. 4.跨组暴露率与关键事件缺失率
  5. 5.样本量相对预设需求的完成度

输入数据要求

  1. 1.平台实验权限及随机分组机制说明
  2. 2.匿名曝光、分组、订单和退款记录
  3. 3.主指标基线与最小有意义效果
  4. 4.实验计划和同期运营变更日志
  5. 5.与US业务相关的样本标识或路径说明

排除规则

  1. 1.排除无合法分组能力却声称获得随机实验结论的方案。
  2. 2.排除多项运营变更同时发生且无法区分效果的实验。
  3. 3.排除看到有利结果就临时停止或事后更换主指标的分析。
  4. 4.排除Electronics和High-return fashion。

风险与适用边界

  1. 1.仓库维护状态、许可证及当前分析功能未实时核验。
  2. 2.淘宝、拼多多未必开放所需分流和事件数据,条件不满足时仅能形成实验设计。
  3. 3.固定样本检验和连续监测方法不能随意混用。
  4. 4.国内店铺实验不能在缺少客群与交易路径证据时外推至US。

来源摘要与执行说明

GrowthBook是开源功能管理与实验分析项目,可作为分流、实验指标和统计分析流程的参考。本轮未能检查最近提交、README或当前版本能力。可迁移的是实验设计与结果审查框架,不能假设其SDK能够安装到淘宝或拼多多店铺;具体统计功能及数据接入方式需在核验后确定。

输出格式:实验审查报告:设计、样本需求、分组完整性、效果估计及区间、护栏指标、US外推限制和决策。

执行示例:在平台获准的随机实验条件下比较两种详情页信息顺序,以净成交率为主指标、成熟退款率为护栏;若无法随机分组,则输出不可执行原因,不据此宣称转化提升。