电商商品主图 AB 测试专员岗位技能考试试卷及答案

电商商品主图AB测试专员岗位技能考试试卷及答案填空题（共10题，每题1分）1.AB测试中，控制变量的数量通常应控制在______个以内，避免干扰测试结果。2.电商主图AB测试中，核心转化指标通常指______。3.统计显著性的常见阈值为______（用小数表示）。4.AB测试的两种核心分组为对照组和______组。5.若测试结果未达显著水平，应采取的合理操作是______。6.用户点击率（CTR）的计算公式是______（用常用符号表示）。7.AB测试中，避免“多重比较误差”的常用方法是______校正。8.电商主图AB测试中，除转化指标外，辅助指标通常包含点击率、______等。9.样本量计算的核心依据是基础指标的波动程度和______。10.若测试后新品（测试组）表现优于对照组，需确认的核心前提是______。单项选择题（共10题，每题2分）1.AB测试中，对照组使用的是（）A.全新设计的主图B.原有主图C.随机生成的主图D.同品类竞品主图2.统计显著性p值小于以下哪个数值可判定结果可靠？（）A.0.05B.0.5C.0.1D.0.013.主图AB测试的核心目的是（）A.提升商品点击率B.优化主图设计C.提升电商转化效果D.增加商品曝光4.以下哪种情况会影响AB测试结果的准确性？（）A.分组随机B.样本量充足C.测试周期过短D.指标明确5.多重比较误差会导致（）A.测试结果更显著B.误判差异显著性C.分组更均匀D.样本量更大6.电商主图AB测试的样本投放应遵循（）A.随机分配B.手动选择用户C.仅投放老用户D.仅投放新用户7.以下哪个属于转化指标？（）A.点击率B.加购率C.曝光量D.浏览量8.若测试结果中测试组和对照组差异不显著，应（）A.直接采用测试组B.延长测试周期再判断C.放弃测试D.修改主图重测9.主图AB测试中，控制变量指的是（）A.仅改变主图，其他条件不变B.改变所有变量C.改变价格，主图不变D.改变标题，主图不变10.样本量计算时，不需要考虑以下哪项？（）A.预期指标提升幅度B.显著性水平C.检验效能D.主图的美观度多项选择题（共10题，每题2分）1.主图AB测试的核心分组要求包括（）A.样本量均衡B.用户特征一致C.随机分配D.测试时长相同2.电商主图测试的核心指标包括（）A.点击率B.转化率C.加购率D.曝光量3.以下属于AB测试常见误差的有（）A.多重比较误差B.样本偏差C.周期过短误差D.指标遗漏误差4.提升AB测试结果可靠性的方法有（）A.确定合理样本量B.控制单一变量C.延长测试周期D.多组同时测试5.主图AB测试适用的场景包括（）A.全新上架商品主图B.原有主图优化改版C.不同促销主图对比D.商品标题修改对比6.多重比较误差的校正方法包括（）A.邦费罗尼校正B.霍尔顿校正C.随机森林校正D.回归校正7.电商主图测试中，控制的外部变量包括（）A.商品价格B.促销力度C.用户地域D.主图颜色8.以下关于AB测试说法正确的有（）A.需持续监控测试过程B.结果需结合业务场景解读C.样本量越大结果越可靠D.需排除异常数据9.主图AB测试中，测试组的主图需满足（）A.仅改动核心元素（如卖点）B.与对照组主图风格一致C.包含促销信息D.无侵权问题10.以下哪些情况会导致测试结果无效？（）A.测试过程中调整主图B.分组随机C.样本集中在同一时段D.指标定义不清晰判断题（共10题，每题2分）1.AB测试中可以同时改变多个主图元素进行对比。（）2.统计显著性p值越小，结果可靠性越高。（）3.主图AB测试的样本量越大越好，无需考虑业务成本。（）4.电商主图测试中，对照组使用原有主图即可，无需其他条件限制。（）5.多重比较误差是指多次测试中误判差异的概率增加。（）6.测试周期过短可能导致样本不足，结果不可靠。（）7.主图AB测试中，需排除极端用户的测试数据。（）8.只要测试组表现优于对照组，即可直接正式上线。（）9.点击率不是主图AB测试的核心转化指标。（）10.分组时需确保两组用户的年龄、地域等特征分布一致。（）简答题（共4题，每题5分）1.简述电商主图AB测试的核心步骤。2.如何确定主图AB测试的合理样本量？3.主图AB测试中常见的误差有哪些？如何规避？4.统计显著性在主图AB测试中的作用是什么？讨论题（共2题，每题5分）1.若某商品主图AB测试结果中测试组点击率更高，但转化率未达显著，讨论后续操作及原因。2.某新品上架后，原主图点击率偏低，计划通过AB测试优化，讨论需注意的关键事项。答案：填空题答案：1.22.转化率3.0.054.测试5.延长测试周期或调整指标6.点击率=点击量/曝光量×100%7.邦费罗尼8.加购率9.显著性水平10.统计显著单项选择题答案：1.B2.A3.C4.C5.B6.A7.B8.B9.A10.D多项选择题答案：1.ABCD2.ABC3.ABCD4.ABC5.ABC6.AB7.ABC8.ABD9.ABD10.ACD判断题答案：1.×2.√3.×4.×5.√6.√7.√8.×9.√10.√简答题答案：1.核心步骤为：明确测试目标，确定核心转化指标与辅助指标；控制单一变量，仅改动主图核心元素；随机均衡分组，对照组用原主图、测试组用优化主图；设定合理样本量与测试周期；监控数据，用统计显著性分析；结合业务场景解读结果，判断是否上线优化主图。2.确定样本量需：明确预期指标提升幅度；设定显著性阈值与检验效能；代入样本量计算公式；结合业务成本确定平衡规模，避免样本过小或过大，保障测试效果与效率。3.常见误差有多重比较、样本偏差、周期过短、指标偏差；规避方法为控制单一变量、随机分组、延长测试周期、校正多重比较误差、统一指标口径。4.统计显著性用于判断主图差异是否由改动导致而非随机偶然，是结果可靠性的核心依据，可避免误判，为优化决策提供科学数据支撑，降低业务风险。讨论题答案：1.后续操作：延长测试周期补样本、检查指标口径、分析全链路数据；原