2025年数据分析师专业技能面试模拟题及答案

2025年数据分析师专业技能面试模拟题及答案请描述数据清洗中处理缺失值的常用方法，并说明在医疗数据与电商用户行为数据中选择方法的差异。处理缺失值的常用方法包括：删除缺失行/列（适用于缺失比例极低且不影响整体分布时）、统计值填充（均值/中位数/众数，适用于数值型/分类型变量）、插值法（线性插值、KNN插值，保留数据连续性）、模型预测填充（用其他特征训练模型预测缺失值，适用于缺失模式与其他特征强相关时）、特殊值标记（如用“未知”标识，适用于缺失本身有业务含义时）。在医疗数据中，缺失值可能隐含关键信息（如患者未做某项检查可能暗示病情敏感），因此需优先评估缺失是否为系统性偏差（如老年患者更易漏填某些指标），此时特殊值标记结合业务解读更合理；若必须填充，因医疗指标（如血压、血糖）分布常非正态，中位数比均值更稳健，且KNN插值需注意样本同质性（如按年龄、疾病类型分组插值）。在电商用户行为数据中，缺失值多为随机缺失（如用户未点击某页面），若缺失比例<5%可直接删除；对于用户属性（如年龄、性别），常用众数填充（因分类型变量）或结合用户分层（如按消费层级填充对应均值）；行为数据（如浏览时长）可采用时间序列插值（如前向填充），因用户行为在短时间内有连续性；若缺失与业务动作强相关（如未下单用户无支付时间），需单独建模分析该群体特征，而非简单填充。请用SQL写出计算某电商平台2024年每月新用户（当月首次登录用户）的次月留存率的语句，并解释窗口函数在此场景中的作用。假设用户登录表为user_login，字段包含user_id（用户ID）、login_date（登录日期），需先识别每月新用户，再判断其次月是否登录。SQL语句：WITHfirst_loginAS(SELECTuser_id,DATE_TRUNC('month',MIN(login_date))ASfirst_month-首次登录月份FROMuser_loginWHERElogin_date>='2024-01-01'ANDlogin_date<'2025-01-01'GROUPBYuser_id),monthly_usersAS(SELECTfirst_month,COUNT(DISTINCTuser_id)ASnew_users-每月新用户数FROMfirst_loginGROUPBYfirst_month),retention_dataAS(SELECTf.first_month,COUNT(DISTINCTl.user_id)ASretained_users-次月留存用户数FROMfirst_loginfLEFTJOINuser_loginlONf.user_id=l.user_idANDDATE_TRUNC('month',l.login_date)=f.first_month+INTERVAL'1month'-次月登录GROUPBYf.first_month)SELECTm.first_monthASmonth,m.new_users,r.retained_users,ROUND(r.retained_users::FLOAT/m.new_users,4)ASretention_rateFROMmonthly_usersmLEFTJOINretention_datarONm.first_month=r.first_monthORDERBYmonth;窗口函数在此场景中可优化首次登录月份的计算（如用ROW_NUMBER()按用户分区排序取最早日期），但上述方案通过GROUPBYMIN更简洁。若需处理更复杂的时间窗口（如用户可能跨月登录多次），窗口函数（如RANK()OVER(PARTITIONBYuser_idORDERBYlogin_date)）可明确标记首次登录记录，避免GROUPBY可能的性能损耗。请说明使用Python的Pandas进行数据合并时，merge与concat的核心区别，并举例说明在用户行为数据整合中的应用场景。merge与concat的核心区别：逻辑维度：merge基于列的键（key）进行关联（类似SQL的JOIN），适用于不同表间有共同标识的字段关联；concat基于行或列的轴（axis）进行堆叠，适用于结构相同的表纵向拼接（axis=0）或横向扩展（axis=1）。数据重叠处理：merge会根据键去重或保留重复（取决于how参数），concat默认保留所有行（可能产生重复索引），需配合drop_duplicates去重。应用场景：merge用于关联不同实体数据（如用户表与订单表通过user_id关联）；concat用于合并同一实体的多批次数据（如按月拆分的用户行为日志合并全年数据）。示例：某平台需整合用户基本信息表（user_info，字段：user_id,age,city）与6月、7月的用户点击日志表（click_june、click_july，字段：user_id,click_time,page_id）。此时：用concat合并click_june与click_july（结构相同，纵向堆叠）：click_all=pd.concat([click_june,click_july],axis=0,ignore_index=True)用merge将user_info与click_all关联（获取用户属性与行为数据）：user_behavior=pd.merge(user_info,click_all,on='user_id',how='left')在用户增长分析中，若发现某APP的次日留存率从35%下降至28%，请设计分析思路并说明需关注的关键指标。分析思路分四步：1.确认数据准确性：检查埋点是否异常（如某版本更新后部分事件未上报）、时间范围是否对齐（是否包含节假日或推广活动）、用户分群是否变化（如新用户占比突然升高）。2.维度拆解：时间维度：按日期细分，判断是持续下降（趋势性问题）还是突发下降（如某次日版本更新）；按用户首次访问时段（如上午/下午）分析，是否特定时段用户质量下降。用户维度：按渠道（自然流量/广告投放）、设备（iOS/Android）、新老用户（是否首次安装）分群，定位异常群体（如某广告渠道用户留存暴跌）。行为路径维度：用漏斗分析查看用户首次使用关键步骤的流失点（如注册-首页-核心功能的转化率），判断是否因某环节体验变差（如加载超时、引导缺失）。3.关联因素验证：外部因素：检查同期是否有竞品活动、网络故障、政策影响（如隐私权限调整导致功能受限）。内部因素：回溯版本更新内容（如首页改版、推送策略变化）、服务器性能（如响应时间变长）、新用户引导流程（如新手任务难度提升）。4.结论与建议：若定位为某渠道用户质量下降，需优化投放素材；若因注册流程卡顿，需技术排查加载速度；若因核心功能入口隐藏，需调整UI交互。关键指标：用户首次访问来源（渠道）、首次使用时长、关键节点转化率（如注册完成率、核心功能使用率）、设备性能指标（如启动耗时、崩溃率）、版本分布（是否新版本用户留存更低）。请解释混淆矩阵中精确率（Precision）与召回率（Recall）的定义，说明在“预测用户是否会购买高客单价商品”场景中应优先关注哪个指标，并阐述原因。精确率（Precision）=TP/(TP+FP)，表示模型预测为正类的样本中实际为正类的比例（“准不准”）；召回率（Recall）=TP/(TP+FN)，表示实际正类样本中被模型正确预测的比例（“全不全”）。在“预测高客单价商品购买用户”场景中，应优先关注精确率。原因：高客单价商品的营销成本（如优惠券、专属客服）较高，若模型FP（预测购买但实际未购买）过多，会导致资源浪费（向无购买意愿用户投入成本），而FN（预测不购买但实际会购买）的损失是机会成本（未触达潜在用户）。通常高客单价商品的目标用户基数较小（正类样本少），企业更希望有限的营销资源精准触达高概率购买者，因此精确率（避免误判）比召回率（覆盖更多潜在用户）更关键。若企业处于市场扩张期，愿意承担一定成本获取更多潜在用户，可适当平衡召回率；若处于利润优化期，则需严格控制FP，提升精确率。例如，某万元级家电的促销预算有限，模型需确保推送的用户中至少70%会实际购买（高精确率），而非覆盖90%的真实购买者（可能包含30%无效推送）。请设计一个A/B测试方案，验证“将APP首页推荐算法从协同过滤改为深度学习模型”对用户日均使用时长的影响，需说明样本量计算、分组原则、数据收集与显著性检验方法。方案设计：1.目标与假设：目标：验证新算法是否提升用户日均使用时长（指标：用户级日均使用时长，单位：分钟）。假设：H0（原假设）：新旧算法的日均使用时长无差异；H1（备择假设）：新算法的日均使用时长更高。2.样本量计算：需确定：显著性水平α=0.05（一类错误概率）；检验功效1-β=0.8（二类错误概率β=0.2）；最小可检测差异（MDE）：预期新算法比旧算法提升10%（如旧均值为20分钟，MDE=2分钟）；方差σ²：根据历史数据，用户日均使用时长的标准差约为15分钟。用公式n=(Zα/2+Zβ)²2σ²/Δ²，其中Zα/2=1.96（双侧检验），Zβ=0.84（功效0.8），Δ=2。计算得n≈(1.96+0.84)²215²/2²≈7.84450/4≈882，即每组需约882用户（考虑10%流失，每组取1000用户）。3.分组原则：随机化：按用户ID哈希值分组（如哈希值%2=0为对照组，=1为实验组），确保分组均衡（检查两组用户的基础特征如年龄、设备、历史使用时长是否无显著差异）。互斥性：用户仅属于一组，避免交叉影响（如关闭实验组用户的旧算法入口）。时间一致性：测试周期覆盖完整用户行为周期（如2周，避免周末/工作日偏差）。4.数据收集：埋点：记录用户每日启动次数、各页面停留时长、退出时间点（计算日均使用时长=总使用时长/天数）。过滤：排除异常用户（如日均使用时长>240分钟的极端值，可能为刷量）、未完成测试周期的用户（如仅参与3天）。5.显著性检验：数据分布检验：用Shapiro-Wilk检验判断日均使用时长是否服从正态分布（若样本量>30，根据中心极限定理可近似正态）。检验方法：若正态，用独立样本t检验；若非正态，用Mann-WhitneyU检验。结果判断：若p值<0.05且实验组均值显著高于对照组，拒绝H0，认为新算法有效；否则保留H0。请描述特征工程中处理类别特征的常用方法，并比较独热编码（One-HotEncoding）与目标编码（TargetEncoding）的适用场景。处理类别特征的常用方法：1.标签编码（LabelEncoding）：将类别映射为整数（如“高”=3，“中”=2，“低”=1），适用于有序类别（如学历：高中<本科<硕士）。2.独热编码（One-HotEncoding）：为每个类别创建二元列（如“城市”有北京、上海、广州，则提供3列，每列表示是否属于该城市），适用于无序类别且类别数较少（<10）。3.目标编码（TargetEncoding）：用目标变量的统计值（如均值）替换类别（如“城市=北京”替换为北京用户的平均购买金额），适用于高基数类别（如商品ID、用户ID）。4.频率编码（FrequencyEncoding）：用类别出现的频率替换（如“城市=北京”的频率=北京用户数/总用户数），适用于类别频率与目标变量相关的场景。5.嵌入编码（Embedding）：通过神经网络学习类别向量表示（如Word2Vec思想），适用于深度学习模型处理高基数类别。独热编码与目标编码的对比：独热编码：优点：保留类别间的独立性，无信息损失；适用于线性模型（如逻辑回归），因模型可直接学习每个类别的系数。缺点：类别数较多时（如100个城市）会导致维度爆炸（增加100列），引发维度灾难（计算成本高、过拟合风险）。适用场景：低基数无序类别（如性别、支付方式），且模型对高维度敏感（如KNN）。目标编码：优点：将高基数类别压缩为单维度，避免维度爆炸；融入目标变量信息，可能提升模型预测能力（如“城市”与“购买金额”强相关时）。缺点：易过拟合（尤其是小样本类别，统计值不稳定），需结合平滑技术（如添加先验均值）或交叉验证编码。适用场景：高基数无序类别（如用户所在地区、商品品类），且模型能处理数值型特征（如树模型，对单调变换不敏感）。若某共享单车平台的骑行订单量突然下降15%，作为数据分析师，你会如何定位原因？请列出分析框架并说明关键数据指标。分析框架分五层：1.确认数据异常：核对多源数据（业务系统、埋点日志、第三方统计）是否一致，排除ETL错误（如订单表字段缺失）；检查时间范围（是否包含系统维护导致的订单暂停）、地域范围（是否某城市因政策停运）。2.外部环境分析：天气因素：调取历史同期天气数据（如暴雨、高温天数增加），对比订单量与天气的相关性（如雨天订单通常下降，但极端天气可能超预期）；政策影响：检查是否有新交规（如禁止共享单车进入商圈）、区域限行（如某景区封闭）；竞品动态：监测竞品是否推出大规模补贴（如免费骑活动分流用户）。3.内部运营动作：服务可用性：检查车辆调度（如热门区域车辆不足率是否上升）、车辆故障（如报修订单增加导致可用车减少）、App功能异常（如支付接口崩溃）；营销活动：回溯近期是否结束补贴（如之前的“骑行返现”活动到期）、会员权益调整（如月卡涨价导致用户减少使用）；版本更新：是否因App改版导致用户操作路径变长（如“扫码开锁”入口从首页移至二级页面）。4.用户行为变化：新老用户拆分：新用户订单下降可能因拉新效果减弱（如广告转化率降低）；老用户下降可能因体验变差（如开锁耗时增加）；时段分布：早高峰/晚高峰订单占比是否变化（如用户转向公共交通）、周末订单是否异常（如休闲骑行需求减少）；骑行距离：短途订单（<3公里）下降可能因步行/电动车替代；长途订单下降可能因车辆座椅舒适度差。5.关联指标验证：供给侧：可用车辆数（=总车辆数-故障车-调度中车辆）、车辆周转率（订单数/可用车辆数）；需求侧：用户打开App次数（启动次数下降可能因使用意愿降低）、搜索附近车辆的次数（搜索量上升但订单下降可能因无车可用）；体验指标：开锁成功率（=成功开锁次数/尝试开锁次数）、骑行结束后还车成功率（=正常还车次数/尝试还车次数）。关键数据指标：可用车辆覆盖率（各区域可用车数/用户密度）、开锁耗时（平均秒数）、故障车上报量、竞品补贴力度、天气异常指数（如降雨量超过历史90分位数的天数）。请解释时间序列分析中ARIMA模型与LSTM模型的核心差异，并说明在“预测某零售品牌下月销售额”场景中如何选择模型。核心差异：模型类型：ARIMA是传统统计模型，基于线性假设，通过差分（I）、自回归（AR）、移动平均（MA）捕捉序列的趋势与季节性；LSTM是深度学习模型（循环神经网络的变种），通过记忆单元（CellState）捕捉非线性关系与长时依赖。输入要求：ARIMA需序列平稳（或通过差分实现平稳），依赖人工识别