Python数据分析试题及分析

Python数据分析试题及分析一、单项选择题（共10题，每题1分，共10分）下列函数中，属于pandas库专门用于读取CSV格式结构化数据的是A.read_csv()B.read_excel()C.load_csv()D.open()答案：A解析：正确选项A的依据是pandas官方封装的read_csv()函数专门用于解析CSV格式数据，返回结构化的DataFrame对象。错误选项说明：B选项read_excel()用于读取Excel格式文件；C选项load_csv()不是pandas的官方函数；D选项open()是Python内置的通用文件操作函数，不能直接解析结构化CSV数据为分析可用的表格格式。numpy库的ndarray对象中，用于查看数组维度数量的属性是A.sizeB.shapeC.ndimD.dtype答案：C解析：正确选项C的依据是ndim属性的定义就是返回数组的维度数，比如二维数组返回值为2。错误选项说明：A选项size返回数组的总元素个数；B选项shape返回元组，标识每个维度的元素长度；D选项dtype返回数组存储的数据类型。下列pandas提供的函数中，用于判断数据是否为缺失值的是A.isnull()B.dropna()C.fillna()D.replace()答案：A解析：正确选项A的依据是isnull()会返回和原数据结构一致的布尔值对象，缺失值位置标记为True，非缺失值为False。错误选项说明：B选项dropna()用于删除含缺失值的行或列；C选项fillna()用于填充缺失值；D选项replace()用于替换指定数值，不是专门的缺失值判断函数。Matplotlib库中，用于绘制折线图的基础函数是A.plot()B.bar()C.scatter()D.pie()答案：A解析：正确选项A的依据是plot()是Matplotlib绘制折线图的核心函数，支持传入x、y轴数据生成折线趋势图。错误选项说明：B选项bar()用于绘制柱状图；C选项scatter()用于绘制散点图；D选项pie()用于绘制饼图。下列pandas的DataFrame对象取列操作中，语法正确的是A.df[‘列名’]B.df(列名)C.df{列名}D.df.列名()答案：A解析：正确选项A的依据是方括号加列名字符串是pandas取单列的标准语法，返回对应列的Series对象。错误选项说明：B选项小括号是函数调用的语法，DataFrame不能直接传入列名调用；C选项大括号是Python字典的创建语法，不能用于取列；D选项点语法取列不需要加括号，且仅对列名是合法标识符的情况生效，不是通用语法。numpy库中，用于生成指定形状全0数组的函数是A.zeros()B.ones()C.full()D.empty()答案：A解析：正确选项A的依据是zeros()函数接收形状参数，返回所有元素为0的数组。错误选项说明：B选项ones()生成全1数组；C选项full()生成填充指定数值的数组；D选项empty()生成未初始化的数组，元素值为内存中的随机残留值。下列pandas的函数中，用于实现数据分组统计的是A.groupby()B.merge()C.concat()D.join()答案：A解析：正确选项A的依据是groupby()可以按照指定字段对数据分组，后续可搭配聚合函数实现分组统计。错误选项说明：B、C、D三个选项均为数据合并相关函数，merge用于基于公共键合并表，concat用于沿指定轴拼接数据，join用于基于索引合并表，均不具备分组功能。下列方法中，不属于异常值识别方法的是A.3σ原则B.箱线图法C.Z-score法D.均值填充法答案：D解析：正确选项D的依据是均值填充法是异常值、缺失值的处理方法，不属于识别异常值的方法。错误选项说明：A、B、C三个选项均为行业通用的异常值识别方法，3σ原则基于正态分布假设识别偏离过大的值，箱线图法基于四分位数区间识别异常，Z-score法基于标准化得分识别异常。pandas中，用于将DataFrame按照指定列的数值排序的函数是A.sort_values()B.sort_index()C.order()D.rank()答案：A解析：正确选项A的依据是sort_values()接收列名参数，可按照该列的数值升序或降序排列整个DataFrame。错误选项说明：B选项sort_index()是按照索引排序；C选项order()是pandas旧版本的排序函数，已被淘汰；D选项rank()用于计算数据的排名，不会改变原数据的排序。下列第三方库中，不属于Python数据分析核心生态库的是A.requestsB.pandasC.numpyD.seaborn答案：A解析：正确选项A的依据是requests是用于发送网络请求的爬虫相关库，不属于数据分析专用库。错误选项说明：B选项pandas是结构化数据处理核心库，C选项numpy是数值计算基础库，D选项seaborn是统计可视化库，三者均为数据分析的核心生态库。二、多项选择题（共10题，每题2分，共20分）下列pandas的函数中，可用于多表合并操作的有A.merge()B.concat()C.groupby()D.join()答案：ABD解析：正确选项的依据：A选项merge()支持基于公共键或索引合并两个表，支持内连接、外连接等多种合并模式；B选项concat()支持沿行或列的方向拼接多个结构一致的表；D选项join()是基于索引合并表的便捷函数。干扰项C选项groupby()是分组统计函数，不具备多表合并功能。下列属性中，属于numpy的ndarray对象内置属性的有A.ndimB.shapeC.dtypeD.itemsize答案：ABCD解析：正确选项的依据：A选项ndim返回数组维度数；B选项shape返回各维度的元素长度元组；C选项dtype返回数组存储的数据类型；D选项itemsize返回数组中每个元素占用的字节数，四个属性均为ndarray的内置属性。下列操作中，属于数据清洗环节常规操作的有A.缺失值处理B.异常值处理C.重复值处理D.数据类型转换答案：ABCD解析：正确选项的依据：数据清洗的目标是将原始“脏数据”转换为可分析的标准数据，A选项缺失值处理解决数据不完整的问题，B选项异常值处理解决数据失真的问题，C选项重复值处理解决数据冗余的问题，D选项数据类型转换解决数据格式不统一的问题，四个操作均为数据清洗的常规内容。下列第三方库中，属于Python数据可视化常用库的有A.MatplotlibB.SeabornC.PlotlyD.Scrapy答案：ABC解析：正确选项的依据：A选项Matplotlib是Python基础可视化库，提供全类型图表的绘制能力；B选项Seaborn是基于Matplotlib封装的统计可视化库，默认样式更美观，适合统计场景绘图；C选项Plotly是交互式可视化库，支持生成可交互的网页端图表。干扰项D选项Scrapy是爬虫框架，不属于可视化库。下列数据结构中，可用于直接创建pandas的DataFrame对象的有A.Python字典B.嵌套列表C.numpy二维数组D.普通字符串答案：ABC解析：正确选项的依据：A选项以字典的键作为列名、值作为列数据可直接创建DataFrame；B选项嵌套列表的每一个子列表作为一行数据可创建DataFrame；C选项numpy二维数组的每一行作为DataFrame的行，可直接转换。干扰项D选项普通字符串是非结构化数据，不能直接转换为二维表格结构的DataFrame。下列指标中，属于描述性统计常用指标的有A.均值B.中位数C.方差D.回归系数答案：ABC解析：正确选项的依据：描述性统计用于概括数据的整体分布特征，A选项均值反映数据的集中趋势，B选项中位数反映数据的中间水平，不受极端值影响，C选项方差反映数据的离散程度，三者均为描述性统计的核心指标。干扰项D选项回归系数是统计建模阶段的输出指标，不属于描述性统计范畴。下列方法中，属于缺失值的规范处理方式的有A.删除含缺失值的行或列B.用均值填充数值型缺失值C.用众数填充分类型缺失值D.忽略缺失值直接进行统计计算答案：ABC解析：正确选项的依据：A选项删除法适合缺失值占比低、缺失随机的场景，不会引入额外偏差；B选项均值填充适合数值型数据、分布对称的场景；C选项众数填充适合分类型数据的缺失处理，三种都是行业通用的规范处理方式。干扰项D选项忽略缺失值直接计算会导致统计结果失真，不属于规范处理方式。下列关于pandas的Series和DataFrame的说法中，正确的有A.Series是一维带标签的数据结构B.DataFrame是二维表格型数据结构C.一个DataFrame可以包含多个Series对象D.Series和DataFrame都不能自定义索引答案：ABC解析：正确选项的依据：A选项Series由索引和对应的值组成，是一维结构；B选项DataFrame由行索引、列索引和二维数据组成，是表格型二维结构；C选项DataFrame的每一列都是一个共享行索引的Series对象。干扰项D选项错误，Series和DataFrame都支持自定义任意类型的索引，包括字符串、时间序列等，不需要使用默认的整数索引。下列操作中，可以查看DataFrame前5行数据的有A.调用head()方法B.调用tail()方法C.使用iloc[:5]切片D.调用info()方法答案：AC解析：正确选项的依据：A选项head()方法默认返回前5行数据，也可传入参数指定返回行数；C选项iloc是基于位置的索引，[:5]表示取前5个位置的行。干扰项说明：B选项tail()方法默认返回后5行数据；D选项info()方法返回数据的列名、非空值数量、数据类型等概览信息，不会返回具体的行数据。下列步骤中，属于特征工程常规环节的有A.特征提取B.特征选择C.特征降维D.模型训练答案：ABC解析：正确选项的依据：特征工程是将原始数据转换为可用于分析或建模的特征的过程，A选项特征提取是从非结构化原始数据中提取量化特征；B选项特征选择是筛选出和分析目标相关的特征，剔除冗余特征；C选项特征降维是降低高维特征的维度，减少计算量，三者都是特征工程的核心环节。干扰项D选项模型训练是数据分析的建模阶段内容，不属于特征工程范畴。三、判断题（共10题，每题1分，共10分）pandas中dropna()函数的默认参数下，会删除所有包含任意缺失值的行。答案：正确解析：dropna()的默认参数为axis=0（按行处理）、how=‘any’（只要存在一个缺失值就处理），因此默认情况下会删除所有含缺失值的行，符合函数的设计逻辑。numpy的ndarray数组中可以同时存储字符串和数值两种不同类型的数据。答案：错误解析：numpy的ndarray是同构数据结构，要求所有元素的数据类型一致，这样才能实现高性能的向量运算，如果同时存入字符串和数值，numpy会自动将所有元素转换为字符串类型，无法保留数值的运算属性。标准使用场景下，Matplotlib绘制的图像需要调用show()方法才能显示。答案：正确解析：Matplotlib采用延迟渲染机制，绘图代码只是将绘图指令存入缓存，只有调用show()方法才会触发渲染并展示图像，部分交互式开发环境会自动调用show()，但通用标准用法需要手动调用该方法。pandas的DataFrame的索引必须是从0开始递增的整数。答案：错误解析：DataFrame支持自定义任意类型的索引，比如字符串、时间戳、离散数值等，用户可以根据业务需求设置索引，不需要使用默认的整数递增索引。使用3σ原则识别异常值的前提是数据服从或近似服从正态分布。答案：正确解析：3σ原则的理论基础是正态分布的特征，即99.7%的数据会落在均值加减三倍标准差的区间内，超出该区间的概率极低，因此被视为异常值，如果数据不服从正态分布，该原则的识别结果会出现较大偏差。Seaborn是基于Matplotlib封装的高阶统计可视化库。答案：正确解析：Seaborn对Matplotlib的底层API做了封装，提供了更简洁的统计绘图接口，同时优化了默认的配色、样式，专门针对统计分析的可视化场景做了适配，是目前Python统计可视化的主流库。数据归一化的作用是将不同量级的特征映射到相同的数值区间，消除量级差异对分析结果的影响。答案：正确解析：实际业务中不同特征的量级差异很大，比如收入特征的取值范围是几千到几万，年龄特征的取值范围是0到100，如果不做归一化，分析或建模时量级大的特征会占据绝对主导，掩盖其他特征的作用，归一化可以消除这种影响。pandas的merge()函数只能按照两个表的公共列进行合并，不能按照索引合并。答案：错误解析：merge()函数支持通过left_index=True和right_index=True参数，指定按照左表和右表的索引进行合并，既可以按公共列合并，也可以按索引合并，适配不同的表结构场景。箱线图中如果中位数线位于箱体的正中间，说明该组数据的分布近似对称。答案：正确解析：箱线图的箱体上下边界分别是上四分位数和下四分位数，中位数位于正中间说明上下四分位数到中位数的距离相等，数据在中位数两侧的分布密度相近，属于对称分布。Python中只能使用pandas的read_excel()函数读取Excel文件。答案：错误解析：除了pandas的read_excel()之外，还有openpyxl、xlrd等第三方库可以读取Excel文件，只是pandas会直接将读取到的数据转换为结构化的DataFrame，更适合后续分析，其他库更适合做Excel文件的精细化操作。四、简答题（共5题，每题6分，共30分）简述Python数据分析核心生态中常用第三方库及各自的核心作用。答案：第一，numpy，是Python数值计算的基础库，提供高性能的多维数组对象和大量数学运算函数，运算效率远高于Python原生列表，是其他数据分析库的底层依赖；第二，pandas，是结构化数据处理的核心库，提供Series和DataFrame两种核心数据结构，封装了数据清洗、转换、分组、聚合、合并等大量常用的数据分析操作，大幅提升结构化数据的处理效率；第三，Matplotlib和Seaborn，是数据可视化核心库，前者提供基础的绘图能力，支持所有常见图表类型的绘制，后者是基于Matplotlib封装的统计可视化库，简化了统计图表的绘制逻辑，默认样式更符合数据分析的展示需求；第四，Scipy，是专业科学计算库，提供统计检验、优化、线性代数、信号处理等专业的科学计算工具，满足复杂的统计分析需求。解析：以上四个库构成了Python数据分析的核心生态，覆盖了从数值计算、数据处理到可视化、专业统计的全流程需求，不同库分工明确，搭配使用可以满足绝大多数常规数据分析场景的需求。简述数据清洗环节中缺失值的常见处理策略及适用场景。答案：第一，删除法，当缺失值占比极低（通常低于5%）、且缺失属于随机缺失的场景适用，直接删除含缺失值的行或列，操作简单，不会引入额外的偏差，缺点是会损失部分数据；第二，填充法，当缺失值占比中等、不适合直接删除的场景适用，数值型数据如果分布对称可以用均值填充，分布偏态可以用中位数填充，分类型数据可以用众数填充，时间序列类数据可以用相邻值插值填充，该方法可以尽可能保留数据量，缺点是会改变数据的原始分布；第三，模型预测法，当缺失值占比较高、且数据量足够的场景适用，以其他非缺失特征作为输入，训练简单的预测模型预测缺失值的取值，填充结果更准确，缺点是操作复杂度高，可能会引入模型的预测误差。解析：实际操作中需要结合缺失值的产生原因、占比、数据整体的规模以及分析目标选择合适的处理策略，不能盲目固定使用某一种方法，避免处理后的数据失真，影响后续分析结果的可靠性。简述pandas中Series和DataFrame两种数据结构的区别和联系。答案：第一，维度区别，Series是一维带标签的数据结构，每个元素对应唯一的索引，仅支持单维度的序列数据存储；DataFrame是二维表格型数据结构，由行索引、列索引和二维数据共同组成，支持多字段的结构化数据存储；第二，使用场景区别，Series适合处理单维度的序列数据，比如单条时间序列、单列统计数据等；DataFrame适合处理多字段的结构化表格数据，比如销售订单表、用户信息表等常规业务数据；第三，联系，DataFrame的每一列都是一个共享行索引的Series对象，多个行索引一致的Series可以直接组合为一个DataFrame，两者的大部分操作接口兼容，支持互相转换。解析：Series和DataFrame是pandas最核心的两个数据结构，熟练掌握两者的特性和操作方法是使用pandas进行数据分析的基础，绝大多数结构化数据处理操作都是围绕这两个数据结构展开的。简述行业常用的异常值识别方法及各自的特点。答案：第一，3σ原则，基于数据服从正态分布的假设，计算数据的均值和三倍标准差，超出均值加减三倍标准差区间的数据视为异常值，该方法操作简单，计算效率高，缺点是仅适用于服从或近似服从正态分布的数据，适用性有限；第二，箱线图法，基于四分位数计算异常值阈值，上四分位数加1.5倍四分位间距为上限，下四分位数减1.5倍四分位间距为下限，超出区间的视为异常值，该方法不需要数据服从特定分布，鲁棒性强，不受极端值影响，适合大多数常规数据分析场景，缺点是阈值的设定较为固定，对部分特殊分布的数据识别精度有限；第三，Z-score法，对每个数据点计算标准化得分，得分绝对值超过设定阈值的视为异常值，该方法适合大样本数据的异常识别，同样要求数据近似服从正态分布，缺点是小样本下识别误差较大。解析：实际工作中通常会将多种方法结合使用，交叉验证识别异常值，避免单一方法的局限性导致的误判，识别出异常值后还要结合业务逻辑判断是否为真的异常，避免直接删除有效业务数据。简述特征工程在数据分析流程中的作用及核心步骤。答案：第一，作用，特征工程是将原始非结构化、非标准化的数据转换为适合分析或建模的特征的过程，特征的质量直接决定了后续分析结果的可靠性和模型效果的上限，行业普遍认为特征工程的质量对最终结果的影响远高于模型的选择；第二，核心步骤首先是特征提取，从原始的非结构化数据比如文本、图像、日志中提取出可量化的特征，为后续分析提供基础；第三，其次是特征清洗，处理特征中的缺失值、异常值、重复值，统一数据格式和类型，保证特征的可靠性；第四，最后是特征选择和降维，筛选出和分析目标高度相关的特征，剔除冗余的无关特征，对高维特征进行降维处理，降低后续分析的计算复杂度，避免过拟合问题。解析：特征工程通常占据整个数据分析流程70%以上的时间，是数据分析中最基础也最重要的环节，规范的特征工程可以大幅提升分析效率和结果的可靠性。五、论述题（共3题，每题10分，共30分）结合实际案例，论述Python数据分析相比于传统Excel数据分析的优势和适用场景。答案：论点1：Python数据分析在处理大数据量时的效率远高于Excel。Excel受软件架构限制，单Sheet最多支持百万行左右的数据，超过十万行数据就会出现明显卡顿，涉及公式计算、数据透视等操作时等待时间极长，甚至会出现软件崩溃的问题。而Python基于numpy和pandas的底层优化，只要内存足够可以轻松处理千万级甚至亿级的数据，运算效率是Excel的数十倍以上。比如某连锁零售企业的全年门店交易数据，总数据量超过两千万条，用Excel打开需要几十分钟，做一次按门店的销售额统计需要等待十多分钟还经常闪退，而用Python的pandas读取数据仅需要十几秒，完成分组统计、异常值过滤等全流程操作也只需要几秒，效率提升非常明显。论点2：Python数据分析的自动化和可复用性更强。Excel的操作大多依赖手动点击菜单、输入公式，每次更新数据源都需要重复操作一遍相同的步骤，不仅耗时久，还容易出现操作失误导致结果错误。而Python的分析流程可以写成可复用的脚本，后续有新的同类型数据时，只需要修改数据源路径一键运行，就能自动完成所有分析步骤，输出标准化的结果。比如企业每月都要生成的销售报表，用Excel处理的话每次都要重复做VLOOKUP匹配、数据透视、格式调整等操作，至少需要2小时，而用Python写好分析脚本后，每次更新数据源只需要运行几分钟就能生成标准化的报表和可视化图表，还能自动发送给相关负责人，大幅降低重复劳动的成本，避免人为失误。论点3：Python数据分析的功能扩展性更强。Excel的功能集中在基础的表格处理和简单的统计分析，很难实现复杂的全流程数据分析需求，而Python的生态非常丰富，可以覆盖从数据采集、数据清洗、统计分析、可视化到建模预测的全流程需求，还能对接数据库、大数据平台等多种数据源。比如企业要做用户复购预测，用Excel只能做简单的历史消费统计，而用Python可以先爬取用户的站内浏览、点击等行为数据，然后做数据清洗和特征提取，训练分类模型预测用户的复购概率，还能输出可视化的特征重要性分析报告，支撑后续的运营策略调整，这些都是Excel无法实现的。结论：Python适合处理大数据量、需要定期重复分析、有复杂统计建模需求的场景，Excel适合小数据量、临时快速分析、需要灵活调整表格格式的场景，两者并不冲突，可以搭配使用，覆盖不同的数据分析需求。结合具体案例，论述数据清洗在整个数据分析流程中的重要性，以及不规范的数据清洗可能带来的问题。答案：论点1：数据清洗是后续分析结果准确的基础，直接决定了分析结果的可靠性。原始采集的数据往往存在很多问题，比如缺失值、异常值、重复值、逻辑错误值等，如果不做清洗直接分析，会导致结果完全失真，甚至误导业务决策。比如某电商平台要计算用户的平均客单价，指导后续的定价策略，原始数据中包含了大量测试订单，客单价为0或者几十万元的异常值，还有重复录入的订单数据，如果不先清洗掉这些脏数据，计算出来的平均客单价可能会比实际值高出数倍或者低很多，运营人员按照这个错误的结果调整商品定价，会导致大量用户流失或者营收损失。论点2：数据清洗的质量直接决定了机器学习建模的效果。模型是从数据中学习规律，如果数据中存在大量脏数据，模型会学习到错误的规律，导致预测效果极差，给企业带来损失。比如某金融机构要做用户逾期风险预测，原始数据中存在大量用户收入数据缺失，还有部分用户故意填写的虚高收入数据，如果不处理这些缺失和异常值，直接用来训练模型，模型会认为收入特征和逾期风险无关，导致很多高风险的逾期用户被误判为低风险，给机构带来大量的坏账损失。论点3：规范的数据清洗可以反向优化数据采集流程，减少后续脏数据的产生。在数据清洗的过程中可以溯源脏数据的产生原因，发现数据采集环节的漏洞，及时调