2026年高职(大数据技术与应用)数据分析试题及答案

2026年高职(大数据技术与应用)数据分析试题及答案一、单项选择题（本大题共20小题，每小题2分，共40分。在每小题列出的四个备选项中只有一个是符合题目要求的，请将其代码填在括号内）1.在大数据的“4V”特征中，指的是数据产生和处理速度快的是（）。A.Volume（大量）B.Velocity（高速）C.Variety（多样）D.Value（低价值密度）2.在Python的数据分析库Pandas中，用于表示一维带标签数组对象的类是（）。A.DataFrameB.SeriesC.PanelD.NDArray3.下列关于HDFS（HadoopDistributedFileSystem）的描述，错误的是（）。A.适合存储超大文件B.采用流式数据访问模式C.适合大量的小文件存储D.默认情况下，数据块会有3个副本4.使用NumPy创建一个3x3的全零矩阵，应使用函数（）。A.np.ones((3,3))B.np.zeros((3,3))C.np.eye(3)D.np.empty((3,3))5.在Pandas中，若要从DataFrame中删除包含缺失值的行，应使用的方法是（）。A.df.dropna()B.df.fillna()C.df.isnull()D.df.notnull()6.下列SQL语句中，用于从“students”表中查询所有“age”大于18的记录的是（）。A.SELECT*FROMstudentsWHEREage>18B.DELETEFROMstudentsWHEREage>18C.INSERTINTOstudentsVALUES(...)D.UPDATEstudentsSETage=197.在MapReduce计算模型中，主要负责将输入数据切分成独立的splits以便并行处理的阶段是（）。A.Map阶段B.Reduce阶段C.Shuffle阶段D.InputFormat阶段8.使用Matplotlib绘制折线图时，用于标记数据点的参数是（）。A.colorB.linestyleC.markerD.linewidth9.在SparkRDD的算子中，属于Transformation（转换算子）的是（）。A.count()B.collect()C.map()D.saveAsTextFile()10.下列关于数据标准化的描述，正确的是（）。A.标准化是将数据缩放到[0,1]区间B.归一化是将数据转换为均值为0，方差为1的分布C.标准化公式通常为(x-mean)/stdD.归一化公式通常为(x-min)/(max-min)11.在Pandas中，用于按某一列对DataFrame进行分组操作的函数是（）。A.merge()B.concat()C.groupby()D.sort_values()12.下列哪种图表类型最适合用于展示各部分占总体的百分比关系？（）A.散点图B.直方图C.饼图D.箱线图13.在Hive中，内部表和外部表的主要区别在于（）。A.存储格式不同B.删除表时是否删除元数据C.删除表时是否删除HDFS上的实际数据D.查询语法不同14.在Python中，使用Pandas读取CSV文件，默认生成的索引是（）。A.第一列数据B.从0开始的整数序列C.随机数D.空值15.下列关于相关系数r的描述，错误的是（）。A.r的取值范围在-1到1之间B.r=1表示完全正相关C.r=0表示两个变量完全独立D.r的绝对值越接近1，相关性越强16.在数据分析流程中，通常位于数据清洗之后的步骤是（）。A.数据采集B.数据可视化C.特征工程D.需求分析17.使用scikit-learn库进行数据集划分，将数据分为训练集和测试集的函数是（）。A.train_test_splitB.cross_val_scoreC.fit_predictD.GridSearchCV18.在SQL中，用于对查询结果进行分组统计的关键字是（）。A.ORDERBYB.GROUPBYC.DISTINCTD.WHERE19.下列关于Spark的描述，正确的是（）。A.Spark是基于磁盘的计算，比MapReduce慢B.Spark是纯内存计算，完全不使用磁盘C.Spark基于内存计算，迭代计算效率高D.Spark只能处理批处理任务20.在Pandas中，`df.iloc[1:3,0:2]`选取的数据是（）。A.第1到3行，第0到2列（包含索引3）B.第2到3行，第1到2列C.第2到4行，第1到3列D.第1到2行，第0到1列二、多项选择题（本大题共10小题，每小题3分，共30分。在每小题列出的五个备选项中有两个或两个以上是符合题目要求的，请将其代码填在括号内。多选、少选、错选均不得分）1.下列属于大数据应用场景的有（）。A.智慧交通B.电商推荐系统C.医疗影像分析D.简单的文本编辑E.个人记账本2.Pandas中缺失值处理的方法包括（）。A.删除缺失值B.均值填充C.众数填充D.插值法填充E.忽略不处理3.下列关于NumPy数组的操作，哪些会改变原数组？（）A.arr.resize((2,3))B.arr.reshape((2,3))C.arr.sort()D.np.append(arr,[1,2])E.arr.flatten()4.Hadoop生态系统包含的核心组件有（）。A.HDFSB.MapReduceC.YARND.HiveE.Spark5.在数据可视化中，Matplotlib中常用的设置包括（）。A.设置标题B.设置X轴标签C.设置Y轴标签D.显示图例E.保存图片6.下列属于分类算法的有（）。A.逻辑回归B.决策树C.K-Means聚类D.支持向量机（SVM）E.线性回归7.在Python中，读取Excel文件需要使用的库或函数包括（）。A.pandasB.openpyxlC.xlrdD.numpyE.matplotlib8.SQL中的聚合函数包括（）。A.SUM()B.AVG()C.COUNT()D.MAX()E.MIN()9.数据清洗的主要任务包括（）。A.缺失值处理B.重复值处理C.异常值处理D.数据标准化E.数据类型转换10.下列关于DataFrame的描述，正确的有（）。A.是二维表格型数据结构B.每列可以是不同的数据类型C.具有行索引和列索引D.只能存储数值型数据E.可以像字典一样通过列名访问数据三、判断题（本大题共10小题，每小题1分，共10分。正确的打“√”，错误的打“×”）1.大数据技术就是为了解决单机无法处理海量数据存储和计算的问题而诞生的。（）2.在Python中，列表的索引是从1开始的。（）3.Pandas中的`merge`函数默认是按照索引进行合并的。（）4.HDFS是主从架构，NameNode是主节点，负责管理文件系统的元数据。（）5.标准差越大，说明数据的离散程度越小。（）6.在Matplotlib中，`plt.show()`用于显示图形，在JupyterNotebook中可以省略。（）7.SparkRDD是弹性的分布式数据集，一旦创建就不能被修改。（）8.聚类分析是一种无监督学习方法，不需要标签数据。（）9.在SQL中，`LIKE`关键字用于模糊查询，通配符`%`表示任意多个字符。（）10.中位数容易受到极端值的影响，而平均值比较稳健。（）四、填空题（本大题共10小题，每小题2分，共20分。请将正确的答案填在横线上）1.在Python的科学计算栈中，用于高效数组运算的库是__________。2.在Pandas中，`df.head(10)`默认返回DataFrame的前__________行数据。3.在数据分析中，用于衡量数据集中趋势的统计量包括平均值、中位数和__________。4.MapReduce的过程主要分为Map阶段、__________阶段和Reduce阶段。5.在Matplotlib中，绘制散点图的函数是__________。6.在SQL中，`LEFTJOIN`会返回左表中的所有记录，以及右表中__________的记录。7.在Spark中，`parallelize`方法用于将本地集合转换为__________。8.在Pandas中，`df.describe()`方法主要用于计算数据的__________统计量。9.在机器学习中，将数据集划分为训练集和测试集的目的是为了评估模型的__________。10.HDFS默认的数据块大小是__________（填数字，单位MB）。五、简答题（本大题共440小题，每小题10分，共40分）1.简述大数据处理的生命周期（数据流程）。2.请解释Pandas中`loc`和`iloc`索引器的区别，并举例说明。3.在Hadoop中，NameNode和DataNode的作用分别是什么？4.简述数据清洗中常见的异常值检测方法。六、综合应用题（本大题共3小题，共50分。要求逻辑清晰，代码规范，必要时写出详细步骤）1.SQL数据分析应用（15分）假设有一张电商订单表`orders`，包含字段：`order_id`（订单ID），`user_id`（用户ID），`product_id`（产品ID），`amount`（金额），`order_date`（订单日期）。请编写SQL语句完成以下任务：(1)查询2024年1月份的总销售额。(2)统计每个用户的购买次数（订单数）。(3)查询消费金额排名前3的用户ID和金额。2.PythonPandas数据分析应用（20分）现有某班级学生的成绩数据（CSV格式），包含列：`Name`（姓名），`Math`（数学），`English`（英语），`Python`（Python课程）。部分数据存在缺失值，且部分分数录入错误（如超过100或小于0）。请使用Python和Pandas库完成以下操作：(1)读取CSV文件为DataFrame。(2)将缺失值填充为该列的平均值。(3)筛选出分数在0到100之间的有效数据（即去除异常值）。(4)计算每名学生的总分并添加到新列`Total`。(5)输出总分最高的学生姓名。3.大数据综合分析与可视化（15分）某连锁超市收集了各分店的销售数据。数据格式为文本文件，每行记录为：`日期,分店ID,商品类别,销售额`。(1)请设计一个MapReduce程序思路（伪代码或文字描述），统计每个商品类别的总销售额。(2)假设已通过MapReduce计算出结果，并使用Python的Matplotlib库进行展示。请编写代码绘制一个柱状图，横轴为商品类别，纵轴为总销售额，要求标题为“各商品类别销售统计”，并显示网格线。参考答案及解析一、单项选择题1.B2.B3.C解析：HDFS适合存储大文件，对于大量小文件，由于NameNode需要维护元数据，会产生内存压力，且寻址时间超过读取时间，不适合。4.B5.A6.A7.D解析：InputFormat负责将输入数据切分成逻辑上的InputSplit，然后RecordReader将其转换为Key-Value对交给Mapper。8.C9.C解析：map是转换算子，返回新的RDD；count,collect,saveAsTextFile是行动算子，触发作业提交。10.C解析：A是归一化，B是标准化，D是归一化。题目问标准化，C正确。11.C12.C13.C解析：删除内部表时，元数据和数据都会被删除；删除外部表时，只删除元数据，HDFS上的数据保留。14.B15.C解析：r=0表示线性不相关，但不代表完全独立（可能存在非线性关系）。16.C17.A18.B19.C20.D解析：iloc是位置索引，左闭右开。1:3取索引1和2，0:2取索引0和1。二、多项选择题1.ABC2.ABCD3.AC解析：resize和sort是原地操作；reshape返回视图或副本但不改变原数组形状；append返回新数组；flatten返回副本。4.ABC解析：Hadoop核心包括HDFS,MapReduce,YARN。Hive和Spark通常被视为生态圈组件，但在广义上也常被提及。若严格按Hadoop核心，选ABC；若按广义生态圈，常选ABCDE。本题按核心组件选ABC。但通常高职考试中，Hive也被视为重要组件。考虑到题目问“生态系统”，包含D也是合理的，但最核心是ABC。此处答案设定为ABC。5.ABCDE6.ABD解析：K-Means是聚类（无监督），线性回归是回归。7.ABC8.ABCDE9.ABCDE10.ABCE三、判断题1.√2.×解析：Python列表索引从0开始。3.×解析：merge默认按列名相同的键进行合并，how='inner'。4.√5.×解析：标准差越大，离散程度越大。6.√7.√解析：RDD是只读的，不可变，转换操作生成新RDD。8.√9.√10.×解析：平均值容易受极端值影响，中位数比较稳健。四、填空题1.NumPy2.53.众数4.Shuffle5.plt.scatter6.匹配（或连接条件满足）7.RDD8.描述性（或汇总）9.泛化能力（或性能）10.128五、简答题1.简述大数据处理的生命周期（数据流程）。答：大数据处理的生命周期通常包括以下步骤：(1)数据采集：从各种数据源（如数据库、日志文件、传感器、网络爬虫等）获取原始数据。(2)数据存储：将采集到的数据存储在分布式文件系统（如HDFS）或NoSQL数据库中。(3)数据清洗与预处理：处理缺失值、去除噪声、数据标准化、格式转换等，提高数据质量。(4)数据分析与挖掘：利用统计学方法、机器学习算法等对数据进行处理，挖掘有价值的信息。(5)数据可视化：将分析结果通过图表、报表等形式直观展示。(6)数据应用：将分析结果应用于业务决策、推荐系统等实际场景。2.请解释Pandas中`loc`和`iloc`索引器的区别，并举例说明。答：`loc`是基于标签的索引器，用于通过行标签和列名来选择数据。`iloc`是基于位置的索引器，用于通过整数索引（从0开始）来选择数据。举例：假设df=pd.DataFrame({'A':[1,2,3],'B':[4,5,6]},index=['x','y','z'])`df.loc['y','A']`选取标签为'y'的行和名为'A'的列，结果为2。`df.iloc[1,0]`选取第2行（索引1）和第1列（索引0），结果也为2。区别在于loc使用的是定义的名称，iloc使用的是绝对位置。3.在Hadoop中，NameNode和DataNode的作用分别是什么？答：NameNode（名称节点）：是HDFS的主节点，负责管理文件系统的元数据（如目录结构、文件与数据块的映射关系、数据块的位置信息等）。它协调客户端的访问操作，并管理DataNode的状态。DataNode（数据节点）：是HDFS的从节点，负责存储实际的数据块。它响应NameNode的指令（如创建、删除、复制数据块），并定期向NameNode发送心跳和块报告，以表明自身存活状态。4.简述数据清洗中常见的异常值检测方法。答：(1)3σ原则（标准差法）：对于服从正态分布的数据，超过平均值±3倍标准差的数据通常被视为异常值。(2)箱线图法：利用四分位数（Q1,Q3）和四分位距（IQR=Q3-Q1）。通常将小于Q1-1.5*IQR或大于Q3+1.5*IQR的数据视为异常值。(3)散点图观察法：通过绘制散点图，人工识别远离大部分数据点的离群点。(4)基于聚类的方法：将数据聚类后，距离聚类中心过远或无法归属到任何簇的点可视为异常值。(5)基于业务逻辑：根据实际业务含义设定合理的阈值（如年龄不能为负数），超出范围即为异常。六、综合应用题1.SQL数据分析应用(1)查询2024年1月份的总销售额。```sqlSELECTSUM(amount)AStotal_salesFROMordersWHEREorder_dateBETWEEN'2024-01-01'AND'2024-01-31';```(2)统计每个用户的购买次数（订单数）。```sqlSELECTuser_id,COUNT(order_id)ASorder_countFROMordersGROUPBYuser_id;```(3)查询消费金额排名前3的用户ID和金额。```sqlSELECTuser_id,SUM(amount)AStotal_amountFROMordersGROUPBYuser_idORDERBYtotal_amountDESCLIMIT3;```2.PythonPandas数据分析应用```pythonimportpandasaspdimportnumpyasnp#(1)读取CSV文件#假设文件名为scores.csvtry:df=pd.read_csv('scores.csv')exceptFileNotFoundError:#如果没有文件，模拟一个数据用于演示data={'Name':['Alice','Bob','Charlie','David'],'Math':[85,90,np.nan,105],'English':[88,np.nan,75,95],'Python':[90,85,80,-5]}df=pd.DataFrame(data)#(2)将缺失值填充为该列的平均值#先选择数值列进行计算numeric_cols=['Math','English','Python']forcolinnumeric_cols:mean_val=df[col].mean()df[col].fillna(mean_val,inplace=True)#(3)筛选出分数在0到100之间的有效数据#逻辑：所有科目都必须在0-100之间#先将数据限制在0-100，或者直接过滤行。题目要求去除异常值，通常指过滤掉该行。#这里我们假设只要有一科异常就过滤掉该学生mask=(df['Math']>=0)&(df['Math']<=100)&\(df['English']>=0)&(df['English']<=100)&\(df['Python']>=0)&(df['Python']<=100)df_clean=df[mask]#(4)计算每名学生的总分#axis=1表示按行计算df_clean['Total']=df_clean[numeric_co