2026年人工智能与大数据技术试题及答案

2026年人工智能与大数据技术试题及答案一、单项选择题（本大题共20小题，每小题2分，共40分。在每小题给出的四个选项中，只有一项是符合题目要求的）1.在深度学习的优化算法中，哪种算法通过引入动量项来加速梯度下降并抑制震荡？A.SGDB.AdamC.AdagradD.RMSprop2.在Hadoop生态系统中，负责资源管理和任务调度的组件是？A.HDFSB.MapReduceC.YARND.ZooKeeper3.下列关于Transformer模型中“自注意力机制”的描述，错误的是？A.能够直接计算序列中任意两个位置之间的依赖关系B.通过Query、Key、Value三个向量进行计算C.计算复杂度随序列长度呈线性增长D.引入了位置编码以保留序列顺序信息4.在关系型数据库设计中，若一个关系模式属于第三范式（3NF），则它一定满足？A.第一范式B.第二范式C.BCNFD.第四范式5.下列哪种聚类算法不需要预先指定聚类簇的数量？A.K-MeansB.DBSCANC.高斯混合模型（GMM）D.层次聚类（若需指定切分层数）6.在大数据处理中，CAP定理指出分布式系统无法同时满足以下哪三个特性？A.一致性、可用性、分区容错性B.可靠性、可扩展性、容错性C.原子性、一致性、隔离性D.高性能、高可用、可扩展7.卷积神经网络（CNN）中，池化层的主要作用是？A.增加网络深度B.提取非线性特征C.降低特征图维度，减少计算量D.防止过拟合8.在SparkRDD的转换操作中，哪个操作会导致依赖链变长，可能引发性能问题？A.mapB.filterC.reduceByKeyD.persist9.下列关于生成式对抗网络（GAN）的描述，正确的是？A.由编码器和解码器组成B.包含生成器和判别器两个网络，进行零和博弈C.训练目标是最大化判别器的损失D.只能用于生成图像数据10.在数据挖掘的关联规则挖掘中，支持度和置信度的阈值通常如何设置？A.支持度阈值应高于置信度阈值B.置信度阈值应高于支持度阈值C.两者阈值通常相同D.无固定关系，视具体业务而定11.下列哪项技术是解决梯度消失问题的有效方法？A.引入DropoutB.使用ReLU激活函数C.使用L2正则化D.减小学习率12.在NoSQL数据库分类中，Redis主要属于哪种类型？A.文档型数据库B.列族存储C.键值对存储D.图数据库13.机器学习中，用于评估二分类模型在正负样本不平衡情况下表现较好的指标是？A.准确率B.精确率C.F1-ScoreD.AUC值14.在自然语言处理（NLP）中，BERT模型的全称是？A.BidirectionalEncoderRepresentationsfromTransformersB.BidirectionalEncoderRecurrentTransformersC.BinaryEncoderRepresentationsfromTransformersD.BasicEncoderRepresentationsfromTransformers15.下列关于数据预处理的描述，错误的是？A.归一化可以消除不同特征量纲的影响B.缺失值填充只能使用均值C.独热编码可用于处理类别型特征D.特征选择可以降低模型复杂度16.在流式计算框架中，Flink与SparkStreaming的主要区别在于？A.Flink是批处理，SparkStreaming是流处理B.Flink基于微批处理，SparkStreaming基于事件驱动C.Flink基于事件驱动，SparkStreaming早期版本基于微批处理D.两者没有本质区别17.强化学习中，Agent通过与环境交互学习策略，其目标是最大化？A.即时奖励B.累计折扣奖励C.惩罚最小化D.状态转移概率18.下列关于深度学习中的正则化技术，哪项不是通过修改损失函数实现的？A.L1正则化B.L2正则化C.DropoutD.ElasticNet19.在数据仓库的建模中，星型模式与雪花模式的主要区别在于？A.星型模式包含事实表和维度表，雪花模式没有事实表B.雪花模式对维度表进行了规范化，星型模式维度表是反规范化的C.星型模式查询性能更差D.雪花模式更易于维护和理解20.现代大模型训练中，常用的参数高效微调技术（PEFT）不包括？A.LoRAB.AdapterC.PrefixTuningD.全参数微调二、多项选择题（本大题共10小题，每小题3分，共30分。在每小题给出的四个选项中，有多项是符合题目要求的。全部选对得3分，部分选对得1分，有选错得0分）1.下列属于大数据“5V”特征的是？A.Volume（大量）B.Velocity（高速）C.Variety（多样）D.Value（低价值密度）2.决策树算法中，常用的特征选择指标包括？A.信息增益B.信息增益率C.基尼系数D.均方误差3.下列关于深度学习框架的描述，正确的有？A.PyTorch提供动态计算图，便于调试B.TensorFlow主要采用静态计算图，部署效率高C.Keras是高级API，可运行于TensorFlow之上D.Caffe主要用于计算机视觉，不支持Python接口4.HDFS（HadoopDistributedFileSystem）在设计时考虑了哪些目标？A.存储超大数据集B.高吞吐量数据访问C.低延迟数据访问D.硬件故障容错5.下列哪些属于自然语言处理中的预训练任务？A.掩码语言模型（MLM）B.下一句预测（NSP）C.机器翻译D.情感分析6.在构建推荐系统时，常用的算法模型包括？A.协同过滤B.基于内容的推荐C.矩阵分解D.深度学习召回模型7.下列关于卷积神经网络（CNN）的描述，正确的有？A.局部连接减少了参数数量B.权值共享进一步降低了模型复杂度C.卷积核的深度必须与输入特征图的通道数一致D.全连接层通常用于最后的分类或回归8.在数据清洗过程中，常见的异常数据处理方式包括？A.删除异常值B.视为缺失值处理C.填充为边界值D.不做处理，保留原样9.下列属于图计算应用场景的有？A.社交网络分析（如好友推荐）B.页面排名C.最短路径规划D.时间序列预测10.模型融合（EnsembleLearning）的主要方法包括？A.Bagging（如随机森林）B.Boosting（如XGBoost）C.StackingD.Voting三、填空题（本大题共15空，每空2分，共30分）1.在反向传播算法中，利用________法则计算梯度，通过链式法则将误差从输出层向输入层传播。2.MapReduce的计算模型主要分为Map阶段和________阶段。3.在评估回归模型时，________指标表示预测值与真实值差值的平方和的均值。4.在神经网络中，________函数常用于二分类问题的输出层，将输出映射到(0,1)区间。5.Spark的核心数据抽象是________，它是一个不可变、可分区、里面的元素可并行计算的集合。6.时间序列分析中，ARIMA模型中的“AR”代表自回归，“MA”代表________。7.在聚类算法中，________算法通过基于密度的连接方式将样本聚集成簇，能有效发现噪声点。8.数据库事务的ACID特性中，________指事务执行的结果必须使数据库从一个一致性状态变到另一个一致性状态。9.在深度学习中，________技术指在训练过程中随机丢弃一部分神经元，以防止过拟合。10.Elasticsearch是一个基于________的高性能、分布式搜索引擎。11.支持向量机（SVM）的基本思想是寻找一个超平面，使得样本点到超平面的________最大化。12.在自然语言处理中，________技术旨在识别文本中具有特定意义的实体，如人名、地名、机构名等。13.数据立方体操作中，________操作通过沿一个或多个维度汇总数据来减少立方体的维度。14.在联邦学习中，参与训练的各方________共享原始训练数据，仅交换模型参数或梯度。15.Transformer模型中，多头注意力机制允许模型在不同的表示子空间中关注信息的不同部分，其输出拼接后会经过一个________层。四、简答题（本大题共5小题，每小题8分，共40分）1.简述过拟合产生的原因及常用的解决方法。2.请解释HDFS中NameNode和DataNode的功能及其工作原理。3.简述卷积神经网络（CNN）中卷积层、池化层和全连接层的主要作用。4.什么是数据仓库？它与传统操作型数据库（OLTP）的主要区别是什么？5.简述Transformer模型相对于传统RNN模型在处理长序列文本时的优势。五、应用与分析题（本大题共3小题，共60分）1.（计算题，15分）假设有一个简单的二分类问题，数据集包含3个样本：样本A：特征x=2.0，真实标签y=1样本B：特征x=0.5，真实标签y=0样本C：特征x=1.8，真实标签y=1现有一个逻辑回归模型，预测函数为h(x)假设当前模型参数为：权重w=1.0，偏置损失函数采用交叉熵损失：L((1)请计算样本A的预测概率和损失值。（保留4位小数）(2)请计算该模型在样本A上的损失函数关于权重w的梯度。（提示：(z)(3)若学习率α=0.5，请写出使用梯度下降法更新后权重2.（综合分析题，20分）某电商平台拥有海量的用户行为日志数据（包括浏览、点击、购买等），存储在HDFS中，数据量达到PB级别。公司计划构建一个实时推荐系统，需要根据用户最近1小时的行为实时更新推荐列表。(1)请设计一个基于Lambda架构或Kappa架构的大数据处理流水线架构，画出主要组件框图并说明各组件的功能。(2)在实时处理层，如果出现数据倾斜（即某些Key的数据量远大于其他Key），会导致SparkStreaming/Flink任务出现背压或延迟。请列举至少两种解决数据倾斜的方法并简要说明原理。(3)在特征工程阶段，对于用户的“商品浏览历史”这一类别型高维稀疏特征，通常会采用什么技术进行降维处理以输入到深度学习模型中？请详细说明该技术的原理。3.（案例分析题，25分）随着大语言模型（LLM）的广泛应用，某金融科技公司希望利用开源大模型（如Llama3或Qwen）构建一个智能金融问答助手。该助手需要能够回答用户关于理财产品的咨询，并辅助分析师进行财报分析。(1)在模型选型与微调阶段，若公司只有少量的标注数据（约1000条金融问答对），直接全参数微调容易导致“灾难性遗忘”。请解释什么是灾难性遗忘，并说明应采用哪种微调技术来缓解此问题，简述其工作原理。(2)为了提高模型回答的准确性，特别是针对最新的金融资讯和公司内部未公开的理财文档，决定采用检索增强生成（RAG）技术。请画出RAG系统的基本流程图，并详细解释“索引构建”和“检索生成”两个阶段的核心步骤。(3)在部署上线后，如何评估该金融问答助手的性能？请从技术指标（如延迟、吞吐量）和效果指标（如准确率、鲁棒性）两个维度分别列出至少3个关键评估指标，并说明其含义。参考答案与解析一、单项选择题1.B[解析]Adam算法结合了动量项和RMSprop，是自适应学习率优化算法的代表。2.C[解析]YARN是YetAnotherResourceNegotiator的缩写，负责集群资源管理。3.C[解析]自注意力机制的计算复杂度是序列长度的平方O(4.B[解析]范式包含关系：3NF⊂2NF⊂1NF。5.B[解析]DBSCAN是基于密度的聚类，可以自动发现簇的数量并识别噪声。6.A[解析]CAP定理指一致性、可用性、分区容错性三者不可兼得。7.C[解析]池化层（如最大池化）用于下采样，减少参数和计算量。8.A[解析]map是窄依赖，但长链式map会导致RDDlineage过长；persist是缓存，不属于导致依赖链变长的转换操作。本题考察概念，通常reduceByKey等宽依赖会触发shuffle，但在长链式依赖中，反复map而不persist会导致计算开销大，但严格来说map本身构建了长依赖链。注：此处若考察“导致长依赖链”，map是构建依赖的基本操作；若考察“导致性能问题通常需要优化”，长lineage的map是典型场景。9.B[解析]GAN由生成器和判别器组成，进行极大极小博弈。10.D[解析]支持度和置信度阈值无固定大小关系，需根据业务和数据分布调整。11.B[解析]ReLU及其变体（LeakyReLU）在正区间导数恒为1，能有效缓解梯度消失。12.C[解析]Redis是基于内存的键值对存储数据库。13.D[解析]在样本不平衡时，AUC（ROC曲线下面积）是评估模型排序能力的稳健指标。14.A[解析]BERT全称为BidirectionalEncoderRepresentationsfromTransformers。15.B[解析]缺失值填充方法多样，包括均值、中位数、众数、插值等，不仅限于均值。16.C[解析]Flink是真正的流式计算（事件驱动），SparkStreaming（微批处理）本质上是将流切分为微批处理。17.B[解析]强化学习的目标是最大化期望的累积折扣奖励。18.C[解析]Dropout是在网络结构中随机丢弃神经元，不是通过修改损失函数项实现的正则化。19.B[解析]雪花模式对维度表进行了规范化处理，结构复杂；星型模式维度表直接连接事实表，结构简单。20.D[解析]全参数微调不是参数高效微调技术，LoRA、Adapter、PrefixTuning均属于PEFT。二、多项选择题1.ABCD[解析]大数据5V通常指Volume,Velocity,Variety,Value,Veracity。2.ABC[解析]决策树常用指标包括信息增益（ID3）、信息增益率（C4.5）、基尼系数（CART）。MSE用于回归树。3.ABC[解析]PyTorch动态图，TensorFlow静态图（2.x默认动态但支持静态），Keras是高级API。Caffe主要用C++/Python接口，但说“不支持Python接口”是错误的，Caffe有Python接口（pyCaffe）。4.ABD[解析]HDFS设计用于大文件、高吞吐、硬件容错，不追求低延迟。5.AB[解析]MLM和NSP是BERT的预训练任务；机器翻译和情感分析通常是下游任务。6.ABCD[解析]协同过滤、基于内容、矩阵分解、深度学习模型均为推荐系统常用算法。7.ABCD[解析]CNN的局部连接、权值共享、通道匹配、全连接层分类均为其特征。8.ABC[解析]异常值处理包括删除、填充、视为缺失、截断等，不做处理也是一种选择，但在“清洗”语境下通常指前三种主动处理方式。注：D选项“不做处理”在某些特定保留离群点分析的场景下也是合理的，但在常规清洗题中通常选ABC。此处按多选全对标准，ABC肯定正确。9.ABC[解析]社交、PageRank、最短路径均为图计算典型应用，时间序列预测通常用RNN/ARIMA等。10.ABCD[解析]Bagging,Boosting,Stacking,Voting均为常见的集成学习方法。三、填空题1.链式2.Reduce（或Shuffle/Reduce）3.均方误差（MSE）4.Sigmoid5.RDD（ResilientDistributedDataset）6.移动平均7.DBSCAN（Density-BasedSpatialClusteringofApplicationswithNoise）8.一致性9.Dropout10.Lucene11.几何间隔（或间隔，Margin）12.命名实体识别（NER）13.上卷（Roll-up）14.不15.线性投影（或全连接/Linear）四、简答题1.答：原因：模型过于复杂，参数数量远大于训练样本数量，导致模型学习到了训练数据中的噪声和细节，而非普遍规律；训练数据量太少；训练时间过长。解决方法：(1)数据层面：增加训练数据量；使用数据增强。(2)模型层面：简化模型结构（减少层数、神经元数）；使用正则化技术（L1/L2正则化，Dropout）；早停法。(3)集成方法：虽然Bagging能降低方差，但主要还是通过降低单一模型复杂度来解决。2.答：NameNode：是HDFS的主节点，管理文件系统的元数据（命名空间、目录结构、文件与Block的映射关系、Block副本位置信息）。它处理客户端请求，管理DataNode。DataNode：是HDFS的工作节点，存储实际的数据块。它定期向NameNode发送心跳和块报告，执行NameNode下发的指令（如创建、删除、复制块）。工作原理：客户端读写时先访问NameNode获取元数据，然后直接与DataNode交互进行数据传输。3.答：卷积层：通过卷积核在输入上滑动进行特征提取，利用局部感知野和权值共享提取局部特征（如边缘、纹理）。池化层：对特征图进行下采样（如最大池化、平均池化），降低特征维度，减少计算量，并引入一定的不变性。全连接层：将前面提取的特征展平，通过矩阵变换将高维特征映射到样本标记空间，通常用于输出分类或回归结果。4.答：数据仓库：是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策。区别：(1)面向对象不同：OLTP面向具体业务操作（增删改查）；DW面向主题分析。(2)数据内容不同：OLTP存储当前详细数据；DW存储历史、汇总数据。(3)操作特点不同：OLTP读写频繁，事务性强；DW主要是查询操作，数据量大。(4)性能要求不同：OLTP要求高并发、低延迟；DW要求高吞吐、复杂查询能力强。5.答：(1)并行计算能力：Transformer利用自注意力机制可以并行计算序列中所有位置的关系，而RNN必须按时间步顺序计算，训练效率低。(2)长距离依赖：RNN受限于序列长度，容易丢失早期信息（梯度消失）；Transformer通过点积直接计算任意距离词之间的关联，有效捕捉长距离依赖。(3)模型表达能力：多头注意力机制让模型从不同子空间学习特征，表达能力强于单一隐藏状态的RNN。五、应用与分析题1.解：(1)计算样本A的预测概率和损失：===(2)计算梯度：交叉熵对z的导数为−y=由于=w·+根据链式法则：=(3)更新权重w：=2.答：(1)架构设计（Lambda架构为例）：批处理层：使用HDFS存储主数据集，利用Spark/MapReduce进行全量预处理和模型训练，生成批处理视图。加速层：使用Kafka消息队列接收实时日志，利用Storm/Flink/SparkStreaming进行实时计算，生成实时视图。服务层：使用NoSQL数据库（如HBase/Cassandra）合并批处理视图和实时视图，提供低延迟查询服务。流程：日志->Kafka->(1)批处理层->HDFS->Spark->BatchView;(2)加速层->Flink->Real-timeView.服务层合并两者结果。(2)解决数据倾斜的方法：加盐：给导致倾斜的Key加上随机前缀（如Key-Random），将其分散到不同的Reducer/Task处理，最后再聚合去掉前缀。广播Join：如果是Join操作倾斜，且其中一张表较小，可将小表广播到所有Executor，避免大表Shuffle，转化为MapJoin。提高并行度：适当增加ReduceTask的数量，让每个Task处理的数据量减少。(3)高维稀疏特征降维技