2025-2026年大数据存储与数据仓库专项习题集

2025-2026年大数据存储与数据仓库专项习题集一、单选题（总共10题，每题2分，共20分）1.在大数据存储与数据仓库架构中，下列哪种技术最适合用于处理海量、非结构化数据的分布式存储？A.关系型数据库管理系统（RDBMS）B.对象存储系统（ObjectStorage）C.NoSQL数据库（如MongoDB）D.文件系统（如HDFS）解析：对象存储系统（ObjectStorage）专为海量非结构化数据设计，通过分布式架构实现高扩展性和容错性，适合大数据场景。RDBMS适用于结构化数据，NoSQL数据库虽支持非结构化但扩展性不如对象存储，文件系统（HDFS）虽可存储海量数据但管理非结构化数据能力有限。2.数据仓库中的ETL过程，哪一步通常用于将源系统中的数据转换为符合数据仓库规范的数据格式？A.数据抽取（Extract）B.数据转换（Transform）C.数据加载（Load）D.数据清洗（Cleanse）解析：ETL中的转换（Transform）步骤负责数据清洗、格式统一、计算衍生指标等操作，确保数据符合数据仓库需求。抽取是获取数据，加载是写入仓库，清洗是转换的一部分但非核心步骤。3.在数据仓库分层架构中，FactTable通常存储在哪个层次？A.数据源层（SourceLayer）B.数据集成层（IntegrationLayer）C.数据集市层（DataMartLayer）D.数据归档层（ArchiveLayer）解析：FactTable是数据仓库的核心，存储业务事实数据，通常位于数据集成层。数据源层是原始数据，数据集市是面向特定业务域的简化视图，归档层用于历史数据存储。4.下列哪种索引机制最适合用于数据仓库中的宽表（WideTable）？A.B+树索引B.哈希索引C.全文索引D.位图索引解析：宽表（宽行）中列数众多，位图索引通过位向量存储每个值的出现状态，适合高基数列的快速聚合查询，而B+树索引适用于精确查找，哈希索引依赖哈希函数，全文索引用于文本检索。5.在数据仓库中，下列哪种指标最适合用于度量数据加载的效率？A.数据完整性（DataIntegrity）B.延迟加载时间（DelayTime）C.吞吐量（Throughput）D.并发用户数（Concurrency）解析：吞吐量（Throughput）衡量单位时间内处理的数据量，直接反映加载效率。数据完整性是质量指标，延迟加载时间衡量速度但非效率，并发用户数与加载效率关联性弱。6.在数据仓库中，下列哪种分区策略最适合用于按时间维度存储数据？A.范围分区（RangePartitioning）B.哈希分区（HashPartitioning）C.散列分区（HashPartitioning）D.全表分区（FullTablePartitioning）解析：范围分区按时间范围（如年/月）划分数据，适合时间序列分析。哈希/散列分区基于键值随机分配，全表分区无分区逻辑。7.在数据仓库中，下列哪种技术可用于优化大规模数据的聚合查询性能？A.数据压缩（DataCompression）B.索引覆盖（IndexCoverage）C.查询缓存（QueryCaching）D.星型模式优化（StarSchemaOptimization）解析：星型模式优化通过预计算汇总表（如FactlessTable）减少聚合计算量，显著提升查询性能。数据压缩节省存储，索引覆盖减少全表扫描，查询缓存加速重复请求，但均非聚合优化核心。8.在数据仓库中，下列哪种技术可用于处理数据加载过程中的重复数据问题？A.数据去重（DataDeduplication）B.数据同步（DataSynchronization）C.数据校验（DataValidation）D.数据归档（DataArchiving）解析：数据去重通过哈希算法识别并删除重复记录，解决加载问题。数据同步是实时场景需求，校验用于验证数据准确性，归档是历史数据管理手段。9.在数据仓库中，下列哪种指标可用于评估数据模型的存储效率？A.数据密度（DataDensity）B.数据冗余度（DataRedundancy）C.数据一致性（DataConsistency）D.数据完整性（DataIntegrity）解析：数据密度（每行存储的数据量占比）和冗余度（相同数据存储次数）直接影响存储效率。一致性是质量指标，完整性是准确性保障。10.在数据仓库中，下列哪种技术最适合用于实现跨多个数据源的数据整合？A.数据湖（DataLake）B.数据管道（DataPipeline）C.数据集市（DataMart）D.数据虚拟化（DataVirtualization）解析：数据管道（如Kafka/SparkStreaming）通过流式处理整合多源数据，数据湖存储原始数据，数据集市是面向业务域的简化视图，数据虚拟化提供动态数据访问接口。二、填空题（总共10题，每题2分，共20分）1.数据仓库中的维度表通常按______维度组织，以支持快速查询。答：业务解析：维度表按业务主题（如时间、地点、产品）组织，形成星型或雪花结构，便于用户按维度切片分析。2.在数据仓库中，FactTable通常包含______和维度键，用于关联维度表。答：事实度量解析：FactTable存储业务度量值（如销售额、数量）和维度外键，度量值是分析核心，外键用于连接维度表。3.数据仓库中的数据加载通常采用______或增量加载方式，以减少全量加载开销。答：全量加载解析：数据仓库加载分为全量（初始构建）和增量（日常更新），选择方式取决于数据更新频率和业务需求。4.在数据仓库中，位图索引适用于______基数列的快速聚合查询。答：低解析：位图索引通过位向量存储每个值的出现状态，适合低基数（重复值多）列的AND/OR条件查询，高基数列（唯一值多）性能反降。5.数据仓库中的数据清洗通常包括______、去重和格式转换等步骤。答：异常值检测解析：数据清洗流程包括异常值识别与处理、重复数据删除、数据类型转换等，确保数据质量。6.在数据仓库中，数据分区通常按______维度进行，以提升查询性能。答：时间解析：时间分区是最常见的分区方式（如按年/月），便于历史数据管理，也可按业务键（如产品/地区）分区。7.数据仓库中的ETL工具通常包含______、转换和加载三个核心阶段。答：抽取解析：ETL流程依次为抽取（从源系统获取数据）、转换（清洗和计算）和加载（写入目标仓库），是数据仓库构建的基础。8.在数据仓库中，数据一致性通常通过______和参照完整性约束保证。答：主键约束解析：数据一致性依赖主外键约束（保证关联关系）、唯一约束（避免重复值）等，参照完整性确保外键引用有效。9.数据仓库中的数据模型通常采用______或雪花模型，以优化查询性能。答：星型解析：星型模型（FactTable+维度表）结构简单，查询效率高；雪花模型（维度表进一步规范化）虽然节省存储但查询路径长。10.数据仓库中的数据加载性能优化通常通过______和并行处理实现。答：索引预分区解析：加载优化手段包括预分区表（减少数据移动）、并行加载（多线程处理）、批量插入（减少IO开销）等。三、判断题（总共10题，每题2分，共20分）1.数据仓库中的数据加载通常采用实时加载方式，以确保数据时效性。×解析：数据仓库加载以批处理（全量/增量）为主，实时加载（如数据集市）较少，因成本高且非典型场景。2.数据仓库中的FactTable可以存储非数值型度量值，如文本或日期。√解析：FactTable度量值可以是数值（金额）、日期（时间戳）或文本（如订单状态），只要能量化分析即可。3.数据仓库中的维度表通常包含大量重复数据，因此适合使用哈希索引。×解析：维度表数据重复率高（如产品名称），哈希索引不适合高重复列，B+树或位图索引更优。4.数据仓库中的数据清洗通常在ETL的转换阶段完成，以确保数据质量。√解析：ETL中的转换阶段包含数据清洗任务（如空值填充、异常值修正），是保证数据仓库质量的关键环节。5.数据仓库中的数据分区通常按业务键进行，以提升查询性能。×解析：数据分区通常按时间维度（如年/月）或高基数业务键（如产品ID），但时间分区更常见，因历史分析需求大。6.数据仓库中的数据模型必须严格遵循第三范式，以避免数据冗余。×解析：数据仓库模型（星型/雪花）通常牺牲范式（如第一范式）以优化查询性能，冗余是可接受的，只要通过聚合计算弥补。7.数据仓库中的数据加载通常采用增量加载方式，以减少存储压力。√解析：增量加载仅处理新变化数据，减少全量加载的存储和计算开销，是数据仓库日常更新的主流方式。8.数据仓库中的数据索引通常覆盖所有查询条件，以提升性能。×解析：索引覆盖仅适用于常用查询列，全表索引（如覆盖所有列）会降低加载效率且无实际性能提升。9.数据仓库中的数据模型必须支持所有业务场景，以避免重复开发。×解析：数据仓库模型应按业务域分步建设（如先核心再扩展），过度设计（支持所有场景）会导致复杂性和维护成本过高。10.数据仓库中的数据加载性能优化通常通过数据压缩实现，以减少存储需求。×解析：数据压缩主要节省存储空间，对加载性能影响有限，性能优化更依赖分区、并行和缓存技术。四、简答题（总共4题，每题4分，共16分）1.简述数据仓库中星型模型与雪花模型的优缺点。答：-星型模型：优点是查询效率高（结构简单）、开发成本低；缺点是维度表冗余（重复属性）、扩展性差（新增维度需修改Fact）。-雪花模型：优点是存储效率高（维度表规范化）、扩展性好；缺点是查询路径长（多级关联）、性能较差。解析：星型模型牺牲存储冗余换取查询速度，适合分析场景；雪花模型反其道而行之，适合存储敏感或频繁变更的维度属性。2.简述数据仓库中数据清洗的主要步骤。答：-空值处理：填充默认值或删除记录；-异常值检测：通过统计方法（如3σ原则）识别并修正；-重复数据：通过唯一键或哈希算法去重；-格式转换：统一日期、数值格式等。解析：数据清洗是保证数据质量的关键，需结合业务场景选择清洗策略。3.简述数据仓库中数据加载的增量加载策略。答：-基于时间戳：记录最后更新时间，加载新数据；-基于日志：解析源系统变更日志（如MySQLbinlog）；-基于CDC工具：使用ChangeDataCapture技术（如Debezium/KafkaConnect）。解析：增量加载需确保数据唯一性（避免重复），策略选择依赖源系统特性。4.简述数据仓库中数据分区的主要方式。答：-时间分区：按年/月/日划分（最常见）；-范围分区：按数值范围（如销售额区间）；-哈希分区：按键值哈希值分配；-复合分区：结合多种维度（如按地区+时间）。解析：分区提升查询性能（数据量小）和加载效率（并行处理），选择方式需平衡业务需求和查询模式。五、应用题（总共4题，每题6分，共24分）1.某电商平台数据仓库需存储2023年全量订单数据，表结构如下：FactTable：Order_Fact（OrderID,CustomerID,ProductID,OrderDate,Amount）维度表：Customer_Dim（CustomerID,Name,Region）假设订单数据按月分区，请设计ETL流程实现增量加载。答：-抽取：从ODS系统按月抽取增量订单日志（如按OrderDate范围）；-转换：2.校验CustomerID在Customer_Dim中存在，否则关联默认值；3.计算Amount（如原价折扣）；4.填充OrderDate为空值时使用当前日期；-加载：5.对Order_Fact表按OrderDate范围分区插入；6.使用并行加载（如Spark4核）加速写入；7.加载后验证主键唯一性。解析：增量加载需确保数据完整性（关联维度表）和时效性（分区插入），并行加载提升效率。8.某金融机构数据仓库需分析2024年Q1信贷业务数据，表结构如下：FactTable：Loan_Fact（LoanID,CustomerID,Amount,InterestRate,IssueDate）维度表：Loan_Dim（LoanID,ProductType,BranchID）假设数据按产品类型分区，请设计查询优化方案。答：-索引优化：对Loan_Fact的IssueDate和ProductType创建复合索引；-分区裁剪：查询条件包含ProductType时仅扫描对应分区；-星型预聚合：创建FactlessTable存储ProductType+BranchID的汇总指标；-查询缓存：对高频分析（如按ProductType统计Amount）启用缓存。解析：优化需结合数据特征（分区、索引）和查询模式（聚合、条件过滤），预聚合可大幅减少计算量。9.某零售企业数据仓库需处理2023年全量销售数据，表结构如下：FactTable：Sales_Fact（OrderID,ProductID,Quantity,Price,SaleDate）维度表：Product_Dim（ProductID,Category,Brand）假设数据按Brand分区，请设计数据清洗方案。答：-重复数据：通过OrderID+ProductID+SaleDate组合检测重复，删除旧记录；-异常值：Quantity>1000或Price<0为异常，标记或删除；-格式统一：Price转为数值型（去除货币符号），SaleDate转为标准格式；-维度关联：检查ProductID在Product_Dim中存在，缺失的关联默认值。解析：清洗需结合业务逻辑（如零售场景的销量上限）和维度完整性，确保数据可用性。10.某电信运营商数据仓库需整合2024年用户通话数据，表结构如下：FactTable：Call_Fact（CallID,UserID,Duration,CallType,CallDate）维度表：User_Dim（UserID,PlanType,Region）假设数据按CallDate范围分区，请设计数据加载策略。答：-分区加载：按CallDate范围（如每日分区）并行加载；-并行处理：使用SparkDataFrame按UserID分桶（如100桶）；-错误处理：加载失败记录写入BadDataTable，后续人工审核；-性能监控：跟踪加载耗时和资源使用率，优化数据倾斜。解析：加载策略需平衡性能（并行、分区）和容错（错误记录），电信场景数据量大需关注资源分配。【标准答案及解析】一、单选题1.B2.B3.B4.D5.C6.A7.D8.A