2026年大数据运维上机练习题（含答案）

2026年大数据运维上机练习题（含答案）题目1：Linux命令操作与系统监控在Linux系统中（CentOS7）执行以下操作：问题1.1查看系统当前所有正在运行的进程，要求输出结果包含进程ID、进程名称、占用CPU百分比和占用内存百分比，并将结果保存到`/root/running_processes.txt`文件中。答案1.1```bashps-eopid,comm,%cpu,%mem>/root/running_processes.txt```问题1.2查看系统磁盘分区使用情况，只显示挂载点（Mountedon）和已用空间百分比（Use%），并将结果保存到`/root/disk_usage.txt`文件中。答案1.2```bashdf-h|awk'{print5,```问题1.3使用`top`命令查看系统资源占用情况，要求每3秒刷新一次，只显示前10个占用CPU最高的进程，并将输出结果重定向到`/root/top_cpu_10.txt`。答案1.3```bashtop-d3-n1-b|head-n17|tail-n10>/root/top_cpu_10.txt```这里`top-d3`表示每3秒刷新一次，`-n1`表示只刷新一次，`-b`表示以批处理模式运行，`head-n17`取前17行（去除一些无用信息），`tail-n10`取后10行即前10个进程。题目2：数据库操作（MySQL）假设已经有一个名为`employees`的数据库，其中有`employees`表和`departments`表，表结构如下：`employees`表：`emp_id`（员工ID，主键），`emp_name`（员工姓名），`dept_id`（部门ID，外键关联`departments`表的`dept_id`）`departments`表：`dept_id`（部门ID，主键），`dept_name`（部门名称）问题2.1查询每个部门的员工数量，并按照员工数量从多到少排序，结果显示部门名称和员工数量。答案2.1```sqlSELECTd.dept_name,COUNT(e.emp_id)asemp_countFROMdepartmentsdLEFTJOINemployeeseONd.dept_id=e.dept_idGROUPBYd.dept_nameORDERBYemp_countDESC;```问题2.2在`employees`表中添加一个新列`hire_date`，数据类型为`DATE`。答案2.2```sqlALTERTABLEemployeesADDCOLUMNhire_dateDATE;```问题2.3将`employees`表中`emp_id`为1001的员工的部门ID更改为5。答案2.3```sqlUPDATEemployeesSETdept_id=5WHEREemp_id=1001;```题目3：服务器性能优化假设你负责一个运行着Web服务的Linux服务器，近期发现服务器响应时间变长。问题3.1请列举可以用来排查服务器性能问题的工具和方法（至少三种）。答案3.1`top`命令：实时监控系统中各个进程的资源占用情况，包括CPU、内存等。可以通过它找出占用大量CPU或内存的进程。`vmstat`命令：用于监控虚拟内存、CPU活动、磁盘I/O等系统级别的统计信息。例如可以查看系统的交换情况、CPU使用率等。`iostat`命令：主要用于监控磁盘I/O情况，能显示磁盘的读写速度、I/O等待时间等，有助于发现磁盘性能瓶颈。`netstat`命令：可以查看网络连接状态、网络流量等信息，帮助排查网络方面的问题，如是否有大量连接处于异常状态。问题3.2如果发现是磁盘I/O成为瓶颈，你会采取哪些措施来优化？答案3.2优化磁盘调度算法：不同的磁盘调度算法适用于不同的工作负载。例如，对于随机I/O较多的应用，可以尝试将调度算法改为`noop`；对于顺序I/O较多的应用，`deadline`或`cfq`可能更合适。使用以下命令修改调度算法：```bashecho"调度算法名称">/sys/block/sda/queue/scheduler```其中`sda`是具体的磁盘设备名。使用磁盘阵列（RAID）：根据实际需求选择合适的RAID级别，如RAID0可以提高读写性能，RAID1可以提供数据冗余。对文件系统进行优化：选择合适的文件系统，例如ext4或XFS。同时，可以调整文件系统的挂载参数，如`noatime`选项可以避免每次访问文件时更新访问时间，减少磁盘I/O操作。在`/etc/fstab`中添加相应参数，然后重新挂载文件系统。迁移数据：将访问频繁的数据迁移到性能更好的磁盘上，如固态硬盘（SSD）。题目4：日志分析与处理有一个Web服务器的日志文件`/var/log/nginx/access.log`，日志格式如下：`IP地址用户名[日期时间]"请求方法请求URLHTTP协议版本"状态码响应字节数"引用页面""用户代理"`问题4.1统计访问量最高的前5个IP地址及其访问次数。答案4.1```bashawk'{print$1}'/var/log/nginx/access.log|sort|uniq-c|sort-nr|head-n5```这里`awk'{print$1}'`提取IP地址，`sort`对IP地址进行排序，`uniq-c`统计每个IP地址的出现次数，`sort-nr`按次数从多到少排序，`head-n5`取前5条记录。问题4.2找出所有状态码为404的请求的URL。答案4.2```bashgrep'404'/var/log/nginx/access.log|awk'{print$7}'````grep'404'`筛选出状态码为404的记录，`awk'{print$7}'`提取请求的URL。问题4.3计算所有请求的平均响应字节数。答