2026年云服务器监控系统搭建教程

2026/07/102026年云服务器监控系统搭建教程汇报人：技术培训部目录监控系统基础认知核心监控架构设计数据采集层搭建数据存储与处理可视化展示平台告警机制配置实战案例与最佳实践01020304050607监控系统基础认知01为什么需要监控系统故障快速定位从小时级排查缩短至分钟级定位，减少业务损失性能瓶颈发现提前识别资源瓶颈，避免系统崩溃成本优化依据基于真实负载数据调整资源配置，降低云成本服务质量保障通过SLA指标监控，确保业务承诺兑现典型场景警示某电商平台因未监控数据库连接池，大促期间连接耗尽导致服务不可用，损失超百万元监控系统核心指标体系基础设施层应用层·核心关注业务层核心资源指标CPU使用率内存使用率磁盘I/O网络流量系统状态指标系统负载进程状态文件描述符数量性能核心指标请求响应时间吞吐量错误率用户体验第一要素系统承载能力稳定性关键指标依赖组件指标数据库连接数缓存命中率消息队列积压交易运营指标订单量支付成功率用户活跃度流程转化指标核心业务流程完成率转化漏斗监控原则：从基础设施到业务应用，层层递进，形成完整的监控链条主流监控技术栈对比技术栈核心组件适用场景学习成本Prometheus+GrafanaPrometheus、Grafana、Alertmanager云原生环境、Kubernetes集群中等ZabbixZabbixServer、Agent传统服务器、混合环境较低ELKStackElasticsearch、Logstash、Kibana日志分析、复杂查询较高DatadogSaaS平台快速部署、多云环境低选型建议：2026年云原生环境首选Prometheus生态，传统环境可考虑Zabbix，预算充足可评估商业方案核心监控架构设计02监控系统整体架构1数据采集层负责从各类数据源收集指标数据↓2数据传输层通过推或拉模式将数据传输至存储层↓3数据存储层时序数据库存储海量监控数据↓4展示与告警层可视化展示与智能告警通知数据流向采集端↓传输通道↓存储↓查询/告警设计原则高可用可扩展低延迟易维护Prometheus架构深度解析PrometheusServer核心服务，负责数据采集、存储、查询Exporters各类数据导出器，如NodeExporter、MySQLExporterPushgateway支持短生命周期任务的指标推送Alertmanager告警路由、去重、分组、通知数据模型指标名称http_requests_total标签（Labels）{method="GET",status="200"}指标名称+标签构成唯一时序数据查询语言PromQL提供强大的数据查询与聚合能力存储机制TSDB本地TSDB存储，支持远程存储集成高可用架构设计PrometheusServer宕机导致实时数据采集中断，监控数据丢失，无法追溯故障时段指标Alertmanager不可用告警通道失效，异常无法及时通知运维人员，延误故障响应时机存储故障历史监控数据丢失，无法分析趋势、容量规划及故障根因定位双实例部署两个Prometheus实例独立采集相同目标，互为热备份，单点故障自动切换联邦架构层级化部署，边缘节点就近采集，中心节点聚合全局视图，降低网络依赖Alertmanager集群多实例组成Gossip集群，告警去重分发，任意节点故障不影响告警送达远程存储集成Thanos、Cortex等组件，实现跨地域长期存储与全局查询高可用数据采集层搭建03NodeExporter部署与配置4部署步骤3关键配置项9100默认端口部署步骤下载对应系统版本的NodeExporter二进制文件解压并移动至系统目录，如

/usr/local/bin/创建systemd服务文件，配置开机自启启动服务，默认监听端口9100关键配置项--web.listen-address指定监听地址与端口--collector.filesystem.mount-points-exclude排除特定挂载点--dev.device-exclude排除特定网络设备验证方式9100端口访问路径http://服务器IP:9100/metrics查看指标输出验证部署成功应用层指标采集MySQLMySQLExporterRedisRedisExporterNginxstub_status+ExporterJava应用Micrometer库自定义应用客户端库暴露端点数据库监控MySQL监控连接数、查询性能、复制状态Redis监控内存使用、命中率、键空间中间件监控Nginx启用stub_status模块，采集请求统计Java应用集成Micrometer库，暴露JVM、线程、HTTP请求指标最佳实践/metrics应用指标端点统一使用

/metrics

路径，便于服务发现与管理Prometheus配置详解global|scrape_configs|alerting|rule_filesjob_name：定义采集任务名称标识targets：指定被监控节点地址列表labels：附加标签用于分组筛选scrape_configs:-job_name:

'node-exporter'static_configs:-targets:['0:9100','1:9100']labels:env:

'production'Consul服务注册中心自动发现Kubernetes容器编排平台原生集成DNS域名解析动态目标获取动态目标管理·自动扩缩容适配数据存储与处理04Prometheus本地存储机制存储引擎TSDB压缩比10:1分块周期2小时默认保留15天43GB每日样本数

×

单样本大小

×

保留天数100万指标/分钟

×2字节

×15天≈43GB存储容量估算示例存储特点时序数据库（TSDB）专为时序数据优化，写入性能极高数据压缩（Gorilla算法）采用FacebookGorilla压缩算法，压缩比达10:1数据分块（2小时/块）每2小时一个数据块，便于管理与清理保留周期（默认15天）默认15天，可通过参数调整注意事项本地存储不适合长期数据保存，需集成远程存储方案长期存储方案：Thanos架构ThanosSidecar与Prometheus同部署，上传数据至对象存储ThanosStore查询对象存储中的历史数据ThanosQuery统一查询入口，聚合多个数据源ThanosCompact数据压缩与降采样无限存储周期依赖对象存储（如S3、OSS），实现监控数据的永久保留全局查询视图跨集群数据聚合，统一分析多地域监控数据高可用查询多副本部署，保障查询服务持续可用生产环境推荐方案Thanos是实现Prometheus长期存储与全局查询的主流方案✓

监控数据长期保存✓

全局统一分析能力PromQL查询语言实战2基础查询4聚合函数3典型示例基础查询node_cpu_seconds_total查询CPU时间指标rate(node_cpu_seconds_total[5m])计算5分钟内的速率常用聚合函数sumby(instance)按实例分组求和avgby(job)按任务分组求平均max最大值min最小值典型查询示例CPU使用率100-(avgby(instance)(rate(node_cpu_seconds_total{mode="idle"}[5m]))*100)内存使用率(1-node_memory_MemAvailable_bytes/node_memory_MemTotal_bytes)*100磁盘使用率(1-node_filesystem_avail_bytes{fstype!="tmpfs"}/node_filesystem_size_bytes)*100可视化展示平台05Grafana安装与基础配置3种安装方式3000默认端口3大配置模块安装步骤根据操作系统选择安装方式（YUM、APT、二进制）启动Grafana服务，默认端口3000首次登录使用默认账号admin/admin，立即修改密码数据源配置添加Prometheus数据源配置访问地址，如

http://prometheus:9090测试连接，确保数据源可用组织与权限创建组织，隔离不同业务监控配置团队权限，实现细粒度访问控制设置匿名访问（可选，用于公开展示大屏）Dashboard设计原则设计原则分层展示：从概览到详情，逐层深入关键指标优先：核心指标置于显眼位置合理分组：相关指标归类展示，便于关联分析颜色语义化：绿色正常、黄色警告、红色严重Dashboard类型概览Dashboard：全局健康状态，关键指标一览资源Dashboard：CPU、内存、磁盘、网络详细数据应用Dashboard：应用性能指标，如请求量、响应时间业务Dashboard：业务指标，如订单量、用户数模板变量$instance$job使用变量实现Dashboard复用，动态切换监控目标快速传递关键信息优秀的Dashboard设计能在第一时间呈现核心数据常用监控面板实战服务器资源监控面板CPU使用率时序图展示实时与历史趋势内存使用率仪表盘展示当前值与阈值磁盘使用率柱状图展示各分区使用情况网络流量双轴图展示入站与出站流量应用性能监控面板请求QPS实时请求量趋势响应时间P50、P95、P99分位数错误率HTTP4xx/5xx错误统计数据库连接池活跃连接数与等待数导入社区DashboardGrafana官方提供数千个社区Dashboard，可通过ID直接导入告警机制配置06告警规则编写告警规则是监控系统的核心价值，需精心设计rule.ymlgroups:-name:node_alertsrules:-alert:HighCPUUsageexpr:100-(avgby(instance)(rate(node_cpu_seconds_total{mode="idle"}[5m]))*100)>80for:5mlabels:severity:warningannotations:summary:"CPU使用率过高"description:"实例CPU使用率超过80%"exprPromQL表达式，定义告警条件for持续时间，避免瞬时波动触发告警labels告警标签，用于路由与分组annotations告警详情，描述问题与影响Alertmanager配置详解route告警路由规则，根据标签分发至不同接收者receivers接收者配置，定义通知方式与目标inhibit_rules告警抑制规则，避免告警风暴通知渠道集成邮件通知企业微信钉钉SlackPagerDuty告警分组与去重group_by按标签分组，同类告警合并通知group_wait首次等待时间，收集同组告警group_interval同组新告警发送间隔告警分级与响应策略级别严重程度响应时间通知方式示例场景P0致命立即响应电话+短信+IM服务完全不可用P1严重15分钟内短信+IM核心功能异常P2警告1小时内IM+邮件性能下降P3提示24小时内邮件非关键告警告警收敛策略：同类告警合并设置告警静默期依赖关系抑制告警触发值班人员确认问题定位修复处理复盘总结实战案例与最佳实践07案例：电商大促监控保障监控准备实时监控重点应急预案容量评估根据历史数据预估流量峰值，扩容监控系统关键指标梳理订单量、支付成功率、库存、物流状态告警阈值调整大促期间临时调高阈值，避免误报值班安排24小时轮值，明确升级流程流量趋势实时监控QPS，识别异常流量资源水位CPU、内存、网络带宽使用率业务漏斗访问→加购→下单→支付转化率第三方依赖支付网关、物流接口响应时间1降级开关快速关闭非核心功能，释放系统资源2限流策略控制请求速率，保护后端服务稳定3熔断机制故障服务自动隔离，防止级联失败确保核心业务可用案例：微服务架构监控实践服务网格监控集成Istio，自动采集服务间调用指标分布式追踪使用Jaeger或Zipkin，追踪请求全链路日志聚合ELKStack集中管理各服务日志业务指标埋点关键业务流程自定义指标核