第13章 可观测性：监控、日志与追踪

第13章可观测性：监控、日志与追踪云原生架构师实战课资深云原生架构师CONTENTS监控三支柱：指标、日志、追踪Prometheus架构与Metrics采集Grafana可视化：打造数据仪表盘分布式追踪：Trace、Span与Context传播实战案例：基于SkyWalking的调用链分析课后实操任务：部署Prometheus+Grafana+Jaeger监控三支柱：指标、日志与追踪指标(Metrics)系统状态的量化数据，如CPU使用率、请求延迟等。用于实时监控和告警。日志(Logs)系统事件的文本记录，包含时间戳和上下文信息。用于问题排查和审计。追踪(Tracing)记录请求在分布式系统中的完整路径和环节耗时。用于分析延迟和依赖。核心特征对比表Prometheus架构与Metrics采集核心组件CoreComponentsPrometheusServer:负责数据采集、存储和查询核心。Exporters:采集目标系统Metrics并暴露给Server。Alertmanager:处理告警规则，发送告警通知。Pushgateway:接收短生命周期任务的Metrics推送。采集流程CollectionFlowServer通过HTTP协议定期从Targets拉取Metrics。采集到的Metrics存储在本地时序数据库(TSDB)。用户通过PromQL查询语言进行多维数据查询分析。Grafana可视化：打造数据仪表盘什么是Grafana?Grafana是一个开源的可视化和监控平台，支持多种数据源（如Prometheus、Elasticsearch、InfluxDB），可以创建丰富的图表和仪表盘。核心功能数据可视化：支持折线图、柱状图、热力图等多种类型仪表盘：多图表组合，提供系统状态的全局视图智能告警：基于数据阈值自动触发通知分布式追踪：Trace、Span与Context传播什么是分布式追踪？分布式追踪是一种用于跟踪单个请求在分布式系统中完整路径的技术，帮助定位延迟分布、依赖关系和性能瓶颈。Trace(追踪)代表一个请求在系统中的完整路径，由多个Span组成，记录了请求的端到端流转。Span(跨度)Trace的基本单元，表示服务或组件的处理过程，包含开始时间、耗时及标签信息。Context(上下文)用于在服务间传递TraceID和SpanID等元数据，确保跨服务调用的链路连续性。实战案例：基于SkyWalking的调用链分析什么是SkyWalking?开源的APM系统，支持分布式追踪、指标监控与日志分析，是微服务架构下的性能诊断利器。案例场景：性能瓶颈定位用户反馈核心业务页面加载缓慢，响应时间超过2秒，需快速定位导致延迟的具体服务或组件。关键分析步骤1.搜索TraceID定位请求链路2.分析Span耗时，锁定慢查询3.查看SQL详情与执行参数SkyWalking调用链分析界面示例避坑指南：可观测性系统常见问题排查问题1：Prometheus采集失败可能原因：Target配置错误或Exporter未部署服务器网络策略不通解决方案：检查prometheus.yml配置与Exporter状态telnet测试端口连通性问题2：Grafana连接异常可能原因：数据源URL或端口配置错误Prometheus服务未启动解决方案：核对数据源配置中的地址与端口检查防火墙策略是否允许访问问题3：分布式追踪数据缺失可能原因：服务调用链中Context传播失败部分微服务未接入Agent/SDK解决方案：检查代码中Header传递逻辑确保所有服务均正确集成探针课后实操：部署Prometheus+Grafana+Jaeger任务目标在K8s集群部署Prometheus、Grafana及Jaeger全栈组件配置Prometheus采集NodeExporter指标在Grafana中导入NodeExporter仪表盘模板部署微服务应用并接入Jaeger追踪访问应用并在JaegerUI中查看调用链操作步骤使用Helm快速部署所有核心组件配置ServiceMonitor以采集Metrics数据Grafana导入ID为1860的NodeExporter模板部署Bookinfo应用并配置JaegerSidecar访问应用后在JaegerUI搜索TraceID验证评判标准Prometheus、Grafana、Jaeger服务均正常运行Grafana仪表盘成功加载并显示监控数据JaegerUI中能清晰展示应用的调用链路拓扑本章总结可观测性三支柱指标(Metrics)实时监控、日志(Logs)排查问题、追踪(Tracing)分析路径，三者共同构建系统全景视图。监控与可视化栈Prometheus负责高效的指标采集与存储，Grafana提供丰富的仪表盘展示，实现数据到洞察的转化。分布式追踪技术利用SkyWalking或Jaege