数据分析与数据可视化方法论（2026课件）

DATAANALYTICS&VISUALIZATION·2026数据分析与数据可视化方法论实战课件从CRISP-DM方法论到AI智能体分析·从图表选型到数据叙事含流程图、脑图、鱼骨图、仪表盘设计与2026最新行业数据7大模块·约70页·适用：数据分析师/BI工程师/产品与运营/高校教学COURSEOUTLINE·课程地图本课程要解决的七个问题01为什么数据分析成为必备能力市场规模、价值回报、2026趋势02一个分析项目到底怎么做CRISP-DM/SEMMA/分析成熟度03AI改变了哪些分析方法增强分析、AgenticAnalytics、NL2SQL04什么数据该用什么图对比/趋势/构成/关系/分布五类选型05仪表盘怎么让人5秒看懂布局原则、KPI、交互、F型视觉流06怎么把数据讲成一个故事DataStorytelling、高亮、注释、行动建议07工具怎么选、坑怎么避Tableau/PowerBI/D3/Plotly/Grafana对比·实战案例·避坑清单学习路径：建立动机→构建认知→观察过程→主动尝试→迁移应用01·为什么重要全球BI市场2026年约400亿美元，仍以近9%年复合增长扩张商业智能与分析市场规模（十亿美元）·多机构口径合并示意三个关键数字~410亿2026年全球BI市场规模（美元）8.7%2026–2031年复合年增长率（CAGR）~38%北美占全球BI软件份额，亚太增长最快来源：MordorIntelligence2026；StraitsResearch2026；XtendedView2026。数值为多机构口径合并示意，非单一权威序列。01·为什么重要用AI系统化接入分析的团队，洞察速度提升40–70%AI在五个分析工作流中带来的可量化收益60–80%分析师原本花在数据清洗上的时间占比，AI自动化后大幅压缩40–70%系统化引入AI后，团队从问题到洞察的整体提速NL2SQL自然语言直接查询数据库，日常问题不再依赖分析师写SQLAutoML自动训练和调优预测模型，无需ML工程师介入主动异常检测与告警从人工盯盘变为主动推送这五个工作流分别是：①自然语言查询（省去写SQL）②自动化数据准备（压缩清洗时间）③嵌入式Copilot（生成DAX、报表布局、叙述摘要）④AutoML（自动建模）⑤异常检测（主动告警）来源：AIBuzz《BestAIToolsforDataAnalysts2026》；DataTerrain2026。收益区间为团队自报告口径，个体差异较大。01·为什么重要数据分析经历了四代：从静态报表到AI智能体自主调查1990s–2000s静态报表与Excel描述过去发生了什么2010sBI仪表盘与自助分析交互式探索数据2020–2024增强分析与生成式AI对话式问数与自动摘要2025–2026AgenticAnalytics智能体自主调查关键判断：2026年的前沿已从"和仪表盘对话"走到"智能体替你调查"系统不再只回答单条问题，而是能规划多步调查、执行、验证、迭代调试，独立完成分析闭环。C3AI的DataIntelligenceAgents在LiveSQLBench得分48%，超过通用大模型；蚂蚁Agentar-Scale-SQL在BIRD测试达81.67%。来源：TechieHub2026；AwesomeAgents2026（LiveSQLBench/BIRDBenchmark）。01·为什么重要Gartner：2026年数据与分析的关键趋势趋势1·智能体数据流驱动实时智能事件驱动的持续数据流让AI智能体快速执行任务。到2028年采用率从2025年不足15%大幅跃升。趋势2·网格分析（Mesh）成为标准利用结构化与非结构化数据构建全局视图，借助AI智能体与嵌入式模型推动敏捷决策。趋势3·分析与AI能力日趋融合AI已嵌入所有主流技术平台，深刻重塑业务运营模式。从"用工具分析数据"变为"系统自动产生洞察"。趋势4·非结构化数据成为信号金矿客户评论、工单、社媒、邮件中的情感与主题被LLM提取，作为特征喂入预测模型。对学习者的含义：工具会被AI替代，但"提出正确问题、判断结论可靠性、把洞察讲成行动"的能力不会过时。来源：Gartner《2026年数据分析和人工智能规划指南》《Gartner发布数据和分析重要趋势》2026-06。01·为什么重要学完这门课，你能独立完成四件事01走通一个分析项目用CRISP-DM从业务问题到部署，知道每步做什么、怎么验收、哪里会卡住。02选对图表面对对比、趋势、构成、关系、分布五类问题，能立刻选出最合适的图表并避免常见错误。03搭一个决策仪表盘按5秒法则和F型视觉流设计布局，让决策者一眼看到关键KPI和异常。04把数据讲成故事用背景—发现—建议的结构高亮一个关键点，让数据直接指向行动。不教什么：不做某款软件的按钮教程，不堆砌数学公式推导，不编造案例数据——所有市场数字均标注来源与口径。PART02数据分析方法论驱动问题：一个模糊的业务问题，怎么一步步变成可执行的结论？本章拆解CRISP-DM六阶段、分析成熟度金字塔、数据预处理与因果推断。方法地图→CRISP-DM流程→六阶段详解→成熟度金字塔→特征工程→因果推断与鱼骨图02·方法论·CRISP-DMCRISP-DM：跨行业数据挖掘标准流程的六个阶段1业务理解BusinessUnderstanding2数据理解DataUnderstanding3数据准备DataPreparation4建模Modeling5评估Evaluation6部署Deployment三个关键认知：①不是线性瀑布阶段间反复回溯：建模发现数据不够，要回到数据准备；评估不过，要回到业务理解重定义问题。②业务理解占比最重新手一上来就建模，老手先花40%时间在业务问题和成功标准上。问题错了，后面全错。③部署才产生价值模型不上线、不被业务用，等于没做。CRISP-DM提醒：价值通过部署和用户采纳实现。来源：CRISP-DM2.0；Udacity《CRISP-DMExplained》2025；IreneBurresiGlossary2026。02·CRISP-DM·阶段1业务理解：先写清"决策什么"，再谈数据这一步要回答的三个问题①决策者是谁？他要做什么决定？②成功的业务指标是什么？（不是"做个模型"）③资源、约束、成本、风险各是什么？交付物·项目章程：目标、范围、成功标准·分析问题陈述：一句话写清要回答什么·资源与约束清单常见坑"老板要一个用户流失预测模型"——这不是问题，这是解法。真正的问题是："我们要不要给高流失风险用户发优惠券？预算上限多少？"来源：BusinessAnalyticswithVisualisation·CRISP-DMMethodology2026。02·CRISP-DM·阶段2数据理解：先摸清楚手里有什么，再谈建模要做的探查·数据字典：字段含义、类型、取值范围·数据量与时间范围：多少行、覆盖多久·质量初查：缺失率、异常值、重复记录·分布画像：关键指标的均值/分位数·初步假设：哪些变量可能相关交付物·数据质量报告（缺失率、异常清单）·关键变量分布概览图·初步发现与数据局限说明·记录：哪些数据根本拿不到关键判断数据理解阶段就要回答：现有数据能否支撑业务问题？不能就赶紧回去找业务方，不要等到建模才发现缺数据。来源：CRISP-DM数据理解阶段定义；清华大学出版社《数据挖掘与机器学习》2025。02·CRISP-DM·阶段3数据准备：吃掉分析师60–80%时间的阶段数据清洗→数据集成→数据变换→数据规约每步做什么·清洗：处理缺失值、异常值、重复、不一致格式·集成：合并多源数据、对齐主键、处理冲突·变换：标准化/归一化、分箱、编码类别变量·规约：特征选择、降维、抽样，去掉噪声列2026年变化·AI自动化数据准备正在压缩这部分时间·LLM可以自动识别表结构、生成清洗代码·但数据质量判断仍需人来兜底：错的清洗比不清洗更危险·记住：GarbageIn,GarbageOut来源：AIBuzz2026（60–80%清洗时间）；CRISP-DM数据准备阶段。02·CRISP-DM·阶段4–6建模、评估、部署：从"指标好看"到"业务用起来"4建模Modeling·选算法：根据问题类型和数据量·划分训练/验证/测试集·调参与交叉验证·多模型对比，不迷信单一算法·2026：AutoML自动完成大部分选择5评估Evaluation·不止看准确率：业务指标对齐·误报/漏报的业务代价分别多少？·在测试集上是否过拟合？·可解释性：业务方敢用吗？·回到业务理解：问题定义需要调整吗？6部署Deployment·模型上线为API或报表·写文档与使用说明·监控：数据漂移、性能衰减·用户培训与采纳跟踪·没有采纳=项目失败来源：CRISP-DM；IreneBurresiGlossary2026（价值通过部署与用户采纳实现）。02·方法论·横向对比三种主流流程：CRISP-DM、SEMMA、KDD的取舍维度CRISP-DMSEMMA（SAS）KDD步骤业务理解→数据理解→准备→建模→评估→部署抽样→探索→修改→建模→评估选择→预处理→变换→挖掘→解释评估侧重业务落地与部署，跨行业通用统计建模严谨性，SAS生态学术研究，知识发现过程适用企业商业分析项目首选SAS用户、统计建模任务学术论文、数据挖掘研究结论行业最广泛采用，业务人首选更工具特定，业务理解较弱学术前身，偏研究不偏落地来源：Udacity2025；IreneBurresiGlossary2026；DocsityHPDARevision2026。02·方法论·分析成熟度分析金字塔：你在哪一层，决定你能回答什么问题处方性分析Prescriptive应该怎么做？优化策略与自动决策预测性分析Predictive将会发生什么？预测模型与机器学习诊断性分析Diagnostic为什么发生？下钻、归因、根因分析描述性分析Descriptive发生了什么？报表、仪表盘、KPI汇总大多数企业卡在第二层（描述+简单诊断）。往上走每一层都需要更成熟的数据基础、更严谨的方法和更懂业务的分析人。分析成熟度四级模型为行业通用框架；描述/诊断/预测/处方分层定义。02·方法论·因果推断相关不等于因果：六类常见误判的鱼骨图Root-causeanalysis·LLMservinglatencyregression混淆变量选择偏差反向因果样本量不足数据窥探测量误差冰淇淋与溺水正相关真正原因：气温升高不控制混淆就错只调查活跃用户幸存者偏差拒访者偏差救护车多事故多？可能是事故多才派车需时间先后识别10个点看出的趋势可能只是随机波动需显著性检验跑1000个变量对比总有几个碰巧相关需样本外验证自报收入偏差问卷设计偏差测量噪声扭曲相关p99latency+38.0%PART03AI时代的分析方法驱动问题：当AI能写SQL、能建模、能自动出报告，分析师还剩什么？本章讲增强分析、AgenticAnalytics、NL2SQL、AutoML与风险治理。增强分析→智能体分析→自然语言问数→AutoML→异常检测→风险与治理03·AI分析·演进从增强分析到智能体分析：AI不再只是助手增强分析AugmentedAnalyticsAI嵌入分析流程，自动推荐图表、生成叙述、标注异常。人主导，AI辅助：你问一个问题，它帮你更快找答案。智能体分析AgenticAnalyticsAI智能体自主规划多步调查：拆问题、写SQL、跑验证、迭代调试。人定目标和验收标准，AI独立完成中间过程。2026年的真实水平48.0%C3AI智能体在LiveSQLBench得分，超过通用大模型81.67%蚂蚁Agentar-Scale-SQL在BIRD测试集准确率多步从单轮问答到规划—执行—验证—调试闭环来源：TechieHub2026；AwesomeAgents2026（LiveSQLBench/BIRDBenchmark）。03·AI分析·五大工作流AI正在改变五个分析工作流NL2SQL自然语言直接查数据库。业务方自己问"上月华东复购率"，不再排队等分析师写SQL。数据准备自动识别表结构、生成清洗代码、对齐字段。把60–80%的清洗时间压缩到小时级。Copilot在BI工具里内嵌助手：生成DAX公式、推荐图表布局、自动写数据叙述摘要。AutoML自动特征选择、算法选择、超参调优、交叉验证。不需要ML工程师也能建预测模型。异常检测系统主动监控指标，发现异常自动告警。不再需要人盯着仪表盘等问题发生。风险提醒生成式AI对坏数据也会自信输出。数据质量是部署成败的首要因素——垃圾进，垃圾出。来源：AIBuzz2026；DataTerrain2026；Sisense2026。03·AI分析·非结构化数据LLM正在把评论、工单、社媒变成结构化信号传统分析只看结构化数据·订单金额、用户ID、转化率、留存率·存在于数据库表中，行数有限·只能回答"数字怎么变了"LLM开启的新信号源·客户评论、客服工单、社媒提及、邮件·LLM提取情感、主题、意图，作为特征·喂入预测模型，回答"为什么变"一个具体例子营销运营经理不再只看到"流失概率0.83"，而是看到自然语言解释：为什么这个客户有风险、可能该做什么。客户评论中反复出现的"配送慢"被提取为情感特征，和复购率下降形成可解释的关联。来源：PecanAI《HowLLMsandDataAnalyticsWorkTogether》2026-07。03·AI分析·治理用AI分析之前，先想清楚三个风险01数据质量是命门传统分析遇到坏数据会报错；生成式AI会自信地给你一个听起来合理的答案。脏数据进，错误洞察出，还更难被发现。02幻觉与编造来源LLM可能引用不存在的数据、生成看似专业实则错误的结论。关键数字必须回到原始数据源验证，不能照单全收。03可解释性缺失黑箱模型给出的建议，业务方敢不敢用？高风险决策（贷款、医疗、人力）需要可解释方法和人工复核。来源：DataTerrain2026；PecanAI2026。PART04数据可视化原理驱动问题：面对一个数据集，第一反应该画什么图？本章讲视觉感知、色彩、字体、图表选型与常见误区。感知原理→色彩字体→图表决策树→五类图表详解→高级图表→常见误区04·可视化·决策树图表选型脑图：先问"我要回答什么问题"选什么图M1比较类别3M3构成占比3M5数据分布3M2时间趋势3M4变量关系3M6流程转化3条形图柱状图排名对比饼图≤5类堆叠柱树图直方图箱线图小提琴折线图面积图双轴散点图气泡图相关性漏斗图桑基图瀑布04·可视化·基础可视化不是装饰，而是认知放大器三个核心价值①看见模式表格里看不出的趋势、异常、聚集，一图了然。②加速判断人脑处理图像比表格快数万倍，决策窗口从分钟到秒。③降低沟通成本一张好图胜过一千字解释，跨部门、跨层级都能读懂。一条铁律图表是对问题的回答，不是数据的展示。先想清楚"我要回答什么问题"，再选图表。反过来做，就是在画装饰图。来源：基于EdwardTufte可视化经典理论与ChartGen2025图表选择指南。04·可视化·感知原理人眼最先注意到什么？理解前注意属性前注意属性（preattentiveattributes）：视线扫过画面瞬间就能捕捉的视觉信号——颜色用高饱和色高亮关键点，灰色化其他数据长度/大小条形长度比角度更精确，优先用条形而非饼图位置离群点一眼可见，适合散点图发现异常形状/方向趋势上升下降、异常拐点，眼睛自动追踪设计推论·颜色是聚光灯，不是装饰：一张图里只有一个关键点用强调色，其余用灰蓝。·不要同时用太多前注意属性——眼睛会过载，反而找不到重点。·格式塔原则：相近、相似、连续的元素会被自动归为一组，利用它组织信息。来源：Ware《VisualThinkingforDesign》；DataCampDashboardDesign2025。04·可视化·色彩配色用60-30-10法则：一张图不超过三种角色60%·中性色背景与基线浅灰白底、灰色辅助线、非关键数据用灰蓝30%·主数据系列主要数据系列、坐标轴、标题10%·强调色只标一个关键点色彩三不要×不要彩虹配色（红橙黄绿蓝紫堆满）×不要红绿色同时编码（色盲不友好）×不要高饱和色铺满整图×不要用颜色编码超过5–6个类别语义化用色红=警示/下降/未达标，绿=达标/正向，蓝=中性信息。跨页保持一致，不要这页红是涨、下页红是跌。来源：OnlineITGuruDataStorytelling2026；DomoDashboardBestPractices2026。04·可视化·对比类比较类别：条形图几乎总是第一选择什么时候用·比较不同类别的数值大小·类别名较长时用横向条形图·按数值排序，不要按字母序·类别超过10个考虑截断或合并不要这样做×不要用3D效果遮挡数值×不要截断Y轴制造虚假差异×不要每根柱子不同颜色（除非高亮某根）示意数据，仅占位。来源：StatisticsFundamentals2026；ZohoAnalytics2026。04·可视化·趋势类看时间变化：折线图是趋势的母语什么时候用·时间序列趋势、增长率、季节性·连续数据点有逻辑顺序·强调量级变化用面积图·折线不超过5–6条，否则糊成一团标注技巧在关键拐点加注释："促销活动上线"、"价格调整"。让读者知道为什么变。示意数据，仅占位。来源：ZohoAnalytics2026；ThoughtSpot2026。04·可视化·构成类看构成：饼图谨慎用，堆叠柱和树图更实用饼图·类别≤5个时用·看一个占绝对多数的部分·类别多了就用条形图·不要3D饼图堆叠柱状图·同时看总量和内部构成·随时间变化的构成·分系列≤4层·100%堆叠看比例变化矩形树图·类别很多时看层级占比·面积编码数值大小·适合商品分类、市场份额·PowerBI/Tableau均支持常见错误·饼图切8块以上——人眼对比角度极不精确，改成条形图·每个饼图扇区都标百分比但没有总量——读者不知道基数·用饼图比较两个时间点的构成——并排两个饼很难比，用堆叠柱来源：ChartGen2025；Luzmo2026；MakeChart2026。04·可视化·关系与分布关系用散点，分布用直方和箱线关系类：散点图/气泡图·两个数值变量的关系：时间vs转化率、预算vs触达·一眼看正相关、负相关、无相关、离群点·第三个变量用气泡大小编码·第四个变量用颜色编码（按类别）·超过1000个点考虑透明度或抽样分布类：直方图/箱线图·直方图：看单个变量的分布形状（正态/偏态）·箱线图：跨组对比中位数、四分位、离群值·小提琴图：分布密度+箱线信息·Q-Q图：检验是否符合正态分布·不要用饼图看分布——类别不是占比来源：StatisticsFundamentals2026；WorkforceLibreTexts2026。04·可视化·高级图表高级图表：在对的场景才用，不要炫技漏斗图转化流程：访问→注册→激活→付费。每步流失多少。桑基图流向与流量：用户从哪来、到哪去、路径权重。瀑布图增减分解：利润怎么从100变到80，哪项拖后腿。热力图矩阵强度：星期×小时活跃度、用户×功能使用。使用原则·能让读者5秒内看懂，才是合适的图；看不懂就是过度设计·高级图要配文字注释解释怎么读，不要假设读者天生会·没有真实业务场景时，不要为了"好看"硬塞一张桑基图来源：gen_svg_charts支持funnel/sankey/waterfall/matrix_heat等；PowerBI/Tableau均内置。04·可视化·误区五个最常见的可视化错误①截断Y轴夸大差异柱图从90开始，让95和100看起来差一倍。除非有明确标注。②3D图表遮挡数据3D饼图、3D柱图让人无法精确读取数值，投影扭曲比例。③饼图切太多块超过5块就看不清，改成横向条形图按值排序。④双Y轴误导关联两条线碰巧同步就暗示因果。需要时必须标注两个轴不同量纲。⑤颜色彩虹堆砌每根柱不同颜色，眼睛找不到重点。统一色，只高亮关键点。自检清单Y轴从零开始？没有3D？类别≤5？颜色统一？有标题和来源？来源：基于公开可视化设计原则；MicrosoftExcel图表最佳实践2026。PART05仪表盘与数据叙事驱动问题：怎么让人5秒看懂仪表盘，并把数据讲成一个行动？本章讲布局原则、KPI设计、交互与DataStorytelling。5秒法则→F型视觉流→KPI卡片→三类仪表盘→交互→数据叙事结构05·仪表盘·分类三类仪表盘服务三种决策场景战略仪表盘受众：高管/领导层频率：周/月审视重点：北极星KPI、目标达成、趋势方向特点：少而精，不钻细节，回答"大方向对不对"运营仪表盘受众：一线运营/值班团队频率：实时/每日重点：异常告警、SLA、当前状态特点：实时刷新，异常红色高亮，回答"现在有没有问题"分析仪表盘受众：分析师/产品经理频率：按需探索重点：下钻、细分、根因分析特点：交互丰富，多维度筛选，回答"为什么会这样"来源：Qualifynation2026；Domo2026。05·仪表盘·数据叙事DataStorytelling：把数据变成有开头、冲突、结尾的故事背景Context业务现状是什么？读者为什么要关心？设定基线和预期。冲突Conflict发现了什么异常、差距或机会？用数据高亮那个关键点。解决Resolution建议什么行动？预期效果是什么？谁来做、什么时候做。三条实战技巧①只高亮一个点除关键点外用灰色。颜色是聚光灯，不是装饰。②在图上直接注释标注"促销上线""价格调整"，比让读者自己猜强。③结论先于数据标题写结论"复购率下降8%"，不是"复购率分析"。来源：Basedash2026；OkunData2026；DesignInsiders2026。05·仪表盘·原则5秒法则：打开仪表盘5秒内必须抓住关键5秒读者必须抓住关键指标和异常，否则仪表盘失败设计推论·倒金字塔：最重要的KPI放顶部最显眼位置·F型视觉流：左上开始，先横扫再往下·一屏一故事：关键信息不滚屏·每个区块回答一个业务问题，不堆砌仪表盘vs报表：每个区块都要回答"所以呢？"·报表是"给你所有数据自己找"——仪表盘是"我先告诉你什么最重要"·报表适合分析人员深挖——仪表盘适合决策者快速判断来源：DomoDashboardBestPractices2026；DataCampDashboardDesign2025；MicrosoftPowerBI设计指南2026。PART06工具生态与选型驱动问题：这么多工具，我该学哪个、用哪个？本章对比BI平台、编程库、开源方案，并给选型决策。BI平台对比→编程库→开源方案→选型决策→实战案例06·工具·BI平台主流BI平台：谁该选哪个工具优势适合谁局限成本Tableau可视化探索强、图表美观、生态成熟企业级分析团队、重度可视化贵、大数据量性能一般高PowerBI微软生态集成好、性价比高、DAX强已用微软栈的企业、中端市场可视化灵活度略逊Tableau中LookerLookML建模、语义层、Google生态数据成熟度高、重语义层企业学习曲线陡、绑定BigQuery高帆软FineBI本土化、国产合规、支持国产化国内政企、金融、大型制造国际化和AI能力较弱中高Superset开源免费、可扩展、SQL友好技术团队、预算有限、定制需求需自建运维、体验一般低来源：依据GartnerMagicQuadrantBI2025与公开产品资料整理，仅供教学参考。06·工具·编程与库编程路线：Python为主，R为辅，前端库做交互Python数据栈Pandas/Polars：数据清洗Matplotlib/Seaborn：科研静态图Plotly/Dash：交互式仪表盘Streamlit：快速搭数据应用PyGWalker：拖拽式探索适用：灵活分析、可复现报告R语言ggplot2：图层语法，出版级图Shiny：交互式应用tidyverse：统计分析生态适用：统计学、学术报告、生物医学不适合：工程化部署、大数据前端可视化库ECharts：国产、图表全、文档好D3.js：最灵活、学习曲线陡Plotly.js/Vega-Lite：声明式语法适用：嵌入产品、公开网页、大屏来源：基于公开生态资料整理，2026年主流选型。06·工具·选型选型决策：四个问题帮你选对工具Q1谁在用？业务自助探索→BI工具；分析师一次性报告→Python/R；嵌入产品→前端库。Q2数据量多大？百万行以内BI足够；亿级以上需要数据库直连或Python分布式。Q3预算和IT能力？有IT团队→Superset自建；预算充足→Tableau/PowerBI；政企合规→帆软等国产。Q4需要AI能力吗？需要自然语言问数、自动洞察→选带Copilot的PowerBI/ThoughtSpot/Sigma。来源：综合Gartner2025BI平台评估与公开选型实践。07·总结·知识体系整张课件的知识地图数据分析与可视化M1方法论4M3可视化原理4M5工具生态4M2AI分析4M4仪表盘叙事4CRISP-DM业务理解因果推断成熟度模型视觉感知配色字体图表选型常见误区BI平台Python/R前端库选型决策增强分析NLQ问数智能体数据治理5秒法则KPI设计交互下钻故事结构06·实战·案例案例：电商复购率下降，怎么用数据讲清楚？①业务问题Q2复购率从32%掉到24%，老板问"怎么回事？"先别急着画图，先明确：·哪个渠道掉的？·哪类客户掉的？·是新客质量差还是老客流失？②分析过程用CRISP-DM：·数据准备：拉12个月订单·拆解：按渠道、客户分层·发现：广告投放渠道复购率腰斩·深挖：新客首单赠品变了③可视化·折线图：复购率趋势，标注4月赠品变更·条形图：分渠道复购率对比·只高亮广告渠道，其余灰色·标题写结论："广告渠道新客复购率下降12pp"④行动建议·恢复原赠品方案A/B测试·重新评估广告渠道ROI·建立复购率周监控看板·下月复盘验证效果教学案例，数据为示意。06·实战·清单交付前自检清单：10条□1.标题是结论，不是主题□2.先问"回答什么问题"再选图□3.Y轴从零开始，不截断□4.颜色统一，只高亮一个关键点□5.饼图不超过5类□6.有标题、单位、时间范围、来源□7.关键拐点有注释说明原因□8.5秒内能抓住重点□9.每个区块回答"所以呢？"□10.给了可执行建议，不只描述现象本清单综合前述各章设计原则，建议每次交付前逐项核对。PART07总结与展望回到课件开头的问题：怎么用数据讲一个可信的故事？本章串起知识体系、给出学习路线，并看未来趋势。知识体系脑图→学习路线→未来趋势→Q&A07·总结·学习路线三个月学习路线：从会画图到会讲故事第1月·基础·学Excel/Sheets图表·掌握图表选型决策树·读《用图表说话》·每天分析一个真实数据集产出：10张规范图表第2月·工具与方法·学一个BI工具（PowerBI/Tableau）·学PythonPandas+Plotly·练CRISP-DM完整流程·读《StorytellingwithData》产出：1个可交互仪表盘第3月·叙事与AI·练数据叙事：背景-冲突-解决·体验AI问数工具·做一个完整业务复盘·关注Gartner/行业报告产出：1份数据故事报告学习路线建议，可根据基础调整节奏。07·总结·未来未来3年：AI不会取代分析师，但会用AI的人会趋势一：自然语言问数成为默认入口业务人员直接用大白话问数据，AI自动生成图表。分析师从取数转向定义语义层和校验结果。趋势二：智能体自动完成分析闭环AI智能体自动监控指标、发现异常、归因、生成报告。分析师专注于问对问题和业务判断。趋势三：实时与非结构化数据融合日志、客服记录、社交媒体文本自动信号化，与业务数据实时联动，看板从周更走向秒级。你需要练的核心能力业务直觉、问题定义、结果校验、数据叙事——这些AI短期内替代不了。技术工具会换，思维方式长青。来源：GartnerTopTrends2026；SASFutureofAnalytics2026。Q&A提问建议方向：你的业务场景、数据类型、工具选择，或某个具体图表怎么画。数据不会说话，是你在替它讲一个可信的故事。谢谢观看·ThankYou01·导论·概念辨析数据分析、数据科学、数据工程，有什么区别？维度数据分析Analyst数据科学家Scientist数据工程师Engineer核心问题发生了什么？为什么？该怎么做？会发生什么？怎么自动化？数据怎么可靠地流通？主要工具SQL、Excel、BI工具、Python基础Python/R、机器学习、统计建模SQL、Python、Spark、Airflow、数仓产出报表、仪表盘、分析报告、建议预测模型、算法、实验结论数据管道、数仓、数据质量在团队中的位置连接业务与数据，做决策支持建模型，解决预测和优化问题搭基建，保证数据可用可信三者在实际团队中常交叉协作，边界并不绝对。02·方法论·数据类型四种测量尺度决定你能用什么统计方法定类Nominal类别无顺序·性别、地区·品牌、渠道能算：频数、众数不能算：平均定序Ordinal有顺序无间距·满意度1-5分·学历排名能算：中位数、百分位不能算：加减定距Interval有间距无真零·温度、IQ·年份能算：加减、均值、标准差不能算：倍数定比Ratio有真零点·收入、重量·转化率能算：所有统计量可视化：最灵活来源：Stevens测量尺度理论；社会科学与统计学通用分类。02·方法论·数据清洗数据清洗吃掉分析师60–80%的时间常见脏数据问题·缺失值：空值、NULL、占位符0/-1/999·重复记录：同一订单多条·格式不一致：日期2026/1/1vs2026-01-01·异常值：年龄200、金额-10000·拼写错误：北京vs北京市vs北京·编码不一致：性别M/F/男/女/1/0处理原则·删除前先问为什么缺失，记录比例·数值缺失用均值/中位数/模型填补，标注·文本标准化：统一大小写、去空格、映射表·异常值先查是不是错误，再决定删/保留/缩尾·清洗步骤写成可复现脚本，不要手动改Excel·每步留痕：原始数据不动，派生产物另存来源：DataEngineerThings2025；Bloomberg数据工程实践。02·方法论·评估指标模型好不好，先选对指标分类问题准确率Accuracy：整体猜对比例，但类别不平衡时骗人精确率Precision：说是的里面真的有多少（抓坏人别冤枉好人）召回率Recall：真的里面抓到多少（漏了多少坏人）F1：精确率和召回率的调和平均AUC-ROC：区分正负样本的能力，0.5等于瞎猜业务选择：漏诊严重用高召回，误报成本高用高精确回归问题MAE：平均绝对误差，直观，但对异常值不敏感MSE/RMSE：均方误差，放大异常误差，对大错惩罚重MAPE：平均绝对百分比误差，跨业务可比R²：模型解释了多少方差，0–1注意：不要只看训练集指标，必须看测试集过拟合：训练极好测试差，降低复杂度或加正则来源：scikit-learn文档；经典机器学习教材。02·方法论·A/B检验A/B检验：怎么判断新版本真的更好？核心逻辑：随机分流，A是对照组，B是实验组，控制其他变量，比较关键指标差异是否统计显著。做对的五件事①实验前定好样本量和时长②随机分流，避免样本偏差③事先定主要指标，不事后挑④看p值和置信区间，不只看均值⑤考虑新奇效应和网络效应常见错误×提前peek，看到显著就停×跑很多指标，总有一个"显著"×样本量太小就下结论×忽略分组污染（社交产品）×统计显著≠业务显著关键概念·p<0.05：差异不太可能是运气·置信区间：真实效应的范围·统计功效80%：能检出差异的概率·MDE：最小可检测效应·多重检验要校正（Bonferroni）来源：Kohavi《TrustworthyOnlineControlledExperiments》。04·可视化·字体排版排版细节：字号、字重、对齐决定专业度字号层级（投屏场景）页面大标题：28–36px区块小标题：18–22px正文/图表标签：13–15px（不低于）注释/来源：10–11px一屏内不超过4级字号排版原则·全deck用一套字体（思源黑体/宋体）·数字用等宽或表格对齐，避免错位·左对齐阅读最自然，标题可居中·行距1.5–1.7，不要挤成一团·加粗是唯一的强调手段，别用下划线·深色底用浅色字，对比≥4.5:1来源：设计系统排版规范；投影可读性标准WCAG2.1。05·叙事·结构数据叙事的三种结构：选对了才打动人金字塔结构结论先行，再给论据·第一页就给结论和建议·然后分层给数据支撑·适合高管汇报、决策场景·读者时间少，先听答案平行结构多维度并列分析·业务从几个角度拆开看·市场、产品、运营、用户·每个模块独立完整·适合季度复盘、全面报告时间线结构按发展顺序讲故事·从起点到现在发生了什么·发现问题→分析→行动→结果·适合案例复盘、项目回顾·有代入感，跟着故事走来源：BarbaraMi