PI数据库大数据和商务智能

熊蓓丽 OSIsoft 大数据和商务智能 -PI Integrators 组件 议程 PI与第三方应用系统传统集成方式 新的业务背景 PI Integrator for Business Analytics/SAP HANA 商务模式 客户案例 产品演示 技术路线 2 PI与第三方应用系统 传统集成方式 3 PI System Access 读取PI数据开发平台 新的业务背景 5 转换数据的价值 GE01_DT409510395_Wind SpeedQI-109GE01_DTCooling Fan-711.Feed Rate 1-8.Net Volume Coal Motor Load 02F100.TOT.EV 03LBA32CT001-2 DC.SJ.ITLoad.PWR TI-145FR2001 TI-178GE04_OS FT9001 FT9001 FR5001 AF_NOISE DC.SJ.PUETI-102 DC.ZeroDY-108DC.SJ.C1.Z3.R3.PDU1.PFGE01_A_DT FIC-14402F100fasttag FI-1510_ENG_AUX_STS GE05_Energy C1:14AT5 AC03.Air FlowFeedBin.Cmt Boiler ColdReheat Pressure B737_FG117DC.TimeLoad D-110.Tank Pressure.PV GE04_DTQI-121GE03_V_WIN DC.Rk07R DC.Srv06R GE04_EnergyTI-121FT9001 FAC.OAK.Power-Kh-Val.PV DY-131 DC.SJ.PUE fic1001.C GE02_OT GE01_DT 02F102.1HRAVGBGT001PI-111facility_output DM-05:BW.RDC.SJ.C1.Z1.R1.Rk06.S2.O03.PWRQI-111FinalProductBin.On 94:GRDIDX.ProdID Boiler-209.Fuel Gas Flowfic1001.CFR50011- 8.Net Volume Coal Motor Load 02F100.TOT.EV 3LBA32CT001-2 FI-101 bf5e1d1d-39c9-4b5b-b3d3-c2ce05fa3a26 DM-05:BW.RAT401 0_CLR_FINAL_OUT_B_TMPF506_E990339511775_Clear Sky Global Horiz GE01_DT FI-111 GE01_CONAlarmTest.Input.Float32.1 D-110.Tank Pressure.PVBoiler Feed Pump #1 Boiler-209.Fuel Gas FlowDC.Srv01R94:GRDIDX.Tr igger AC09.Power 403511195_Wind Speed DC.C2Z1.Pwr.Ripple GE01_A_DT 1-16.Net Volume CB1992_MS 0_CMP_FLOW_TOTALGE02_Energy FeedBin.Cmt DC.Zone1.Number DailyTrigger FrqPrbCost_ER AlarmTest.Input.Float32.1AQUA2-TI-201.PV DC.SJ.SiteRealTimeITLoad.PWR FT9001 FT9001 DC.Srv01R Boiler-125.Fuel Gas Volume Anacortes Refinery.Alkylation.Asset Problems B210_FG005.KPIExcursion 1 | 数据 FT9001 fasttag AT401 生产装置 Draft Pressure: -0.5 WC Stack Temp: 316 F Oxygen: 2.5% Firebox Temp: 860 F Outlet Temp: 840 F Cold Oil Velocity: 6 ft/sec 天气情况 Relative Humidity: 34% Current Temp: 85 F High: 92 F Low: 57 F Wind: 8 mph/N 2 | 信息3 | 智能 $ 总产量 能源效率 停机时间 实时决策支持业务/运营智能 6 IT AssetsAssetsAssets ScadaDCS PLCHMI SensorsGateways OT IT AssetsAssetsAssets ScadaDCS PLCHMI SensorsGateways OT 此刻 和 未来 的基础设施 7 8 工厂运营 设备数目相对少 多样化数据类型 Optimization 数据多储存在本地 分部署的资产监测 设备数目较多 数据类同 / 离散 远程监测 企业 / 云端 Internet of Things and M2M 资产、设备数目庞大 数据类型相对简单 分析 / 大数据 多位于云端 Hybrid / Cloud Environment OSIsoft Focus 实时决策 架构支持 回顾历史数据 & 预测分析 PI数据用于: 报表, 分析, 商业智能 PI 数据用于: 过程监测, 态 势感知, 工作流程 企业数据 基础设施架 构 GIS 担保 CRM 合同 市场 财务 天气信息 OMS EMS MES CMMS ERP 进化中的IT数据架构 10 1 0 大数据时代的高期望 11 85% 64% 的大企业计划实施大数据项 目。85%的项目会失败 /2014/04/the-sexiest-job-of-the-21st-century-is-tedious-and-that-needs-to-change/ 失败 成功 数据分析 数据准备 对数据进行“清理和准备”的任务， 占用项目 50-80% 的时间和成本。 大数据项目的困扰 1. 数据校准 2. 大数据量&可扩展性 3. 数据关联性（context） 4. 事态随时间变化而变化 5. 数据管理 6. 安全 7. 企业部门间的数据交流状态 这些都需要时间和$ 12 客户瓶颈：数据梳理(理解数据&合作) 13 数据分析师想要的数据库中的数据代号 连云港一号厂二车间 设备A的温度 LG_101101_3 14 数据校准 风机 1号 速度 扭矩 轴承温度 机油温度 制造商 上次维护时间 风机 2号 速度 扭矩 轴承温度 机油温度 器具因素 制造商 上次维护时间 时间 Vestas Siemens June 20, 2013 February 5, 2015 通讯中断 其他测量数据 测量时间不平均分布 量程外 传感器测量有误 不同的数据采集开 始时间 压强 流量 温度 液位 振动 油量分析 电机电流 温度记录/热谱分析 15 客户瓶颈：数据结构(以资产为中心组织数据) 16 150亿次计算，比较550万个批次（batch-to-batch comparisons） 客户瓶颈：数据计算(以“事件/批次”为中心组织数据) 生生产产批次批次 很多客户在开始前就已经放弃? 17 PI Integrator for Business Analytics 18 19 应对数据洪流 PI Asset Framework 如何能 应用于多个站点/ 场站? 保证数据分析的 前后一致性? 为不同岗位的人提供 相应所需数据? BGE003FI-11102T100 AF_FLOW3 02:T103AT401 ACEDemo.Unit1.Output TI-178 B352_W778 0_CMP_SVLV_PCT 02F104CD:F161GE04_OS Asset1.ProblemsQI-122FI-151 94:BW.RTI-101F723_E889 369512185-Temp Compressor-439.Feed Rate DC.CH.DCEFIC-172:210 FI-121AF_FLOW3 0_ENG_MODE_STSGE03_Q DY-131:166GE01_TD Boiler-334.Feed Rate GE01_DT409510395_Wind SpeedQI-109GE01_DT Cooling Fan-711.Feed Rate 1-8.Net Volume 03LBA32CT001-2 DC.SJ.ITLoad.PWR TI-145FR2001 TI-178GE04_OS FT9001 FT9001 FR5001 AF_NOISE DC.SJ.PUETI-102 DC.ZeroDY-108DC.SJ.C1.Z3.R3.PDU1.PFGE01_A_DT GE04_Status 02:F101.CTIC-181 FIC-144 02F100fasttag FI-1510_ENG_AUX_STS AQUA2-SI005.PVGE02_Energy 0_ENG_MODE_STS FI-15102T103.QDC.Z1R 0_CMP_HDR_SUC_PRS GE05_EnergyC1:14AT5 AC03.Air FlowFeedBin.Cmt Boiler ColdReheat Pressure B737_FG117DC.TimeLoad D-110.Tank Pressure.PV GE04_DTQI-121GE03_V_WIN DC.Rk07R DC.Srv06R GE04_EnergyTI-121FT9001 FAC.OAK.Power-Kh-Val.PV DY-131 DC.SJ.PUE fic1001.CGE02_OT GE01_DT 02F102.1HRA VGBGT001 PI-111 facility_output DM-05:BW.RDC.SJ.C1.Z1.R1.Rk06.S2.O03.PWR QI-111FinalProductBin.On94:GRDIDX.ProdID Boiler-209.Fuel Gas Flowfic1001.CFR5001 GE01_A_DT fic1001.C 02:F101.C FR2001 TIC-121 aso AT401 DC.Srv01R TI-178asset1_output Active Meters GE01_A_DTasoDY-10102:F101.C AF_NOISEPI-115DM-05:BW.R FI-10180-13.Net Volume FI-101 bf5e1d1d-39c9-4b5b-b3d3-c2ce05fa3a26 DM-05:BW.R AT401 0_CLR_FINAL_OUT_B_TMPF506_E990339511775_Clear Sky Global Horiz GE01_DT FI-111 % CO2 GE05_EST GE01_CONAlarmTest.Input.Float32.1 4-36.Net VolumeAC04.Air Flow 02T10003LBB02CT001-2 DC.NY.Actual.PWR.day.Tot AlarmTest.Input.Float32.10 364511575-AC Power 80-5.Net VolumeGE01_A_DT 45-2.Net Volume Boiler-209.Fuel Gas FlowDC.Srv01R94:GRDIDX.Tr iggerAC09.Power 403511195_Wind Speed DC.C2Z1.Pwr.Rippl e GE01_A_DT AF_NOISE 1-16.Net Volume CB1992_MS0_CMP_FLOW_TOTALGE02_Energy FT9001 fasttag FeedBin.Cmt DC.Zone1.Number DailyTrigger FrqPrbCost_ER FT9001 AlarmTest.Input.Float32.1AQUA2-TI-201.PV DC.SJ.SiteRealTimeITLoad.PWR FT9001 FT9001 DC.Srv01R Boiler-125.Fuel Gas Volume 1-13.Net Volume B045_FG978 AT401 Anacortes Refinery.Alkylation.Asset Problems B210_FG005.KPIExcursion D-110.Tank Pressure.PVBoiler Feed Pump #1 风机 7 风速: 200 F 烟道气体出口温度: 700F 门道1 发动机电流: 6.3 A 门道2 发动机电流: 6.2 A 卡车 1 状态：运营 速度: 5 mph 油温: 200 F 蒸发机 1 操作 1 传导性 流入: 40% 流入量 3 加仑/秒 流入温度: 120 华氏度 蒸发机 1 操作 2 传导性 流入: 43% 流入量 3.8 加仑/秒 流入温度: 118 华氏度 不断进化的数据目标: PI Integrator for Business Analytics 监测 实时状态感知 对标 企业级性能对比 过程优化 对全局资产 实时和历史分析 系统优化 综合数据集 实现系统智能 实时决策支持 (OT) 企业分析 BI Edition Big Data Edition* Data Warehouse Edition *Coming Soon, Stay Tuned! And many more PI CoresightPI ProcessBookPI DataLink 20 PI Integrator for Business Analytics 21 筛选 补充建模 转换 数据 质量 模型 标准化 数据 兼容性 数据 聚合 商业智能 & 可视化分析 数据仓库 大数据 统筹资产及与特定资产相关联的时间序列数据 智能分析与优化运营相结合的基础设施架构 22 数据展板 & 运营分析 移动端商务智能BI MetaData/系统集成 机器学习/预测分析 地理信息分析 大数据/Hadoop 分析/BI/EI 可视化分析 SAS 数据仓库 OT 23 支持哪些系统？ PI Integrator for Business Analytics: 加速，分析，行动 PI Integrator for Business Analytics Business Intelligence （BI）商务智能版本 所有支持ODBC的 BI工具 TableauSpotfire SAS MSFT BI PI Server数据记录 层面 可视化 & 分析 数据准备和集成 层面 PI Integrator for Business Analytics Business Intelligence 版本 Enterprise Data Warehouse Architecture 25 PI Server PI Integrator for BA Data Warehouse 数据仓库版本 TableauSpotfire 数据记录 层面 可视化&分析 数据准备和集成 层面 Oracle DW, SQL Server, Teradata 数据仓库/ 数据中心 / 数据湖 定制程序SASMSFT BI 定制或第三方数据管理和ETL EAMSalesCRM ERPHR Hadoop 26 Business Intelligence Applications ODBC* PI System SQL AF DA 程序交互流向 1) Web UI Data Designer (网页版的数据配置工具） a) 用户在Web UI Data Designer中， 通过PI Integrator服务，创建PI View b) View 定义/配置保存于PI系统中 （Asset Framework） c)如需要，View数据可被保存于AF 管理的SQL数据库中 d) PI Integrator 服 务 用 于 管 理 PI View的更新 2) 第三方通过ODBC层向PI View 提取数据 PI View Web UI Data Designer PI Integrator for Business Analytics 1a) 1b) 1c) 2) 2) PI Integrator Service 1d) SAP产品领域 27 Maintenance, Production Planning, Quality (Rlink) REGIONAL SEMINARS 2015 SAP 应用 & 解决方案架构 28 EAMSales 数据集合 (Aggregation) PI Server SAP HANA IoT Adapter by OSIsoft 数据记录 层面 可视，分析&商业流程应用 数据准备和集成 层面 SAP HANA 企业分析和应用层面 SAP HANA Enterprise Information Management and Data Provisioning Agent 合作伙伴 应用 PI Integrator Framework CRM ERPHR SAP BW SAP LOB 解决方案 & 应用 LumiraGISBOBJ HANA SDA Aggregation PI Server Data Archive Microsoft SQL PI Asset Framework (AF) 应用交互流程 Web UI Data Designer a) 用户通过PI Integrator Framework，在 Web UI Shape Designer上创建PI View。 b) PI View 的定义和配置储存在PI系统中 (AF). c)如需要，PI View也可保存在AF管理的 SQL服务器中. d) HANA用户通过基于HANA SDA的 HANA Studio 以及（OSIsoft开发的） SAP HANA IoT Adapter by OSIsoft 来编辑virtual tables（虚拟表格） a) SAP HANA IoT Adapter by OSIsoft 通 过在PI Integrator Framework中的 REST层，控制对PI View的访问 b) IoT Adapter 通过PI JDBC Driver从在 SQL服务器中的PI View处调取数据 SAP Data Provisioning Agent Linux Linux 或 Windows SAP HANA IoT Adapter by OSIsoft SAP HANA HANA Studio PI Integrator Framework Web UI Shape Designer Windows 由SAP销售由OSIsoft销售 核心版本包含由OSIsoft开发的 SAP HANA （无费用） Windows 商务模式 30 PI Integrator for Business Analytics BI Edition Data Warehouse Edition SAP HANA Edition Open Connectivity （开元连接性） -客户端的 ODBCXX Native Connectivity （和特定系统的定制连接性） -SQL ServerX -Flat FileX -SAP HANAX Data Flow 数据流 -Bulk Load & Scheduled UpdatesXXX 功能 -创建 Asset ViewsXXX -通过Event Frames 过滤数据XXX -清理，集成，塑造，传送XXX -Automatic Dimensionally modeled dataXXX Launch PricingBI版本 Launch Pricing PI Integrator for Business Analytics BI Edition Data Warehouse Edition SAP HANA Edition Open Connectivity （开元连接性） -客户端的 ODBCXX Native Connectivity （和特定系统的定制连接性） -SQL ServerX -Flat FileX -SAP HANAX Data Flow 数据流 -Bulk Load & Scheduled UpdatesXXX 功能 -创建 Asset ViewsXXX -通过Event Frames 过滤数据XXX -清理，集成，塑造，传送XXX -Automatic Dimensionally modeled dataXXX 数据仓库版本 PI Integrator for Business Analytics BI Edition Data Warehouse Edition SAP HANA Edition Open Connectivity （开元连接性） -客户端的 ODBCXX Native Connectivity （和特定系统的定制连接性） -SQL ServerX -Flat FileX -SAP HANAX Data Flow数据流 -Bulk Load & Scheduled UpdatesXXX 功能 -创建 Asset ViewsXXX -通过Event Frames 过滤数据XXX -清理，集成，塑造，传送XXX -Automatic Dimensionally modeled dataXXX HANA版本 商务模式 34 PI Integrator for Business Analytics BI Edition Data Warehouse Edition SAP HANA Edition PI Views -Access data via ODBCXX Native Connections -SQL ServerX -Flat FileX -SAP HANAX Data Flow -By calendar times XXX Common Features -Create Asset ViewsXXX -Cleanse and filter data using Event FramesXXX -Automatic Dimensionally modeled dataXXX PI Integrator for Business Analytics Output Data Streams BI Edition Data Warehouse Edition SAP HANA Edition 1000Talk- - 2500to - 5000- Your- 10000-OSIsoft Sold By 20000-Account SAP 50000-Manager - 100000-Today - 客户案例 35 36 先期体验用户 Merck Regeneron （制药） EDF-RE（风电） Cemex Alcoa GRP （制造） Freeport McMoRan （矿业） Devon Energy Noble Energy NOV （能源） 巴斯福（化工） 南方电网 SDG&E Freeport McMoRan 矿业公司(成功案例） 37 Freeport （矿业）IT战略架构 PI 系统 实时，时间序列数据 基础架构 实时决策 “流”分析（Streaming Analytics） Hadoop 大数据 深挖分析 预测模型 Teradata 关系型 / 数据 仓库 集成离散的数 据源 报表和数据展 板 数据清理和准备工作占用50-80% 的时间和成本 /2014/04/the-sexiest-job-of-the-21st-century-is-tedious-and-that-needs-to-change/ 分析 准备 行动 数据准备，分析，采取行动 - 时间对比 Fre