LCAM评估决策_培训文档_数据集成与维护.ppt

资产全寿命周期管理评估决策系统数据集成与维护 LCAM项目组 数据集成功能说明数据集成主要采集各网省业务系统 如 PMS ERP 数据作为资产全寿命的基础数据 供评估计算 分析使用 数据集成的方式分为四种 人工方式 填报 Excel模板导入 RDF集成 数据中心 和Excel集成 数据中心 1 0数据主要是通过Excel模板导入和人工填报方式进行采集 2 0设备单体数据主要是通过Excel模板导入 RDF集成 数据中心 和Excel集成 数据中心 方式进行采集 数据集成功能说明 2 数据集成流程介绍 Excel模板导入 数据集成流程介绍 3 数据集成数据源定义单位数据源设置数据采集系统设置简化数据采集定义简化数据采集单位设置Excel模板数据导入 目录 4 对应菜单 数据源管理 数据源定义功能概述 定义指标元素计算中基础数据的获得方式 由总部系统管理员维护 功能需求 由于资产全寿命评估系统的基础数据来源于不同的业务系统 例如PMS系统中的资产台帐信息 ERP中资产卡片信息等 因此我们设计数据源定义模块来统一管理这些数据源 如果以后需要扩充数据来源的话则可直接在数据源定义模块中进行设置 关键点说明 1 上报周期 是以下拉列表框形式展现 分为 季度 月份 年度 三种周期进行数据上报 数据集成与维护数据源定义 5 2 开始时间 数据源数据开始上报时间 3 数据集成完毕校验 是通过编写SQL语句判断此数据源数据是否完成上报 主要依据上报周期和开始时间 主要用于两个地方 一 在评估计算的时候判断数据是否集成完毕 如果集成完成则往下计算 如果没有集成完成则提示数据没有填报信息 二 在用户登录系统的时候根据此判断提示该用户有多少数据没有填报 默认提示一个月 数据集成数据源定义 6 目录 7 数据集成数据源定义单位数据源设置数据采集系统设置简化数据采集定义简化数据采集单位设置Excel模板数据导入 对应菜单 数据源管理 单位数据源设置功能概述 设置各网省 地市基础数据的集成方式 填报人和是否导入此数据的使用弃用标志 如果集成方式为 RDF集成 数据中心 则需要设置集成周期 周期单位和集成开始时间 由网省系统管理员维护 功能需求 由于各网省所需导入的数据源 数据源集成方式 可能有的网省是通过Excel模板进行数据上报 有的网省是通过人工填报进行数据上报 和负责填报的人员不一样 所以设计单位数据源设置模块以便各网省根据自身的情况进行设置 数据集成单位数据源设置 8 关键点说明 1 数据集成方式 人工填报 Excel模板导入 RDF集成 数据中心 和Excel集成 数据中心 集成方式 其中1 0版本数据主要是通过Excel模板导入和人工填报的方式进行数据填报的 2 填报人 负责填报该单位下的数据 可以设置多个数据源对应多个人员角色进行填报 例如 年度效能数据 可以设置张三进行导入 容载比信息 可以设置李四进行导入 当张三导入了 年度效能数据 的时候 李四不能对 年度效能数据 进行维护 3 使用标志 为 使用 弃用 下拉形式选择 可以设置本单位是否需要导入此数据源的数据 当数据源定义中设置此数据源的使用标志为 弃用 的时候则在单位数据源设置功能中不能将 弃用 记录变为 使用 记录 数据集成单位数据源设置 9 注 当单位下有数据源的时候新建按钮不可用 当数据源定义新增一个数据源的时候会自动将该数据源同步到有数据源的单位下 一个数据源都没有的单位下不进行同步功能 数据集成单位数据源设置 10 数据集成流程介绍 Excel模板导入 数据集成流程介绍 11 数据集成数据源定义单位数据源设置数据采集系统设置简化数据采集定义简化数据采集单位设置Excel模板数据导入 目录 12 对应菜单 数据维护管理 数据采集系统设置功能概述 设置读取Excel模板非汇总类数据的具体方式 行号列号和相应的sheet页 由系统管理员维护 功能需求 由于一个Excel模板包含多个设备类别的数据 例如主变 架空 容载比等数据 导致数据的排列方式不一样 有的数据是按照列进行排列的例如供电可靠性因子信息sheet页 有的数据是按照行进行排列的 例如2 0单体数据主变设备基础信息sheet页 因此我们设计数据采集系统设置模块来统一配置这些数据的读取方式 行号列号以及相应的sheet页 关键点说明 数据集成数据采集系统设置 13 1 读取方式 分别为 按行循环读取 按列循环读取 和 按单元格读取 按行循环读取 当Excel模板为下图所显示的数据格式时为按行循环读取 按列循环读取 当Excel模板为下图所显示的数据格式时为按列循环读取 按单元格读取 当Excel模板为下图所显示的数据格式时为按单元格读取 数据集成数据采集系统设置 14 数据集成数据采集系统设置 15 2 SHEET名称 是Excel模板的sheet页名称 3 行号 sheet页的行号 4 列号 sheet页的列号 数据集成流程介绍 Excel模板导入 数据集成流程介绍 16 目录 17 数据集成数据源定义单位数据源设置数据采集系统设置简化数据采集定义简化数据采集单位设置Excel模板数据导入 对应菜单 数据维护管理 简化数据采集定义功能概述 定义不同电压等级的汇总类指标 设置在Excel模板读取指标的位置 和汇总方式 由总部系统管理员维护 功能需求 由于有的网省信息化程度不高 导致有些单体的数据很难及时的上报上来 所以就设计了简化数据采集定义模块以便各网省按月将汇总的数据进行上报 主要定义主变等五大类设备 站内其他设备和购电价汇总指标 当上报1 0版本数据的时候取五大类设备 站内其他设备和购电价汇总指标 当上报2 0单体数据的时候 只取站内其他设备和购电价汇总指标 关键点说明 数据集成简化数据采集定义 18 1 模板Excel位置 指此汇总指标在Excel模板上哪个sheet页 哪行哪列读取 例如220kv主变原值的 模板Excel位置 就可以写作 主变汇总信息 3 4 形式 2 上报周期 以下拉列表框形式展现 分为 季度 月份 年度 三种周期进行数据上报 3 上报数据版本 以下拉列表框形式展现 分为1 0和2 0 数据集成时 当为1 0的时候 需要填写Excel模板中的五大设备汇总信息 站内其他设备和购电价信息 当为2 0时 只需要填写站内其他设备汇总信息和购电价信息 数据集成简化数据采集定义 19 目录 20 数据集成数据源定义单位数据源设置数据采集系统设置简化数据采集定义简化数据采集单位设置Excel模板数据导入 对应菜单 数据维护管理 简化数据采集单位设置功能概述 设置单位下的汇总类指标 其功能和单位数据源设置一样 由网省系统管理员维护 功能需求 由于各网省电压等级不一样所以所需导入的汇总指标不一样 因此设计简化数据采集单位设置模块以便各网省根据自身的情况进行设置 数据集成简化数据采集定义 21 数据集成流程介绍 22 数据集成流程介绍 Excel模板导入 目录 23 数据集成数据源定义单位数据源设置数据采集系统设置简化数据采集定义简化数据采集单位设置Excel模板数据导入 对应菜单 数据维护管理 Excel模板数据导入功能概述 该功能先将Excel模板上传到数据库中 然后再从数据库中的Excel模板读取数据插入到相应的数据库表中 由网省系统管理员和数据维护人员进行维护 Excel模板数据导入前提条件 1 数据源定义 单位数据源设置2 数据采集系统设置3 简化数据采集定义4 简化数据采集单位设置5 数据校验规则定义6 单位数据校验规则设置 数据集成模板数据导入 24 数据导入维护流程介绍 Excel模板导入 数据集成数据导入维护流程介绍 25 Excel模板数据导入 数据是否导入成功 数据导入失败 修改数据 安全指标数据维护 数据导入成功 则可以到数据维护页面进行数据修改 资产效能数据维护 容载比数据维护 简化数据采集维护 是否查看数据校验错误数据 数据导入成功但是数据校验错误 详细页面维护 不查看数据校验错误数据 可以直接进入数据维护页面维护 查看 设备单体数据维护 数据导入场景 1 导入的Excel模板版本不对 提示 数据导入失败 年度为XXXX月度为XX的Excel模板版本不正确 请重新确认版本号 2 导入Excel模板上的年份 月份和数据导入页面不一致 提示 数据导入失败 年度为XXXX月度为XX和Excel模板中设置的年月不一致 3 导入Excel模板数据成功 但是数据校验错误 提示 年度为XXXX月度为XX的数据导入成功 但是校验错误 是否要查询监控结果 4 导入Excel模板数据插入库表出现异常 提示 年度为 数据集成模板数据导入 26 XXXX月度为XX的数据导入出错 请检查数据文件是否正确 5 导入Excel模板数据成功 提示 年度为XXXX月度为XX的数据导入成功 数据集成模板数据导入 27 目录 28 数据维护安全指标数据维护资产效能数据维护容载比数据维护简化数据采集维护设备单体数据维护地市数据汇总 数据维护安全指标数据维护 29 对应菜单 数据维护管理 安全指标数据维护功能概述 对导入的安全指标数据进行维护 包括新增 修改和删除 由网省系统管理员和数据维护人员进行维护 关键点说明 1 选择 只显示校验错误数据 按钮点击 查询 后可以将导入问题数据查询出来 然后进行维护 2 点击显示详细信息页面可以进行数据修改 目录 30 数据维护安全指标数据维护资产效能数据维护容载比数据维护简化数据采集维护设备单体数据维护 对应菜单 数据维护管理 资产效能数据维护功能概述 对导入的资产效能数据进行维护 包括新增 修改和删除 由网省系统管理员和数据维护人员进行维护 关键点说明 点击显示详细页面可以对数据进行修改 数据维护资产效能数据维护 31 目录 32 数据维护安全指标数据维护资产效能数据维护容载比数据维护简化数据采集维护设备单体数据维护地市数据汇总 对应菜单 数据维护管理 容载比数据维护功能概述 对导入的容载比数据进行维护 包括新增 修改和删除 由网省系统管理员和数据维护人员进行维护 关键点说明 点击显示详细页面可以对数据进行修改 数据维护容载比数据维护 33 目录 34 数据维护安全指标数据维护资产效能数据维护容载比数据维护简化数据采集维护设备单体数据维护地市数据汇总 对应菜单 数据维护管理 简化数据采集维护功能概述 对导入的简化数据采集进行修改维护 由网省系统管理员和数据维护人员进行维护 关键点说明 直接修改指标值然后点击 保存 按钮进行保存 数据维护简化数据采集维护 35 数据维护安全指标数据维护资产效能数据维护容载比数据维护简化数据采集维护设备单体数据维护地市数据汇总 目录 36 对应菜单 数据维护管理 设备单体数据维护功能概述 对导入的五大类设备数据进行人工填报 删除 修改等维护 由网省系统管理员和数据维护人员进行维护 关键点说明 1 可以通过查询条件过滤所要查询的设备 进行人工填报 删除 修改等操作 数据维护设备单体数据维护 37 2 当选择 只显示校验错误数据 多选框 点击 查询 按钮时 能够查询出数据校验错误的数据 点击 显示详细信息 按钮时弹出详细页面 在 数据错误信息 栏显示数据校验错误信息 然后按照提示信息进行修改 数据维护设备单体数据维护 38 当点击 显示详细信息 按钮时弹出详细页面 数据维护安全指标数据维护资产效能数据维护容载比数据维护简化数据采集维护设备单体数据维护地市数据汇总 目录 39 对应菜单 数据维护管理 地市数据汇总使用角色 网省系统管理员和数据维护人员功能概述 网省公司将各地市公司上报的安全事故数据与汇总类填报数据进行汇总 并通过导出功能将数据导出到Excel模板中 下载到本地 形成上报到总部的数据 关键点说明 汇总数据前应确保各个地市公司的数据都已录入 数据维护地市数据汇总 40 数据集成流程介绍 RDF集成 数据中心 数据集成流程介绍 41 RDF集成的操作说明一 单位数据源设置对于五大类设备 因为 XXX资产运行信息 数据源对应于RDF文件XXX月度资产成本信息 xml XXX资产主台账 数据源对应于RDF文件XXX设备基本信息 xml 所以只需要设置资产运行信息和资产台账信息数据源的集成周期 页面元素介绍 1 集成方式设置为 集成方式 数据中心 2 周期单位是以下拉框形式显示 分别为 小时 天 每月3 集成周期 当周期单位为 小时 时 按照小时获取配置发送请求 在集成周期填写正整数 数据集成RDF集成操作说明 42 当周期单位为 天 时 按照天获取配置发送请求 在集成周期填写正整数 当周期单位为 每月 时 按照月获取配置发送请求 在集成周期填写 1 28和1 28的整数 正数表示从1号开始的天数 负数表示从月底算起的天数 如2表示每月2号 1表示每月最后一天 4 集成开始时间 数据集成初始时间 集成开始时间设定后一直不变 5 上次集成时间 记录系统上次抽取数据的时间 值 集成开始时间 N 集成周期 例如 周期单位为 天 集成周期为 1 集成开始时间为 2010 09 1711 14 30 表示从2010 09 17起每天11 14 30会自动获取RDF文件 完成后上次集成时间变为 2010 09 1811 14 30 这个时间将作为下次获取RDF文件的开始时间 数据集成RDF集成操作说明 43 6 上次集成结果 不可编辑项 值分别为 抽取成功 数据未完全导入 抽取失败和待抽取 抽取机制 1 第一次抽取 上次集成时间 集成开始时间 1 集成周期 当上次集成时间 当前时间 1小时的时候 系统开始发送请求获取RDF数据文件 抽取满足集成开始时间 时间戳 上次集成时间条件的数据 如果不满足条件则不发送请求 获取RDF不成功 2 第N次抽取 集成开始时间 上次集成时间 上次集成时间 集成开始时间 N 集成周期 当上次集成时间 当前时间 1小时的时候 系统开始发送请求获取RDF数据文件 抽取满足集成开始时间 时间戳 上次集成时间条件的数据 如果不满足条件则不发送请求 获取RDF不成功 数据集成RDF集成操作说明 44 二 数据采集系统设置设置RDF中各节点和LCAM系统库表中字段对应关系 主要维护 类型配置 RDF关联源名称 和 RDF资源URI 类型配置 对应于LCAM数据库字段RDF关联源名称 RDF节点 注意将节点中的 CIM 去掉 数据集成RDF集成操作说明 45 数据集成RDF集成操作说明 46 RDF资源URI CIM组提供获取数据的URI1 配置RDF数据采集系统设置打开数据维护管理 数据采集系统设置页面 配置LCAM数据库字段与RDF文件中节点的关联 只需要设置 类型配置 和 RDF关联源名称 其中 类型配置 为LCAM数据库表的字段 例如 断路器 明细表 月度总停运时间 表示在明细表中 设备类别为断路器的月度总停运时间字段 RDF关联源名称 为RDF数据文件中该月度总停运时间的节点 例如 断路器月度总停运时间节点为 cim LaborItem ydztysj 那么配置LCAM与RDF关联的话 则只需要将 LaborItem ydztysj 填到 RDF关联源名称 中即可 注意要把 cim 去掉 2 配置RDF资源URI根据CIM组提供的URI配置五大类设备的RDF资源URI 各网省公司只需要在类型配置为 设备类别 主表 组织代码 和 设备类别 明细表 组织代码 的 RDF资源URI 中设置相关值即可 三 数据校验规则设置可以参考Excel模板导入的方式设置数据校验规则 四 代码集成转换设置 重要 登录系统打开数据集成管理 代码集成转换设置页面 对组织代码 电压等级 绕组形势 资产性质 灭弧介质 户内或户外 数据状态 设备状态等字段进行相关设置 现场实施人员根据字段名 LCAM代码 在PMS代码一栏填写PMS系统的相应代码 五 配置服务地图 1 用http 服务IP地址 7001 MWManagement登录服务地图 然后在MWTaskDispatch服务右键点击配置MWTaskDispatch服务 选 数据集成RDF集成操作说明 47 择自定义Tab页 点击右键添加 cisRequestURL 配置项 配置项值为http RDF服务IP 端口 DRMT services CisWebService wsdl 注意 如果CIM组提供服务地址为企业总线的服务地址时 cisRequestURL 配置项值设置的时候去掉 WSDL 如果CIM组提供服务地址不为企业服务总线地址时需要加上 WSDL 如下图所示 数据集成RDF集成操作说明 48 数据集成RDF集成操作说明 49 2 在MWTaskDispatch服务中 点击右键添加 SourceSystem 配置项 配置项值为各网省公司数据中心所需要的数据来源 具体值找CIM组人员要 例如 上海为 PMS SH 3 类似的在MWWebSite服务添加 cisRequestURL 配置项 配置项值为http RDF服务IP 端口 DRMT services CisWebService wsdl 4 类似的在MWWebSite服务添加 SourceSystem 配置项 配置项值为各网省公司数据中心所需要的数据来源 具体值找CIM组人员要 例如 上海为 PMS SH 六 设置LCAM通过RDF获取数据任务频度1 登录PI3000客户端 点击 用户菜单 双击 系统工具 点击 任务调度定义器 工具 显示LCAM通过RDF获取数据任务 如下图所示 2 点击 编辑 按钮则可以设置定时任务的频度 修改完成以后 点击 保存按钮 进行定时任务频度保存 数据集成RDF集成操作说明 50 数据集成RDF集成操作说明 51 七 通过页面测试能否通过服务获取RDF数据文件 1 登录LCAM系统 在数据集成管理下能够看到 数据集成测试 菜单 如下图所示 2 在右侧上方输入框输入PMS单位编号 LCAM单位编号和数据源序号 其中PMS单位编号和LCAM单位编号参考步骤四设置的组织代码进行填写 数据源序号到单位数据源数据查询查找出数据源序号 SJY XH 输入完成后点击 根据输入框内容获取RDF数据文件 按钮 3 在左侧第二个输入框中显示可能为如下格式 请求的RDF文件 获取RDF数据文件的条件 queryData 数据集成RDF集成操作说明 52 数据集成RDF集成操作说明 53 返回的RDF文件 请求后的RDF数据文件 queryData 任务调度定义器 1 右键点击 LCAM通过RDF获取数据任务 点击 启动任务 即可以按照频度启动LCAM通过RDF获取数据定时任务 2 右键点击 LCAM通过RDF获取数据任务 点击 启动任务实例 即可以实时的调用数据集成 数据集成RDF集成操作说明 54 数据集成流程介绍 Excel集成 数据中心 数据集成流程介绍 55 Excel集成的操作说明一 修改单位数据源设置数据集成方式 登录单位数据源设置数据集成方式为 Excel集成 数据中心 二 数据采集系统设置 数据集成Excel集成操作说明 56 设置Excel集成文件中各sheet页字段和LCAM系统库表中字段对应关系 主要维护 类型配置 数据集成SHEET名称 数据集成行号 数据集成列号 和 数据来源 类型配置 对应于LCAM数据库字段数据集成SHEET名称 Excel集成文件sheet页名称数据集成行号 Excel集成文件中该字段所在的行数据集成列号 Excel集成文件中该字段所在的列数据来源 Excel中数据来源 主要是PMS或ERP例如 主变设备台帐信息 sheet页中的组织单位编码来源于PMS系统 那么就新建一条下面的记录 数据集成Excel集成操作说明 57 三 数据校验规则设置参考Excel模板导入的方式设置数据校验规则 四 代码集成转换设置参考RDF集成设置代码集成转换五 将数据集成文件上传服务器Excel集成文件命名规则 大于等于10月份的格式是integrationExcelFileV3 0 YYYYMM xls格式 小于10月份的格式是 integrationExcelFileV3 0 YYYYM xls 当6月份要上报5月份的数据时 文件名为 integrationExcelFileV3