BPC应用性能监控平台实施方案

1、 BPC应用性能监控平台实施方案 Business Performance Center目录 TOC o 1-3 h z u HYPERLINK l _Toc501830795 第1章前言 PAGEREF _Toc501830795 h 3 HYPERLINK l _Toc501830796 1.1编写目的 PAGEREF _Toc501830796 h 3 HYPERLINK l _Toc501830797 1.2文档说明 PAGEREF _Toc501830797 h 3 HYPERLINK l _Toc501830798 1.3BPC技术优势 PAGEREF _Toc501830798

2、h 3 HYPERLINK l _Toc501830799 第2章实施内容 PAGEREF _Toc501830799 h 5 HYPERLINK l _Toc501830800 2.1BPC部署分析 PAGEREF _Toc501830800 h 5 HYPERLINK l _Toc501830801 2.2BPC逻辑架构图 PAGEREF _Toc501830801 h 6 HYPERLINK l _Toc501830802 2.3BPC物理拓扑图 PAGEREF _Toc501830802 h 7 HYPERLINK l _Toc501830803 第3章资源配置和软硬件实施 PAGER

3、EF _Toc501830803 h 8 HYPERLINK l _Toc501830804 3.1系统资源配置清单 PAGEREF _Toc501830804 h 8 HYPERLINK l _Toc501830805 3.1.1服务器配置 PAGEREF _Toc501830805 h 8 HYPERLINK l _Toc501830806 3.1.2软硬件配置 PAGEREF _Toc501830806 h 8 HYPERLINK l _Toc501830807 3.1.3服务器系统及软件安装 PAGEREF _Toc501830807 h 8 HYPERLINK l _Toc50183

4、0808 3.1.4服务路径图配置 PAGEREF _Toc501830808 h 15 HYPERLINK l _Toc501830809 3.1.5网络镜像要求 PAGEREF _Toc501830809 h 15 HYPERLINK l _Toc501830810 3.1.6网络访问规则 PAGEREF _Toc501830810 h 17 HYPERLINK l _Toc501830811 3.2实施人员 PAGEREF _Toc501830811 h 17 HYPERLINK l _Toc501830812 第4章案例认证 PAGEREF _Toc501830812 h 18 HYP

5、ERLINK l _Toc501830813 4.1成功案例 PAGEREF _Toc501830813 h 18 HYPERLINK l _Toc501830814 4.1.1某银行卡交易组织 PAGEREF _Toc501830814 h 18 HYPERLINK l _Toc501830815 4.1.2某股份制商业银行 PAGEREF _Toc501830815 h 19 HYPERLINK l _Toc501830816 第5章风险分析 PAGEREF _Toc501830816 h 21 HYPERLINK l _Toc501830817 5.1BPC交易性能监控平台风险 PAGE

6、REF _Toc501830817 h 21 HYPERLINK l _Toc501830818 5.2被管系统风险 PAGEREF _Toc501830818 h 21 HYPERLINK l _Toc501830819 第6章解决方案 PAGEREF _Toc501830819 h 22 HYPERLINK l _Toc501830820 6.1BPC交易性能监控平台解决方案 PAGEREF _Toc501830820 h 22 HYPERLINK l _Toc501830821 6.2被管系统解决方案（回退方案） PAGEREF _Toc501830821 h 22前言编写目的 本文为B

7、PC交易性能监控系统上线实施工作提供技术参考。文档说明 本文档用于BPC系统规范上线参数配置。BPC技术优势BPC采用旁路的被动流量获取方式，利用交换机SPAN将网络数据包镜像并分析，数据采集Smart Probe和解码引擎DP运行在独立的BPC服务器上，对被管应用完全无影响。BPC基于统一的高精度时钟源给交易记录打时间戳，请求和响应时间计算基于交易级请求和响应关联。物理部署方式： CrossFlow BPC 基于先进的协议解码技术，充分利用可靠的网络数据资源，帮助企业IT部门建立应用性能管理平台。以服务为中心，提供交易量、成功率、响应时间、响应率、返回码五大关键指标，并区分交易类型、交易渠道

8、两个统计维度，展现服务组件的运行状态。实现了应用可用性、性能、负载量的全面可视化。实施内容BPC部署分析监控组件的选择 根据本项目范围和要求，我们结合实际应用架构，对监控点作出了合理的选择，目的是涵盖重要应用组件，实现对银联系统、柜面系统、支付宝系统的监控，保障其正常高效运行。因此，本方案建议监控以下交易组件。银联至银联前置，银联前置至卡交易系统银行柜面至TIP，TIP至卡交易系统支付宝至某系统，某系统至TIP以上监控段的设置，可以实现对来自银联、银行柜面、阿里巴巴等渠道整条服务路径的监控。同时，对于经过防火墙的服务，我们将监控防火墙前后的流量，以便分析对比防火墙前后的交易，及时反馈因防火墙问

9、题对业务产生的影响。BPC逻辑架构图逻辑架构图(计划)需要解码协议：序号监控点协议类型1CUPS-防火墙-银联前置-防火墙-卡交易系统CUPS3银行柜面-防火墙-TIP-防火墙-卡交易系统85834银行柜面-防火墙-TIP-防火墙-卡交易系统FIX5支付宝-防火墙-OAM-TIP支付宝 BPC物理拓扑图一般物理架构图：资源配置和软硬件实施系统资源配置清单服务器配置项目最低配置要求操作系统Linux 64位 内核2.6版本（推荐CentOS或RHEL5.9及以上版本）CPU英特尔 至强 系列处理器2.4GHz 以上（24核） 或更高内存64GB 或更高RAID配置RAID 5 （8*600G S

10、AS） 8通道RAID卡或16通道RAID卡磁盘空间2.0 TB以上网卡至少2个千兆以太网接口，建议4个电源双电源冗余备份客户端浏览器推荐使用Google Chrome或Firefox（安装Flash Player 11）屏幕分辨率1280 x 1024 或更高软硬件配置BPC 2.0 一套服务器硬件 一台Tap Switch 一台服务器系统及软件安装BPC程序安装由脚本自动执行完成，上传安装包到服务器并解压缩即可。命令为：tar zxvf crossflow-bpc-2.5.2.special.PUBLIC.20140425T1554.tar.gz在解压缩后的安装包根目录下，执行安装脚本“i

11、nstall.sh”进入安装过程。命令为：./install.sh系统检测与配置阅读并确认许可证声明输入“y”进入系统需求检测，输入“n”退出安装。系统需求检测系统需求检测可以跳过，但首次安装BPC时，推荐运行该项检测。检测内容包括：系统版本、CPU、内存、NIC等。输入“y”，检测服务器硬件配置是否符合安装BPC的最低配置需求；输入“n”则退出检测直接进入主程序安装。如果检测结果符合需求，则显示“pass” 状态；如果不符合，则显示“failed”状态。当出现“failed”信息时，表示硬件性能不符合最低配置需求，运行BPC可能出现性能瓶颈， 请谨慎选择是否安装BPC。输入“y”进入I/O性

12、能检测，输入“n”则退出安装。I/O性能检测I/O性能检测可以跳过，但首次安装BPC时，推荐运行该项检测。测试内容为：I/O接口性能是否达到最低需求。输入“y”开始检测，输入“n”则跳过检测进入系统服务配置。I/O性能检测的最低性能需求为：每秒写入300MB、每秒只读600MB、每秒同时读写200MB。当出现“failed”信息时，表示I/O接口性能不符合最低配置需求，运行BPC可能出现性能瓶颈， 请谨慎选择是否安装BPC。输入“y” 进入系统服务配置，输入“n”则退出安装。系统服务配置系统服务配置是全自动化配置，会保留所有BPC使用的系统服务，并关闭所有未被使用的服务。系统防火墙和SELin

13、ux两个服务也会被关闭。输入“y”进入系统服务自动化配置，输入“n”直接进入Smart Probe配置。系统服务配置为全自动化，当提示语句出现“系统服务配置完成”时，可以输入任意键进入Smart Probe配置。Smart Probe配置进入Smart Probe配置项，配置脚本会自动检测所有以太网端口、排除已配置IP的通信端口，并将可用的端口列举出来。例如截图中，eth0是IP通信用的端口，那么可用于Smart Probe的端口是eth1、eth2、eth3。如果列出的接口全部用于BPC的Smart Probe模式来捕获数据包，那么这些可用的接口可以被设置成混杂模式。输入“y”即可。需要注意

14、的是，混杂模式下的以太网接口不可再用作通信端口，否则会影响IP层通讯。所以，用户如果不能确定是否把接口全部用于Smort Probe功能，可以跳过此配置。输入“n”跳过配置并进入主程序安装。被成功设置为混杂模式的以太网接口将被列举出来，显示为“completed“状态。设置好Smart Probe端口之后，提示：为了确保Smart Probe抓包的性能，强烈建议指定2个CPU内核专用于Smart Probe进程。输入“y” 确认设置，输入“n”则退出配置进入主程序安装。到此，所有的系统检测和配置已经完成。输入“y”进入主程序安装，输入“n”退出安装。主程序安装进入主程序安装项，根据安装提示设置

15、BPC服务器IP地址、运行模式、服务器名称等。选择服务器IP地址：BPC支持Master（主），Slave（从）两种服务器运行模式。请根据需求正确选择服务器运行模式：为了便于管理，可根据业务名称、地理位置等信息为服务器命名：以上信息配置完后，得到如下汇总信息。输入“y”确认将要生成的服务器信息并进入下一步，输入“n”重新配置服务器运行模式、服务器名称。若要退出安装，输入“Ctrl+c”即可。成功安装BPC后，为避免BPC服务异常，必须重启服务器，使所有配置生效。重启后，BPC服务也会正常启动。系统重启完毕后，在浏览器中输入BPC服务器的ip地址。若能顺利登陆，代表BPC运行正常。例如： HYP

16、ERLINK 83 83 （默认使用端口：80）登陆界面：超级管理员默认用户名和密码：用户名：admin密码：netis注意事项关闭探针iptables服务为了防止探针阻止BPC通过FTP获得数据源，必须关系探针的iptables服务。命令为：chkconfig iptables offservice iptables stop操作系统校时如果BPC服务器时间有偏差，会导致统计信息输出异常，所以在安装运行程序时首先需要校准系统时间。服务器需要与探针保持时间一致，建议使用 NTP 服务进行时间同步。服务路径图配置本节内容可见“BPC 2.5GR使用手册.pdf”网络镜像要求BPC需要获取网络数据

17、报文（网络镜像）由获取的报文中分析交易性能状况因此需要网络部门配合将交换机上指定的流量镜像给TAP Switch设备，再由TAP Switch设备汇聚过滤输出给BPC服务器。应该要保证输出给BPC的流量，不会有重复包。 将红色框内的交换机对应的流量镜像给BPC服务器（生产环境）网络访问规则BPC基于B/S架构，需要提供BPC一个管理IP，并保证能被顺利访问。需对BPC的80、22端口放行。实施人员单位名称姓名责任范围联系方式备注天旦网络李攀厂商责任工程师某银行* 项目协调和管理案例认证成功案例某银行卡交易组织快速排障，确认问题原因：卡组织原因/机构原因；网络故障/应用故障覆盖三中心交易全路径，

18、全面提供交易性能可视化单笔交易追踪，跨越多层网络设备和应用服务器监控业务：转接（1300笔/秒）、多渠道（800笔/秒）、POS收单（300笔/秒）、国际业务部署拓扑结构示意： 该用户部署了大量TAP来获取各个环节的流量（由于拓扑涉及用户保密策略，因此涂抹了设备信息）某股份制商业银行BPC一期项目：九大业务，双中心覆盖，主数据中心56个监控点，每分钟分析13万笔交易。双中心双活运行，37个监控点。二代核心银行系统（SNA）信用卡授权 + 银联 + 支付宝（12 CP）黄金交易（10 CP）短信通知（9 CP）三方存管（12 CP）新会计流程（8 CP）信用客服平台（5 CP）快速排障和定位问题：3分钟内判定问题，5分钟恢复服务双中心覆盖应用全路径，全面可视化应用性能和连接性，提升运维水平充分利用网络数据，获得实时、可靠的应用性能分析数据，完全避免传统监控模式所带来的风险配置化实现应用性能监控，减少开发成本，快速实施，使监控项目