银行网络性能分析测试报告

1、银行网络性能分析测试报告NPM/APM的方法论端到端交易应用的完整性能监控(NPM+APM)3.NET Worker ProcessIIS Native PipelineTCP/IP 协议栈Web服务器客户端浏览器广域网WAS JVMApacheTCP/IP StackWAS Thread PoolApp服务器局域网起始处理排队代码执行网络、带宽、延迟处理排队处理排队代码执行远程调用Web服务，数据库网络传输性能指标代码执行代码执行网络传输性能指标网络传输EUE代码执行网络、带宽、延迟代码执行结束网页渲染时间服务响应网络、带宽、延迟、丢包服务请求网络、带宽、延迟、丢包主要的技术手段NPM的主要

2、技术手段重点区域（如数据中心）监控，探针技术：通过抓取网络数据包进行分析。全网流量监控，Flow 技术： 采集网络设备统计的NetFlow, sFlow, J-Flow, NetStreamAPM的主要技术手段端到端（用户端）监控，Web页面JavaScript脚本嵌入技术（针对Web类应用）。端到端（服务器端）监控， JVM/CLR Agent的代码植入技术（针对JAVA/.Net应用）。4探针的工作原理5汇总应用流的KPI指标，得到该应用的KPI；并进行智能预警通过镜像或TAP抓取数据包，建立索引并保存数据自下而上应用的KPIFlowsPackets快速定位故障故障定位精细原始的证据获取故

3、障数据包证据 故障预警，揭示潜在问题早期预警分析自上而下分析数据包里每个应用流的KPI指标：包括流量，网络传输时间，服务器延时，重传Riverbed 详尽的延时参数计算6DATAACKREQUEST服务器响应时间Round Trip Time (Outbound) *数据传输时间Time连接建立时间SYNSYN/ACKACKREQUESTDATAACKDATAACK服务器客户端交互 1交互 2Round Trip Time (Inbound)* 数据传输时间 = Payload 传输时间 + 重传导致的延时*Round Trip Time 的计算针对每个 DATA/ACK对。灵活可定制的仪表盘

4、网银定制业务组仪表盘8网银定制应用仪表盘9应用个人业务的虚拟地址没有流量，怀疑是前端web服务器没有指向负载均衡，这与系统设计不符。网银定制应用仪表盘10网银助手响应时间超过阀值，我们可以下钻查看web性能分析视图应用响应时间分布图11网银应用服务器的响应时间在每天4点都增长的很高，这应该和系统的批处理备份任务相关，此时用户体验会非常慢，建议优化。按流量排名的组和应用12仪表盘逐级下钻 - SQLNET的会话对13仪表盘逐级下钻 - 响应时间分布图14连接异常的组和应用15全局流量汇总统计全部流量统计 - 时序图17非常清晰的特征：夜间备份流量尖峰，上午和下午是正常的 大流量，中午业务回落全部

5、流量统计 - 应用排名18负载均衡流量匹配全部流量统计 - 会话对19非业务地址,需要进一步了解该地址强大的web性能分析Web应用慢页面统计21页面族分析22页面族排名23用户会话跟踪24页面请求数量和页面时间正相关所有页面统计 - 自动排名25HTTP 404错误26HTTP 504错误 - 用户统计逻辑超时27该jsp运行60秒后，服务器返回504错误HTTP200 - 业务逻辑缓慢28该jsp运行60秒后，服务器返回504错误安装程序下载缓慢29最慢的页面时间高达1281秒,当我们打开瀑布图,看到该页面所有对象的加载过程,发现是1个安装程序下载导致,但具体的原因还需要调查,是该用户的网

6、速过慢吗?页面JS下载慢30页面图片下载慢31该图片花费160秒下载,没有优化,还是带宽过低,还是设备性能问题?ATX进一步分析32http是1个交互,但tcp是漫长的交互,而且中间很多是没有应用负荷的包ATX分析报告33162秒传输了1.5MB的数据,瓶颈主要在网络传输ATX分析报告34Wireshark查看原始包35连续的窗口冻结报文，验证了客户端的性能是下载缓慢的瓶颈多维度分析诊断模型连接失败排名37最慢服务器排名38网银检索到应用服务器响应时间高达10秒!应用优化前后性能对比39高丢包率分析 - 个人应用40个人网银应用虚拟IP在3天内平均达到5%，峰值到12%，需要进一步调查原因。原

7、始包察看41高丢包率分析 银企42网银银企、检索、数据库、应用集群都定时连接以下3个地址高丢包率分析 银企43每隔4分钟定时连接657端口，经了解657是IBM HMC的管理端口，该行为疑似HMC代理主动连接HMC，但连接和失败原因未知，需要系统部进一步调查。高丢包率分析 FTP44时间都在凌晨2点左右，猜测是备份大量数据导致，丢包会延误批处理完成的时间，建议进一步检查丢包的位置。高连接失败分析 SSL服务器45从web_2到ssl_2的ICMP主机不可达通知46是否存在对单一IP地址TCP连接数的限制？Radware后流量统计47没有看到2服务器的流量，推测该服务器应该不可用，但很多业务没有

8、部署负载均衡，导致在应用不可用的时候，还在持续连接web_2服务器。Web服务器Radware后视图48通过3个web服务器的TCP连接数、连接失败数、服务器响应时间和吞吐可以清晰的看到,web_1和web_3的连接数很平稳，而web_2一段 时间无法被连接，直到15:40左右运维人员意识该服务器上的防火墙服务配置错误，关闭后恢复正常。服务器响应时间比较平稳，但可以看到夜间的固定时间会有突发，应该与备份有关，希望可以优化。Web服务器Radware前视图49Radware提供的虚拟地址的TCP连接数、连接失败数一直很平稳。服务器响应时间在夜间的固定时间会有突发，应该与备份有关，希望可以优化。A

9、pp服务器Radware后视图50通过3个App服务器的TCP连接数、连接失败数、服务器响应时间可以清晰的看到：服务器响应时间从凌晨开始急剧升高，并伴随着突发的拒绝连接，很可能与备份消耗了大量的CPU资源有关，希望可以关联网银的基础架构监控，更快的定位和解决该问题。附 Riverbed公司介绍交易延时给用户带来的损失52Riverbed 科技公司2006 年 IPO 后，营业额年均增长年营业额 2013年：公司成立时间2002 成立于：旧金山名员工2600+EnergyRetailBankingManufacturingHealthcareAECTechnologyInsuranceLegal

10、企业客户22,000+78个办公室 个国家/地区39 106%$1B (NASD: RVBD)Riverbed 是行业中的领军企业53Gartner 广域网加速分析报告 唯一的领导者54Source: Gartner (April 2013) Joe Skorupa, Mark Fabbi, Bjarne MunchRiverbed is again a leader in the Gartner Magic Quadrant for WAN Optimization Controllers. After 6 years in a row as a leader, Riverbed stand

11、s alone in the leaders quadrant. “The rate and pace of change in enterprise IT has grown exponentially over the last few years,” said Eric Wolford, president products group at Riverbed. “New IT architectures and shifts in business structure such as cloud computing, virtualization, software defined d

12、ata centers, mobility and the consumerization of IT create opportunities for the business and new challenges for the CIO. Many of our customers are finding that WAN optimization is at the heart of enabling these new approaches without sacrificing performance. With our breadth and depth of optimizati

13、ons and form factors, our customers rely on Riverbed as a strategic partner for ensuring application performance.”Gartner NPM和APM分析报告- 唯一都处于领导象限的公司55Network Performance Monitoring & Diagnostics (NPMD)Application Performance Monitoring (APM)Source: Gartner (March 2014) Jonah Kowall, Vivek Bhalla, Col

14、in FletcherSource: Gartner (December 2013) Jonah Kowall, Will Cappelli全球客户一览56382009 Riverbed Technology. Confidential. IMPORTANT NOTE: The roadmap is for information purposes only and is not a commitment, promise or legal obligation to deliver any new products, features or functionality.The development, release, and timing of any feat