（工商管理专业论文）潍坊网通计费数据联机采集系统的改进与实现.pdf

潍坊网通计费数据联机采集系统的改进与实现 摘要 本文从电信企业实施计费数据联机采集的意义及目的开始，分析了对传统计费 数据联机采集系统进行改进的必要性，运用s w o t 分析法、p e s t 分析法对计费数 据联机采集系统的改进与实现进行了分析研究。实施计费数据联机采集系统为企业 带来了更高的运营效率和更好的服务标准，节约了企业的运营成本，提高了客户服 务质量，对传统计费数据联机采集系统进行改进，可以提高企业业务收入统计数据 的及时性和准确性，为下一步电信企业实现实时计费及市话详单计费做好准备，本 文还分析了计费数据联机采集系统的设计和实现功能，讲述了采集到的计费原始数 据的处理流程，为了更好的实现计费数据联机采集系统，对计算机支撑网络进行了 提速改造，增加了市公司到县分公司的网络带宽，优化了市公司到省公司的网络路 由，为2 0 0 6 年的全省集中计费作好准备。本文还对潍坊网通计费数据联机采集目 前的实现状况和下一步的再次改进发展进行了简要说明，固话网络实施智能化改造 后，计费数据直接从市区四个汇接局采集，采集到的数据包括市话详单数据，可以 满足未来详单计费的需求，四个汇接局交换机机型一致，采集系统接口协议统一， 采集话单格式一致，可以为计费系统提供更加完善的原始话单数据，满足公司业务 发展的需要，为进一步提升公司服务质量和服务水平提供更加有力的支持，增强企 业的核心竞争力。 关键词：计费数据联机采集改进与实现计算机支撑网络 i m p r o v e m e n ta n di m p l e m e n t a t i o nf o rc h a r g i n g d a t ao n l i n ec o l l ec t i o ns y st e m0 fc h i n an et c o m ( g r o u p ) c o r p o r a t i o nl t d w e i f a n gb r a n c h a b s t r a c t s t a r t i n gw i t ht h es i g n i f i c a n c ea n do b j e c t i v eo ft h ea p p l i c a t i o no fo n l i n ec h a r g i n g d a t ac o l l e c t i o na n dp r o c e s s i n g s y s t e mi nt e l e c o m m u n i c a t i o ni n d u s t r y , t h i st h e s i s a n a l y z e st h en e c e s s i t yo fi m p r o v i n gc o n v e n t i o n a ld a t ac o l l e c t i o ns y s t e m f u r t h e r a n a l y s e sa lec a r r i e do u tt oe v a l u a t et h ei m p r o v e m e n ta n di m p l e m e n t a t i o no ft h i ss y s t e m u s i n gs w o ta n a l y s i sa n dp e s ta n a l y s i sm e t h o d s i ti sp r o v e dt h a t 也ea p p l i c a t i o no f o n l i n ec h a r g i n gd a t ac o l l e c t i o na n dp r o c e s s i o ns y s t e mi ni n d u s t r yc a na c h i e v eh i g h e r p e r f o r m a n c ee f f i c i e n c y , b r i n gb e t t e rs e r v i c es t a n d a r d ，m i n i m i z eo p e r a t i o nc o s ta n d i m p r o v eq u a l i t yo fc u s t o m e rs e r v i c e i ti ss h o w e dt h a t 血ei m p r o v e m e n to nc o n v e n t i o n a l s y s t e mc a ni n c r c a s ct h ei n - t i m ee f f i c i e n c ya n dv e r a c i t yo fe n t e r p r i s er e v e n u es t a t i s t i c a l d a t a b yu s eo ft h i ss y s t e mi m p r o v e m e n t ，p r e p a r a t i o n sc a na l s ob em a d ef o rr e a l t i m e c h a r g i n ga n dl o c a lp e r - b i l lc h a r g i n gi nt h et e l e c o m m u n i c a t i o ni n d u s t r yl a t e r t h i st h e s i s a l s oa n a l y z e st h ed e s i g na n da p p l i c a t i o no ft h i ss y s t e ma n d p r e s e n t st h ef l o w c h a r to ft h e c o l l e c t e dc h a r g i n gd a t ap o s t - p r o c e s s i n g i m p r o v e m e n to nt h ed a t a p r o c e s s i n gs p e e do f t h ec o m p u t e r - s u p p o r t e dn e t w o r ki sm a d et oo p t i m i z et h ea p p l i c a t i o no f t h i ss y s t e m t h e n e t w o r kb a n d w i d t h sb e t w e e nt h ec i t ya n dc o u n t yc o m p a n i e sa r ei n c r e a s e da n dt l l e n e t w o r kr o u t e sb e t w e e nt h ec i t ya n dp r o v i n c ec o m p a n i e sa r eo p t i m i z e d ，w h i c hm a d e g o o dp r e p a r a t i o n sf o rt h el u m p e dc h a r g i n gp l a nt h r o u g h o u tt h ew h o l ep r o v i n c ei n2 0 0 6 t h ea p p l i c a t i o no ft h i sd a t ac o l l e c t i o na n dp r o c e s s i n gs y s t e mi nt h ec h i n an e t w o r k c o m m u n i c a t i o n s ( g r o u p )c o r p o r a t i o nl 1 r d w e i f a n gb r a n c hi sb r i e f l yi n t r o d u c e d a n ds u g g e s t i o n sa r em a d eo nt h es y s t e mi m p r o v e m e n ti nf u t u r er e s e a r c h a f t e rt h e r e a l i z a t i o no fa ni n t e l l i g e n tf i x e d - l i n et e l e p h o n en e t w o r k ，t h ec h a r g i n gd a t ac a nb e p i c k e du pd i r e c t l yf r o mt h ef o u ru r b a nt a n d e mb u r e a u s t h eh e n c e c o l l e c t e d d a t a i n c l u d e st h ed e t a i l e dl o c a lb i l l ，w h i c hw i l lm e e tt h en e e do ff u t u r ep e r - b i l lc h a r g i n g s y s t e m t h eh o m o g e n e o u sp r o p e r t i e so ft h es w i t c h i n gp c ，t h es a l n ei n t e r f a c ep r o t o c o l s o ft h ec o l l e c t i n gs y s t e ma n dt h en o r m a l i z e df o r m a to ft h ec h a r g i n gb i l lc a np r o v i d e m u c hb e t t e ro r i g i n a ld a t af o rt h ep r o p o s e dc h a r g i n gs y s t e m t h ei m p r o v e ds y s t e mc a n 髓y w o r d s ：c h a r g i n gd a t a ，。n l i n ec o l l e c t i 。n ，i m p r 。v e m e n ta n d i m p l e m e n t 撕。n ， c o m p u t e r - s u p p o r t e dn e t w o r k y d d妙以沮 m m i o哪m 蛳跚时矾 吾舭 鹳 跫 n e “国彗- 眦协 1 r v蚕鼢雩 h 甜 = 一 黝专；吐 眦 璐 m a c 蓍抢k r e 翻 的 k f b 协担 m 讹眦 咖 n 姐时 ；翟 m m 陀 嘲 w堇龇舳 嘲州 坤 艇1 s j m = 一盎? 锐曲h蛾僦c 蜀 r 出 盱 萨船 n h n 旧a= = 独创性( 或创新性) 声明 本人声明所呈交的论文是本人在导师指导下进行的研究工作及取得的研究成 果。尽我所知，除了文中特别加以标注和致谢中所罗列的内容以外，论文中不包含 其他人已经发表或撰写过的研究成果，也不包含为获得北京邮电大学或其他教育机 构的学位或证书而使用过的材料。与我一同工作的同志对本研究所做的任何贡献均 已在论文中作了明确的说明并表示了谢意。 申请学位论文与资料若有不实之处， 本人签名： 本人承担一切相关责任。 日期：丛签：墨：罡 关于论文使用授权的说明 学位论文作者完全了解北京邮电大学有关保留和使用学位论文的规定，即：研究 生在校攻读学位期间论文工作的知识产权单位属北京邮电大学。学校有权保留并向国 家有关部门或机构送交论文的复印件和磁盘，允许学位论文被查阅和借阅；学校可以 公布学位论文的全部或部分内容，可以允许采用影印、缩印或其它复制手段保存、汇 编学位论文。( 保密的学位论文在解密后遵守此规定) 保密论文注释：本学位论文属于保密在- 年解密后适用本授权书。非保密论 文注释：本学位论文不属于保密范围，适用本授权书。 2 北京邮电大学硕士学位论文第1 页共4 5 页 第一章绪论 1 1 实施计费数据联机采集的意义 1 1 1 提高企业服务质量的需要 随着社会的发展和进步，人们对电信企业服务质量的要求越来越高，而计费服 务属于电信企业服务的重要组成部分，随着企业服务质量水平的提高，对计费的及 时性和准确性也提出了更高的要求。计费数据联机采集系统是电信业务发展和服务 质量提高的迫切要求，它是将传统的每月计费的方式改为实时计费方式的基础。它 必然能向广大电信客户提供客观、公正、准确、及时的计费服务，也能为电信运营 商带来更高的运营效率和更好的服务标准。 1 1 2 电信企业之间竞争的需要 随着电信企业的深化改革，电信企业之间的市场竞争日趋激烈，电信企业要随 时掌握正在形成的大客户，掌握各类客户的信誉，提供不同层次的优惠政策；随着 客户和业务量增长，电信企业要能实时掌握动向，按需增减通讯设备和通讯线路； 对出现异常和恶意话费客户，电信企业应该及时发出提醒和警告，甚至强行停止服 务，以最大程度地减少电信资源的损失。本地交换机数据准确实时地采集处理，是 电信公司节约运营成本的重要方式之一。实施计费数据联机采集可以增强企业的核 心竞争力。 1 1 3 加快企业信息化发展的需要 企业信息化的核心就是全面利用现代信息技术，通过构建信息充分共享的环 境，实现信息资源的高效利用，提升企业管理水平和对市场变化的快速反应能力， 以满足市场的需要和客户的需求，从而达到提高企业效益、全面支撑企业发展战略 的目的。实施计费数据联机采集及计算机支撑网络改造必然会加快企业的信息化发 展步伐。 1 2 实施计费数据联机采集的目的 实施计费数据联机采集，为潍坊网通公司下一步将传统的每月计费的方式改为 实时计费的方式打下了的基础，同时还可以： 实现计费文件的集中维护管理 提高电信计费的实时性、准确性和公正性 改善面向用户的服务 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文第2 页共4 5 页 及时生成话单，掌握用户业务使用情况 配合和促进电信新业务的引入 确保企业资费政策的正确执行 标准的软硬件平台，有利于网络的扩容与升级 1 3 对传统计费数据联机采集系统进行改进的必要性 随着国内6 家基础运营商：中国网通、中国电信、中国联通、中国移动、中 国卫通、中国铁通之间相互竞争的加剧，以及大量虚拟运营商和电信增值业务企业 的加入，要求国内的电信运营企业在经营理念、管理模式和手段上能有一个高层次 的飞跃，这样才能在国内竞争和国际化的竞争中立于不败之地。 传统话单采集模式有联机采集和脱机采集两种。目前国内大部分电信运营商已 经完成话单采集系统的脱机改联机改造，或者是正在改造中。脱机话单采集将成为 联机采集的一个补充和备份存在。可以说这是电信计费帐务系统发展到现在的一个 必然结果，也是传统脱机采集的一个进步。 但是，即便是采用了联机采集系统，传统的采集方式还是存在很多弱点，如： 实时性较差 采集点分散 接口协议复杂 系统可靠性差 话单记录完整性差 话单的内容不够标准 随着电信业务多样化的发展，越来越多的业务需要全实时处理支持，帐务系统 也在往实时方向发展。联机业务已经无法满足日益发展的电信运营商需求。电信运 营商需要对异常呼叫过程的实时监控、固话预付费业务的开展、恶意欠费客户的实 时追查、竞争对手的经营分析、自己推出的新业务执行效果分析等等。以上这些功 能的推出迫切需要帐务系统实时化步伐的推进，而帐务系统实时化的首要条件就是 话务信息采集实时化的实现。 另外，目前潍坊网通交换机的种类和版本众多，传统采集的维护和再开发面临 很大的困难，联机采集系统不得不一一和所有的交换机打交道，涉及到的面比较广。 而一旦涉及到交换机改造、扩容以及升版等工作都会对联机采集系统及帐务系统造 成影响，并带来很多额外的工作量。 因此，对计费数据联机采集系统进行改进是必要的。 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文 第3 页共4 5 页 第二章潍坊网通计费数据联机采集系统改进发展分析 潍坊市网通公司是一个拥有约2 8 0 多万用户的电信大局，以前的市话采集计费 系统是采用磁带脱机处理方式。这种电话计费处理方式存在以下几个方面的问题。 首先，计费数据不及时，造成账务周期过长，这样既影响领导决策的及时性， 也限制了短期租机、可选资费等业务的开展。对客户拨打国际电话等造成巨额话费 不能及时发现，容易形成恶性欠费。 其次，以前的计费系统是单向传递数据，有关的财务报表基本上完全由下级单 位自主上报，缺乏监督检查手段；不能及时生成用户话单，及时掌握用户的业务使 用情况。 第三，每月脱机计费期间，有关人员的手工劳动强度大，时间又紧，同时由于 磁带的质量和脱机过程容易造成数据错误，从而丢失部分业务量。 计费数据联机采集系统处于交换机和支撑共享中心之间，是一种准实时的交换 机计费数据采集系统，它能准确及时地对交换机的计费文件进行采集和预处理，同 时提供管理终端来管理各个采集服务器的采集任务，提供监控终端来监视各个采集 服务器的运行状况。 2 1 潍坊网通计费数据联机采集系统改进的s w o t 分析 2 1 1 优势分析 1 、在电信运营系统中，电信计费系统是主要的支撑系统，占有重要的地位。 计费系统有效、安全地运行，在很大程度上影响着电信运营系统本身的运行效率和 信誉。计费系统历来都是电信运营和管理部门的重点建设和发展系统之一。而计费 数据采集又是作为计费系统的源头，为计费系统提供数据来源，采集系统的性能指 标和特性又对计费系统的性能和指标起着重要的影响，采集系统必然伴随着计费 系统的改进与发展不断的进行改进完善。 2 、电信企业拆分使得电信企业之间竞争日益加剧，当前的电信企业竞争已经 从网络优势的竞争转变为客户服务的竞争，采用联机计费采集系统可大大提升电信 企业的服务能力，解决话单及时查询问题，避免话费纠纷，缩短帐务周期，防止欠 费，同时，自动采集话单，避免手工操作失误等。 3 、潍坊网通早期建成的企业内部计算机支撑网络延伸到各个县市区公司及乡 镇，采集设备可以方便的与计算机支撑网络进行连接。 4 、潍坊网通公司具有先天的传输资源，采集数据传输的带宽资源充备。 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文 第4 页共4 5 页 2 1 2 弱势分析 1 、目前的计费数据从交换机端局采集，而交换机端局地理位置比较分散，大 部分端局在县分公司，还有少量端局在乡镇，采集点分散，采集数据传输依赖本地 计算机支撑网络，计算机网络的传输性能制约着计费数据传输的速度及质量。 2 、计费数据从交换机端局采集，采集设备比较分散，给维护工作带来很大困 难。由于当前电信企业减员增效，维护人员缺乏，分散的采集设备得不到及时维护。 3 、计费数据联机采集系统涉及面广，由于采用的是c l i e n t s e r v e r 结构的处理 系统，包含的内容有操作系统、网络传输软件、数据库管理系统、客户系统、通信 网关软件、计费账务应用软件等，目前没有专门的i t 队伍对采集系统进行支撑， 出现故障时，各维护单位相互推诿现象严重。 2 1 3 机遇分析 1 、潍坊网通2 0 0 5 年实现固话智能网改造，采用汇接局建网后，由汇接局统一 实现本地网的市话详单功能及其他数据采集功能，将来可以直接在汇接局进行计费 数据联机采集，送支撑共享中心帐务系统处理，不必从交换机端局采集计费数据。 2 、计费帐务系统在2 0 0 5 进行了升级版本的改造，实现了日结账功能，为下一 步实现实时计费做好了准备，从而要求计费数据联机采集系统也应该做到计费数据 的实时采集，以便将来实现实时计费。 3 、新业务的不断涌现、电信改革和整体上市使得电信运营商将关注点放到业 务支撑系统和内外部资源的整合与管理上。i t 规划、运营支撑系统、经营分析系 统、c r m 、增值业务平台等成为建设热点。 4 、省公司计划在2 0 0 6 年实现全省集中计费系统工程，计费数据联机采集系统 必须加以改进以适用全省集中计费系统的要求。 5 、中国网通集团于2 0 0 5 年开始进行e r p 系统的整体规划建设，使用终端延伸 到县分公司。 2 1 4 威胁分析 l 、最主要的威胁来自日益激烈的市场竞争，白热化竞争的市场不可能停下来 等你发展计费系统及计费数据的采集，如何在满足现状与实现长远目标之间求得良 好的平衡将是一个重要的课题。 2 、将来实现市话详单计费后，采集到的计费数据量将比目前大许多，对采集 设备及采集数据的存储都提出了新的挑战。 3 、潍坊网通在支撑系统的投入相比竞争对手略有逊色，主要竞争对手移动及 联通公司全部实现实时计费。 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文 第5 页共4 5 页 2 2 潍坊网通计费数据联机采集系统改进的p e s t 分析 政治的法律的( p o l i t i c a l ) ： 令国家关于加快国民经济和社会信息化建设的规划为电信部门进行企业内部 支撑系统建设提供了良好的政策环境和发展机遇； 令电信企业拆分使得电信企业之间竞争日益加剧，另外，由于我国加入了 w t o ，电信市场将会逐步开放，一些国外的电信运营公司也会进入中国电 信市场，这就使得我国的电信市场充满了激烈的竞争和挑战，企业要发展， 就必须增强企业的核心竞争力来迎接竞争和挑战，对计费数据联机采集系 统进行改进可以增强企业的核心竞争力。 经济的( e c o n o m i c ) ： 计费数据联机采集系统负责对本地交换机数据准确实时地采集处理，是电 信企业节约运营成本的重要方式之一； 中国电信的南北拆分，中国网通的整体实力缩减，严峻的经济压力迫使各 省市分公司更注重其经济型业务的统计与审核。从粗放型业务到紧缩型业 务的转变，需要电信企业在业务收入统计数据的及时性、准确性方面有所 加强，实施计费数据联机采集系统提高了业务收入统计数据的及时性、准 确性。 社会文化的( s o c i a l ) ： 冷移动运营商早已实现实时详单查询，促使用户对固话计费要求提高，要求 固话运营商实现实时计费及查询的呼声越来越高，而要实现实时计费及查 询，必须改进目前的计费帐务处理系统及计费数据采集系统； 伴随着企业信息化系统建设的热潮，电信企业更加重视企业内部支撑系统 的建设及投入。 技术的( t e c h n o l o g i c a l ) ： 夺计算机技术飞速发展，计算机设备更新换代速度加快； 数据库技术、计算机网络技术、通信技术的飞速发展以及它们之间的相互 融合使得建立计费数据联机实时采集系统成为可能。 固话网络实施智能化改造后，汇接局交换机具备了提供市话详单数据的能 力，可以满足联机采集系统实时采集的要求。 随着市场竞争形式日趋激烈，为前台部门及时提供日统计、日分析服务的需求 越来越迫切，必须不断改进计费数据联机采集系统以保障其优质、高效、安全可靠 运转，为计费系统提供及时、可靠的数据来源。计费数据联机采集系统为企业带来 了更高的运营效率和更好的服务标准，节约了企业的运营成本，提高了客户服务质 量。实施计费数据联机采集系统并不断的对其进行改进对于电信企业是必要的。 潍坊网通计费数据联栩采集系统的改进与实现 北京邮电大学硕士学位论文 第6 页共4 5 页 2 3 国内计费数据联机采集系统的发展阶段分析 2 3 1 初期阶段 9 0 年代初期，联机采集系统伴随着交换机进入国内市场，多是由各交换机厂 商自行开发的基于交换机的专用联机采集设备，其主要缺点是价格昂贵、兼容性差、 界面不友好，不便于维护。 2 3 2 中期阶段 9 0 年代中后期，国内厂商逐步介入联机采集领域，通用的联机采集产品开始 出现，但此时多为整体引进s u n 、i b m 、d e c 或h p 等厂商的平台，进行简单集 成，设备价格较为昂贵，功能单一，没有统一的监控管理手段，多靠机房维护人员 进行手工维护，但相对于初期阶段系统兼容性有所提高，价格也略有下降。 2 3 3 目前阶段 2 0 0 0 年后，随着国内厂商的逐步成熟、运营商对采集系统认识的提高及电总 有关采集的各类规范出炉，联机采集系统开始向系统化、标准化方面发展，并形成 了联机采集、预处理及系统监控三大模块，接入向p c 服务器、工控机等价格低廉 的平台过渡，操作系统一般为u n i x 、w i n d o w s 或l i n u x 平台，组网架构也非常灵 活，此时，联机采集系统的功能较为齐全，用户能以较低廉的价格从集成商处购买 门类齐全的联机采集产品。 2 3 4 发展趋势 上面各个阶段，联机采集的核心技术均为与交换机接口一块，随着交换机技 术、计费系统及通信业务的发展，基于软交换及i p 方式的采集将成为主流，数据 源接口将越来越简单，因此联机采集系统必将从以接口为技术核心逐步过渡到以业 务甚至以客户为核心，成为一个严格意义上中间件( m e d i a t i o n ) 软件，完备的预 处理功能、实时性、灵活的采集及分发能力将成为评价联机采集系统的主要指标。 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文 第7 页共4 5 页 第三章计费数据联机采集系统设计分析 3 i 通讯协议 系统采用f t a m x 2 5 或f t p i p 协议接收交换机输出的原始计费数据。f t a m 是 有关文件传送、访问及管理的协议。在f t a m 中定义了六类服务原语( 服务开始 结束，文件的激活非激活，文件数据传送，文件管理，数据传送控制，连接控制) 。 数据传送控制服务原语( f _ c h e c k ，f _ r e s t a r t ，f _ r e c o v e r ) 对文件数据传送提供 了检错纠错重传等功能，从而充分保证了文件传送的安全性和可靠性。 在o s i 七层体系结构中，f t a m 是用于执行应用业务特有的通信功能的a s e ( 应 用服务元素) 。f t a m 在o s i 中的地位如下图所示。 交换机端采集机端 图3 - 1f t a m 协议 为了处理各种计算机多种多样的文件，f t a m 中使用经过树型结构模型化的标 准文件结构。在树的各节点中，附加了节点名和作为文件内容的数据单元( d u ： d a t au n i t ) 。另外，为了对文件进行管理，f t a m 使用的文件除了其内容外，还包 含有表示文件特征的属性信息，如文件名，文件允许的操作，能够操作的用户， 文件类型，文件的作者以及文件编制的日期时间等。 f t a m 采用i n i t i a t o r r e s p o n d e r 方式。i n i t i a t o r 方负责发起向r e s p o n d e r 方的连接请求，一旦连接建立，无论是i n i t i a t o r 还是r e s p o n d e r 都可向对方发 出服务请求。在本系统中，我们将采集机作为i n i t i a t o r 方，交换机作为r e s p o n d e r 方。 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文第8 页共4 5 页 f t a m 遵循o s i 寻址规则。f t a mi n i t i a t o r 及r e s p o n d e r 方由其在o s i 目 录( x 5 0 0 或静态表) 中的d n ( d i s t i n g u i s e dn a m e ) 和其表示层地址p a ( p r e s e n t a t i o na d d r e s s ) 标识。p a 由表示层s e l e c t o r ，会话层s e l e c t o r ，传 输层s e l e c t o r 和下层子网的网络地址组成。 为了提供f t a m 服务，首先要启动f t a m 服务，接着选择( s e l e c t ) 必要的文 件，打开这个文件( f i l eo p e n ) 。然后进行应用所要求的文件的传送，并进行文件 的读出写入等的动作。必要的数据传送结束后，关闭文件( f i l ec l o s e ) ，释放文件 ( f i l ed e s e l e c t ) ，f t a m 服务结束。 3 2 系统结构 计费采集中介平台采用了c m i s e 和f t a m 相结合的技术，为保持系统整体结 构的完整性而又能方便地接入多种交换机型和适应上述的多种通信协议，采用了两 层与三层相结合的分层的模块化c l i e m s e r v e r 结构，应用层基于f t a m c m i s e 、 f t p 等协议，通信层基于x 2 5 i p 等协议，物理层则可以支持e 也e m e t 瓜s 2 3 2 d d n 等。为用户提供平台独立，一致的数据采集接口。 潍坊网通计费数据联机采集系统的改进与实现 交换机 采集机 网络服务 接口卡 及服务 传 输 应 用 接口卡 及服务 代 理 漭 呻 薄 甜 告警界面 管理者ii 传擎 接口卡 及服务 d h c - b m s 系统组成 资料来源：北京东华合创电信联机采集解决方案 图3 2 联机采集系统组成 3 3 采集方式 ( 1 ) 分散采集 分散采集方式也称直接采集方式，也就是说采集机和交换机之间直接相连，不 需要经过广域网。采集到的话单再经过广域网传输到计费处理中心。一般情况下， 一台采集机采集一台交换机的话单，在同一机房有多台交换机的情况下，也可采集 多台交换机的话单。 优点：有较高的系统可靠性，采集机的故障只对相关的交换机的采集工作有影 响，整个采集系统不会因一台采集机的故障而受严重影响；采集系统和交换机通信 的可靠性高；对广域网的要求灵活，可采用专线，也可以采用i n t e r a c t 或者企业内 部计算机支撑网络。同时在上传网络故障的情况下，仍然可以采集和缓存原始话单 数据。 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文 第1 0 页共4 5 页 i 口 f i 粕 5 交换机 ，l 、 哿。罐镪m 幽 蔟熟 采黼 f 渊 资料来源：北京东华合创电信联机采集解决方案 图3 3 分散采集连接示意图 ( 2 ) 集中采集 集中采集方式也称远程采集方式，采集系统一般集中配置，通过广域网采集交 换机话单，再通过局域网传送到计费系统。采集机一般采用集群配置以提供系统可 用性，采集系统到广域网的接口可以采用x 2 5 卡和调制解调器直接访问d d n 专 线的方式，也可以采用以太网经过路由器到广域网的方式，路由器必须支持x 2 5 协议。 优点：需要比较少的设备，投资比较低；设备利用率较高；集中式系统，管 理相对方便。 潍坊网通本地网计费数据联机采集系统采用集中采集方式，采集到的数据通过 计算机支撑网络传输到市公司支撑共享中心的2 台采集服务器；长途计费数据联机 采集系统采用分散采集方式，采集到的数据传输到省公司支撑共享中心和市公司支 撑共享中心各一份。 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文第l l 页共4 5 页 采集软 f r a m 集中采集连接示意图 资料来源：北京东华合创电信联机采集解决方案 图3 - 4 集中采集连接示意图 第四章计费数据联机采集系统实现功能分析 计费数据联机采集系统包括计费数据采集、采集监控管理、采集传送、分检标 准化等若干功能子系统。 4 1 计费数据采集 负责定时将e w s d 、s 1 2 4 0 、5 e s s 、c & c 0 8 等交换机上生成的未采集文件， 无重复、无丢失地拷贝到直采机上，同时把已成功采集的文件删掉或改变其状态。 对链路、文件未产生等错误，程序自动恢复。采集子系统包括以下功能模块： ( 1 ) 通信 该子模块提供实际的到交换机的物理通道。在已建立的物理通道上可分为命令 通道和状态通道等类型。计费命令通过命令通道下达给交换机，交换机报告信息通 过状态通道传送出来。 对于特定型号的交换机需要采集前置机，完成与交换机的交互操作，来屏蔽各 种交换机的异构性，从而使采集模块向客户提供一个统一的界面。 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文 第1 2 页共4 5 页 ( 2 ) 数据采集 负责定时( 周期参数可调整) 将e w s d 、s 1 2 4 0 、5 e s s 、c & c 0 8 等交换机上生成的 未采集文件，无重复、无丢失地拷贝到直采机上同时把已成功采集的文件删掉。对 链路、文件未产生等错误，程序自动恢复。 文件命名按文件类型+ 局号+ y y y y m m d d h h ( m m ) 等组成，如采用文件名格式： 长途文件名格式d d dy y y y m m d d h hl i s t x x x 市话详单文件名格式d d d j l y y y y m m d d h h l i s t x x x a a a 市话跳次文件名格式m t r - - y y y y m m d d l i s t x x x a a a s s 其中：x x x ：序列号，s s ：交换机代码a a a ：区号 交换机 直采机 资料来源：北京东华合创电信联机采集解决方案 图4 1 联机实时采集模块在系统中的位置 通过某种方式获取到下载任务后，通过通信子模块向交换机发送计费命令，根 据交换机所采用的文件传输协议( n f s 、f t a m 、f t p 等) 得到原始话单文件，然 后通知合适的分捡进程进行处理。 ( 1 ) 提供自动及手工两种文件采集方式 ( 2 ) 提供界面给操作人员编制计划做自动定时、周期的文件采集 ( 3 ) 系统根据已编制的计划自动给交换机发送文件下载命令 ( 4 ) 若失败则重复执行五次，若还不成功则写失败标志保存，并告警提示操作 人员是否需继续尝试执行；若成功则执行下一计划。 ( 3 ) 传送 将计费数据文件无重复、无丢失地提交给集中分拣处理模块。 ( 4 ) 备份 对已成功传送的文件进行备份。 ( 5 ) 日志 按格式记录所有操作命令、成功操作、失败操作信息，为日后排除故障提供依 据。日志信息记入命令或错误文件。 潍坊网通计费数据联胡采集系统的改进与实现 北京邮电大学硕士学位论文 第1 3 页共4 5 页 包括两部分： 数据采集日志 采集机获取交换机原始文件的相关信息，日志信息内容包括日志代码、采集机 名称、进程号、采集起始时间、采集终止时间、采集时长、采集平均速率、采集状 态( 正常、中断或重采等) 、文件名称、文件类型、文件大小、采集结果( 正常、 中断等) 及交换机标志原始文件的信息。 数据传输日志 数据文件传输到中心服务器的相关日志信息。日志信息内容包括日志代码、采 集机名称、文件名及所在目录、传输终点服务器名称及目录、文件大小、传输时间、 传输结果( 正常、中断等) 、续传次数等。 ( 6 ) 监控代理 向监控程序汇报运行状态。 4 2 数据预处理 4 2 1 实时分拣 对原始计费数据文件进行分拣，生成标准话单。在对原始计费数据文件进行分 拣时完成对文件、记录格式错误的处理，对错单进行规律分析并报告、告警。交换 机产生的计费记录文件中可能包括了不正确记录或计费记录中有不正确记录项。计 费记录错误大致分为三类：错误记录，无效记录，资料缺损记录。 ( 1 ) 分拣标准化：负责实时完成计费文件的分拣，并按预定义格式生成文件。 由于不同交换机的原始话单格式、字长等也不同，所以有必要进行标准化处理，产 生标准一致的话单，为计费处理打下基础。预定义格式为：主叫、被叫、开始时间、 时长等。 ( 2 ) 异常处理：过滤出错误、异常记录，并向监控程序汇报。对可纠错的错误 进行纠错，把纠正好的记录转换成标准统一格式的记录输入正确话单文件。 ( 3 ) 异常统计：对错误、异常记录进行规律分析并报告、告警。交换机产生的 计费记录文件中可能包括了不正确记录或计费记录中有不正确记录项。计费记录错 误大致分为三类：错误记录，无效记录，资料缺损记录。错误记录主要包括以下几 种情况：无关键项，记录格式不对( 包括整个记录长度不对，记录项长度不对，记 录项顺序紊乱等) ，记录项中有非法字符，通话时间超长，被叫号码错误，长途费 率等级制错误等。无效记录主要指通话时长为零和重复的记录。资料缺损记录主要 指缺少某些资料的记录，如路由资料等。 对于规律性错误应及早及时处理。对于错误情况，建立一个统计表，记录发生 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文 第1 4 页共4 5 页 错误的情况，并设定阈值，自动向管理单位报告。 4 2 2 实时划价 根据标准话单、业务计费规则、结合优惠规则( 主要考虑与时间有关的优惠： 时段和节假日) 划价，生成每次使用该项业务所花的费用的标准清单，同时按天对 清单进行累加生成日帐单( 按号码) 。在划价、累加生成帐单时完成对高额清单、 号码帐单的报告、告警，产生高额告警信息送系统监控台。 联机数据采集预处理子系统的任务是将话单数据( 包括市话和长话话单) 从交 换机端自动、及时地采集出来，通过网络传输到联机计费平台上的文件服务器上， 并对其进行计费、分拣到计费处理平台。 4 3 采集安全管理 计费数据联机采集系统运行的安全、稳定是计费系统可靠运行的基础。在联机 采集系统自动运行、自动恢复的基础上，提供系统实时监测的手段，及时反映采集 错误和机器状态的基本情况，通过数据显示和图形显示及声音报警，为管理人员迅 速处理系统异常和错误情况提供有力的保障。 通过在采集机上运行的监控a g e n t ( m o nc l i e n t ) 收集机器状态信息，定时向 中心汇报。通过采集进程( g e t a m a 、g e t m e t c r ) 内嵌的状态信息a g e n t 及时汇报进 程状态信息。 m a n a g e r ( m o ns e r v e r ) 通过与监控进程通信完成对采集机上的各个进程汇报 的消息和运行状态的收集，并插入相关的表中。 v i e w ( m o n i t o r ) 实时显示运行状态。可以实时反映各采集机在采集过程中的 各种错误信息，提供图形显示和数据显示两种方式，可以实时采取颜色和声音报警， 可以实现数据实时刷新和非实时的历史数据查询。 监控界面m o n i t o r 采用w i n d o w s 操作系统平台上自编的显示程序： ( 1 ) 可以实时反映各采集机在采集过程中的各种错误信息，提供图形显示和 数据显示两种方式，采取颜色和声音报警，实现数据实时刷新和非实时的历史数据 查询； ( 2 ) 可以实时反映每个交换机是否注册，注册后机器是否运行正常，提供图 形显示和数据显示两种方式，采取颜色和声音报警，实现数据实时刷新和非实时查 询。 “采集进程监控”模块是整个采集监控系统的主监控界面，它包括了对系统所有 主要错误的定时检查和报警，采集监控系统在无人控制时应始终保持这个页面处于 工作状态。“采集进程监控”的页面会进行自动的刷新，刷新的时间间隔可以在“系 统参数”配置模块进行设置。 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文第1 5 页共4 5 页 资料来源：潍坊网通联机采集监控系统 图4 - 2 采集程序状态监控界面 使用说明： 如上图示，每个图标代表一个交换机的采集进程，当交换机的采集进程出现某 种错误时，系统将自动将代表这个交换机采集进程的图标设置为出错状态。用鼠标 点击这个图标可以查看错误信息的列表。 具体监控内容如下： 采集端口 对交换机侧采集端口进行冗余配备，当某一端口发生故障时，监控服务器可通 过备用采集机启动冗余端口进行连接，与对应交换机通讯并采集计费文件。 采集服务器 本地网联机采集系统设置2 台采集服务器，对每台进行冗余连接。当主采集服 务器发生故障时，备用采集服务器启动利用冗余端口，与对应交换机通讯并采集计 费文件。长途联机采集系统设置一台采集服务器，与对应交换机通讯并采集计费文 件。 系统资源 在主机上的设备监控进程发现c p u 负荷过高、内存占用过满而频繁发生对换、 数据库表过满或数据库磁盘过满时，会产生相应告警信息。 应用程序 在应用进程内加入汇报机制，在每台主机上加入监控及消息转发进程，由应用 进程定时向监控进程汇报心跳，表示自己在正常活动，如果应用进程逾期不向监控 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文 第1 6 页共4 5 页 进程汇报，表示该进程已经异常，监控进程会杀死该异常应用进程并重起该进程。 4 4 系统容错 当采集机某一端口或链路发生故障时，系统容错功能模块将通过备用冗余连接 端口与对应交换机进行通讯，并采集计费文件。同时备用冗余连接端口还可用于在 一条链路不能满足采集速度要求时，自动启用从而完成数据的同时采集，起到负载 平衡的作用。 第五章联机采集计费数据预处理流程分析 计费数据预处理的质量决定着计费帐务处理的质量及准确率。 5 1 联机采集计费数据总体处理流程 1 、交换机生成计费文件，数据采集子模块采集交换机计费文件。 2 、按照相应的传输协议，通过数据采集链路将数据传输至采集服务器。 3 、根据数据采集校验规则对采集数据进行完整性和正确性校验。如果数据异 常，对有误数据重新采集。 4 、按照格式转换规则对交换机原始数据进行标准格式转换，形成标准格式数 据。 5 、对标准格式数据进行正确性判断，对异常数据进行分析。 6 、对正确数据进行批价入库处理。 7 、出具日统计分析报告。 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文第1 7 页共4 5 页 图5 1 联机计费总体工作流程 5 2 数据采集处理流程 1 、交换机文件生成：每天0 0 ：0 0 通过定时强制生成文件，确保每天数据为 0 0 ：o 卜2 4 ：o o ，保证了联机计费的日分析要求。 2 、对交换机计费文件的生成、交换机到采集服务器的数据采集链路工作状态 和文件传送正常进行2 4 小时监控和障碍处理。 3 、为确保文件传送正常，对交换机生成的原始计费文件与计费服务器接收到 的数据文件进行对比检查。 4 、采集服务器将接收到的计费文件进行文件名标准化处理。 潍坊网通计费数据联机采集系统的改进与实现 北京邮电大学硕士学位论文 第1 8 页