湖南省小灵通集中计费系统业务规范

小灵通省中心采集分析系统业务需求第2页目录1总则611背景612概述613系统边界定义7131系统的业务边界7132系统的功能边界71321系统包括的处理和管理功能71322系统不包括的功能72系统处理流程分析83系统功能模型931系统功能模型概述932系统功能模型的分解的描述9321采集管理93211数据文件的采集103212数据文件的校验103213异常处理及错误恢复113214数据文件的存储和备份123215监控与告警123216数据文件的传输123217数据采集日志13第3页322预处理133221模块功能定义133222业务处理功能133223业务处理描述1432231格式识别转换1432232话单校验1432233文件级校验1432234话单级校验1432235重单检查1532236标准化输出1532237预处理日志记录1632238模块功能约束16323数据入库173231功能描述173232业务处理功能173233业务处理描述1732331入库处理1732332回退处理1732333入库日志17324数据分发管理173241分发处理183242分发校验18第4页3243传输管理193244分发日志19325资料管理子系统193251系统参数管理1932511数据采集配置参数管理1932512预处理配置参数管理2032513文件分发配置参数管理203252模块功能约束20326查询统计子系统203261查询处理2032611话单记录查询2032612业务处理跟踪查询2132613统计数据查询2132614参数查询2132615日志查询2132616查询方式2132617查询权限管理2232618查询安全机制223262统计处理2232621统计类型2232622话务量统计2232623收入情况统计23第5页32624日志统计2332625错单统计2332626指标体系2332627统计设置24326271统计报表的设置24326272统计要素的设置24326273统计要素与统计报表的关联设置2432628处理方式24326281实时统计处理24326282人工激活统计处理（非实时统计）2532629输出方式25326210实现方式253262101固定报表253262102灵活报表253262103即席报表25327回退子系统263271回退263272再处理273273回退日志27328审核校验283281审核校验业务处理流程描述283282审核校验方法30第6页3283审核校验功能模块303284审核校验功能模块描述3032841采集的审核校验3032842格式化的审核校验3132843预处理的审核校验3132844清单入库的审核校验3232845数据分发的审核校验3232846对交换机的容错检查33329集中监控、代理子系统333291告警级别的划分343292集中监控、代理功能模块343293集中监控功能模块描述3532931系统资源监控3532932数据库资源监控3532933数据库死锁监控3532934采集处理监控3532935预处理监控3532936数据分发监控3632937接口系统监控3632938接口异常监控3632939日志监控36329310信息告警36第7页329311网络监控36329312交换机的监控373210接口子系统3732101省级与智能网SCP平台的接口3732102与省长途计费系统的接口3832103与网间结算系统的接口3832104与各地市本地网计费帐务系统的接口383211应用系统管理子系统3832111系统信息发布3832112系统安全管理38321121操作员管理38321122应用系统权限管理39321123操作员日志管理39321124操作员信息查询39321125打印设置39321126系统安全验证40321127数据库安全管理4032113管理数据40321131在线数据备份40321132离线数据备份40321133备份控制4132114版本控制41第8页321141系统动态组件配置41321142系统版本自动更新41第9页1总则11背景随着电信运营商的不断增加，电信市场竞争的日益激烈，湖南电信公司为了在激烈的竞争中立于不败之地，在未获得信息产业部移动运营许可证的情况下，必须通过开展无线市话系统工程的建设和运营，面向中低消费群体，来全方位的与移动、联通等移动运营商展开竞争，以争夺未来的移动市场份额。到目前为止，湖南省本地网计费帐务系统、“97“号线系统、1000号客户服务系统工程的建设工作已经全面完成，同时省长途集中计费系统的建设也已经完成，省集中综合结算系统的建设工作也在中国电信集团公司的统一部署和规划下正在进行之中，在此基础上本着充分保护投资的原则，充分利用好已建本地计费帐务系统、“97“号线系统、1000号系统、省集中综合结算系统的软硬件资源，花最短的时间和最小的投资完成省小灵通集中计费系统的建设，是比较符合湖南省目前的实际情况的建设思路。小灵通分为预付费与后付费两种业务，通过把后付费业务模拟成预付费业务的建设思路，具有减少采集点、业务处理更加灵活的优点。因此，本规范是基于这种建设思路下编写的。12概述根据湖南省目前的实际情况，需在省中心建设小灵通省集中采第10页集分析系统，以满足将来的小灵通业务发展的需要。省集中采集分析系统是湖南电信小灵通经营活动中的核心任务之一，小灵通省集中采集分析系统将和省小灵通SCP平台、省长途计费系统、省计费结算系统配合完成小灵通的业务计费、结算等工作。今后的竞争主要是服务质量上的竞争，服务质量的具体体现包括了网络维护质量和经营服务方面的质量。客户/用户对服务的满意度是衡量服务质量的一个综合指标。而客户/用户对服务的满意度包括了对中国电信在对用户提供的计费处理方面的服务满意度。小灵通省集中采集分析系统是支撑小灵通业务的重要技术手段。与已投入使用的“本地网计费帐务系统”等支撑系统相配合，它可向用户提供实时、准确、统一的服务。保证企业的收益、保证服务质量和标准，提高企业在开放的市场中的竞争力。13系统边界定义小灵通省中心采集分析系统的边界定义从两个方面来描述1系统处理的业务种类2系统包括的处理功能。131系统的业务边界小灵通省中心采集分析系统覆盖的业务只包括小灵通业务，不包括固定电话业务。第11页132系统的功能边界1321系统包括的处理和管理功能小灵通省中心采集分析系统包括的功能见系统功能模型的描述。1322系统不包括的功能小灵通省中心采集分析系统不包括以下处理和管理功能1所有小灵通业务话单的计费。2与用户资料无关的优惠政策和与用户资料有关的优惠政策。3话单话费的明细分离。4小灵通用户资料的管理。第12页2系统处理流程分析系统的处理流程是对SCP平台的清单数据进行采集，经过系统内部处理，实现数据分发。业务处理如下所示小灵通省中心SCP采集格式化处理预处理清单入库数据分发第13页第14页3系统功能模型31系统功能模型概述小灵通省中心采集分析系统从功能上划分为如下几大部分采集管理预处理管理数据入库管理数据分发管理资料管理查询统计管理回退管理审核校验管理集中监控、代理管理与周边系统的接口管理应用系统的系统管理32系统功能模型的分解的描述321采集管理数据采集子系统能够从SCP平台可靠地采集各种原始计费记录，并将采集来的数据通过网络传送到小灵通省中心采集分析系统。依据小灵通计费业务的要求，针对国内电信企业计费采集系统的现状和未来发展的需要，数据采集子系统应包含如下主要功能第15页数据文件的采集数据文件的校验异常处理及错误恢复数据文件的存储和备份监控与告警数据文件的传输数据采集日志3211数据文件的采集数据采集模块通过建立数据采集的通信链路，从采集数据源采集原始计费数据，采集来的数据以文件的形式存放到指定的目录。数据采集模块采用TCP/IP、FTP、FTAM/CMISE等标准协议进行计费文件采集，底层支持X25、TCP/IP协议，数据源的数据可以是文件形式也可以是数据流形式。数据采集模块对数据源应提供统一的采集接口协议，支持不同业务类型的计费数据源采集，并能够适应各种数据源，方便系统的升级。数据采集子系统支持联机实时采集、定时采集和脱机采集等采集方式。数据采集主要以联机实时或定时采集方式实现，脱机采集作为备用方式。第16页对于不同的采集点，可以根据要求通过配置实现不同的采集方式，制定不同的采集计划，并且可以对采集周期进行灵活的设置。对于采集到的原始数据文件，支持通过指定规则改名。3212数据文件的校验为了保证采集数据的正确性、完整性和一致性，应对原始数据文件进行校验对于原始数据文件依某种规则命名的数据源，在一轮采集之前，通过读取文件属性的方式，先进行文件探测。如果探测到数据源中A文件以后的连续N个文件不存在，则认为A文件后的数据文件还未生成。根据探测的结果，生成待采集文件列表和漏号文件列表。如果探测到某个文件的长度为0，则隔一段时间后重新读取其属性。若K次以后，该文件长度仍为0，则认为该数据文件是一个正常的空文件，将其加入待采集文件列表。对于原始数据文件通过标记表示文件状态的数据源，则通过读取标记生成待采集文件列表。采集过程依照待采集列表中顺序，将源文件采集到一个临时目录。源文件采集下来后，取目标文件的属性，与源文件属性比较，如果文件大小等不一致，则告警，并重新采集该源文件；否则计算目标文件的校验值，并与前一文件的校验值比较，如果校验值相同，则告警，并在目标文件名上添加重复文件标记，将其转移到异常文件目录。第17页通过文件校验以后，将目标文件转移到目标目录，并记录文件校验值，标记或释放源文件，记录日志，接着进行下一个文件的采集过程。在采集文件的过程中，如果出现异常，程序将进行告警。如果是可以自动恢复的故障，则进行故障恢复处理。如果故障成功恢复，则重复执行上一步，否则程序休眠一段时间后，重新开始采集当前文件。3213异常处理及错误恢复在数据采集过程中，可能出现多种异常情况，例如连接中断、数据源资源不可用、底层协议出错、数据源正在生成的文件被采集、采集程序被异常中止、数据源文件漏号、重复采集等。对于连接中断的情况，采集程序应有试图与交换机重新建立连接的功能。连接建立后，重新执行发生异常的操作。如重试一定次数后，连接仍未建立，则休眠一段时间，等待维护人员处理故障。故障恢复后重新开始采集过程。对于交换机正在生成的数据文件被采集、数据源文件漏号、重复采集的情况，可以通过采集文件的校验过程发现，并进行重新采集。为了避免人为异常中止采集程序（例如KILL采集进程），造成状态不一致，采集程序在采集到一个文件并通过校验后，进行状态修改时，会暂时屏蔽一些系统信号，确保状态修改的顺利完成。第18页为了防止因外界因素（例如电源中断引起停机）造成采集下来的数据文件已被移入目标目录，但交换机上的文件未释放而造成的状态不一致，采集程序需要对采集到的数据文件计算校验值，并与前一个文件的校验值比较。如果校验值相同说明是重复文件，将其移入异常文件目录，并释放交换机中的数据文件，从而使采集状态保持一致。对于其它异常，如果协议可恢复，则自动恢复故障后执行出现异常的操作。否则休眠一段时间，等待维护人员处理故障。故障恢复后重新开始采集过程。当数据源支持断点续传时，如果因异常引起文件传输中断，异常恢复后，文件传输将从断点处恢复。对于采集中出现的各种异常情况，采集程序均会准确及时地向监控平台发送告警信息，并记录日志。3214数据文件的存储和备份数据采集子系统具有一定的数据备份管理功能，能对各个数据源的原始数据文件存储目录、备份目录进行单独指定。能对备份数据文件进行压缩、合并、提取等管理。对于采集到的原始数据文件，采用“数据源编号文件序号附加信息”的方式命名，从而保证原始数据文件命名的唯一性。第19页3215监控与告警数据采集系统能够向监控系统提供监控信息，包括交换机中计费数据文件的状态（文件名、文件大小、创建时间等）和当前采集文件的状态（源文件名、目标文件名、文件大小、源文件创建时间、开始采集时间、采集耗时、采集速率、采集进度等），以及采集链路状态、数据源漏号情况、采集异常等信息。当备份数据过多，或当传输网络故障，采集数据因不能及时传输导致硬盘剩余空间不足时，告警监测模块能及时产生告警信息，提醒操作人员采取措施。当硬盘剩余空间达到某一阀值时，可以根据设置依照文件生成时间和文件序号自动删除较早的备份文件。数据采集系统还能够接收监控系统的控制指令，如采集、传送程序的启动、停止和复位、底层协议的启动和停止等，并进行相应的操作。3216数据文件的传输在计费数据文件采集下来后，需要采用TCP/IP协议传送到省中心分拣系统平台，进行计费处理。计费数据文件的传送支持断点续传和自动重传功能，能在传送过程中进行压缩和加密传输。在原始数据文件发送到中心系统的过程中，为了保证数据文件的唯一性和准确性，系统要有如下措施。1）对数据源进行统一编号，原始数据文件采用“数据源编号第20页文件序号附加信息”的方式命名，从而保证原始数据文件命名的唯一性。2）在采集原始文件时，对原始文件计算校验值并与前一文件进行比较，避免文件的重复采集。3）在数据文件发送的过程中，对每一台交换机产生的原始数据文件依文件序号发送，接收完文件后，计算文件校验值，与前一文件的校验值比较，从而保证数据文件传输的唯一性。4）原始文件传输完毕后，通过核对传输两端的文件大小、文件校验值等保证文件传输的正确性。3217数据采集日志数据采集、传输模块对采集、传输操作，以及状态信息进行了详细的日志记录。包括日志时间、采集源、文件属性（文件名、文件大小等）、传输的起止时间、传输速率、操作状态（成功、失败、重传等）等信息。322预处理3221模块功能定义原始数据采集后，为批价进行的格式转换、话单按地市分离、标准化输出等各种准备工作。第21页3222业务处理功能预处理功能由以下关键业务处理点组成。编号关键业务点1格式识别转换2话单按地市分离3标准化输出5预处理日志记录3223业务处理描述32231格式识别转换格式识别转换是将不同类型的话单数据经过转换，统一转换为标准ASCII码格式存放，提取其中的话单、统计数据等有效信息，本模块根据其格式进行分拣并统一输出格式存放。此类话单提供的信息要满足系统的需要，基本的信息包括主被叫号码，出入中继、第三方号码、起始时间、通话时长、结束时间、话单类型、呼叫类型等等；并转换成相应的内部定义的记录格式。32232话单校验对原始数据文件及话单记录校验其正确性。话单校验又分为文件级校验和话单级校验。第22页32233文件级校验校验文件的完整性和有效性，以及文件格式的正确性。文件级错误主要是无法识别的文件，原始数据文件重复，文件头部信息描述出错、文件大小出错、记录数错误等。32234话单级校验对从原始数据文件中提取出的记录进行各字段的正确性检查，对于错误话单进行标识，并生成错误话单文件。对错误话单进行日志记录，并生成错误话单统计数据。通话起始日期校验分为日期域为空、值非法年、月、日不在正常取值范围内、日期正常3种情况。起始时间校验分为域为空、值非法时、分、秒不在合法取值范围内、时间正常3种情况。通话结束日期校验分为日期域为空、值非法年、月、日不在正常取值范围内、日期正常3种情况。结束时间校验分为域为空、值非法时、分、秒不在合法取值范围内、时间正常3种情况。时长校验分为域为空、值非法为负、含非数字字符、时长超短、时长超长、时长正常5种情况。32235重单检查由于某些原因（如交换机）造成一次通话的话单出现在不同第23页的采集点或其它重单情况，为避免重复计费，对于后付费模拟成预付费业务的话单，需要对话单进行查重处理。并记入重单文件、记录重单日志。32236标准化输出把不同数据源产生的数据文件根据业务类型进行标准的格式化处理，形成系统标准话单格式，以便入库的处理。提取的有效信息需包括以下字段编号域名1区号2交换机代号3话单类型4话务类型5详细业务类型6主叫号码7计费号码8被叫号码9第三方号码10通话起始日期11通话起始时间12通话结束日期（可选）第24页13通话结束时间（可选）14通话时长15入中继群16出中继群17原始话单文件名18记录偏移量19错误号20等等其中部分记录的详细描述见附件部分。32237预处理日志记录对预处理的处理过程，能自动记录处理日志。预处理日志内容包含处理的话单原始文件名、处理步骤、完成时间，处理的记录数，正常和异常的记录数，修正的异常记录数，修正后的异常记录数，异常类型和数量等。32238模块功能约束能处理来自于不同类型的数据源所产生的原始数据文件；标准话单格式内容包含计费信息、统计信息等信息。能够检测的记录级错误种类应包括日期错误、时间错误、含非法字符、关键字段内容与原始话单格式描述不符等。第25页能够检测的文件级错误应包括文件头部信息描述出错、文件大小出错等。以话单流水号作为判定话单是否漏重的标准，以话单文件流水号作为判定话单文件是否漏重的标准。对于文件级错误，要求记录错误文件，告警并进行人工干预处理。对于记录级错误，要求在已转换的标准话单文件内进行出错描述，以供参考及事后分析；对错误原始话单数据可予以纠正，记录级错误量超过设定的阀值时，告警，人工干预处理；应能够支持预处理回退，同时相应的采集处理回退，重新从采集处理开始。对于遗漏话单补做格式转换。对于重复话单剔除并记录。对于遗漏文件，记录文件名，找到后补充处理。对于重复文件，记录重复起始号、终止号，进行删除。323数据入库3231功能描述能将预处理产生的标准格式的话单入数据库，以便于统计。3232业务处理功能入库处理功能由以下关键业务处理点组成。编号关键业务点第26页1入库处理2回退处理3入库日志3233业务处理描述32331入库处理能支持SQLLOAD和INSERT两种入库方式。提供手动和自动入库两种方式。能避免文件的重入库等。32332回退处理能支持单文件或批量回退。32333入库日志对入库过程进行详细的日志记录，以此作为审核的依据。324数据分发管理采集到原始清单数据后，能将处理结果数据分发到有需要的相关系统中去。分发的数据可以是话单记录、错单、重单、计费报表、分析结果等。可以指定向哪些系统或目的地分发哪些数据。第27页3241分发处理分发处理的作用是把省级分拣处理的数据通过已有通信链路上传或下发到指定的目的地。分发方式包括实时分发、定时分发、定量分发及人工分发四种。系统的数据分发可支持上面的任一种方式，也可采用定时分发和定量分发相结合的分发方式。实时分发分发系统不断查询是否有新的数据生成，当发现有新的数据时，系统立即把新生成的数据分发到目的地。定时分发分发系统根据要求，定时到分发数据源端探询，如发现有新的分发数据产生，立刻将数据分发到目的地。定量分发分发系统不断查询新生成的数据是否累积到设定的阀值，当发现累积的数据容量超过设定的阀值时，系统立即把累积的数据分发到目的地。人工分发由人工激活，决定是否分发数据，及其他分发数据的具体配置。全部方式都能支持数据按业务类型选择性的分发。数据分发的格式将完全符合中国电信接口定义的标准。第28页3242分发校验对分发的数据进行校验，保证分发数据的正确性和完整性。分发校验对文件合法性和正确性进行检查，检查内容包括文件类型、文件大小、文件状态、文件连续性等。文件正确性检查主要检查文件类型、文件大小是否与数据源一致，文件是否正常关闭等。文件合法性检查主要对文件序号进行检查，防止文件重复和遗漏。3243传输管理在数据文件从中心系统传送到目的地的过程中，系统支持对传输进行管理和控制，保证分发系统的数据唯一并且准确无误地发送到目的地。当分发数据以文件形式存在时，可对被传输的文件进行加密/压缩，以保证文件传输的安全以及传输的效率。系统支持清单、帐单等数据的重发、补发；3244分发日志对数据分发过程、状态进行日志记录。分发日志是审核校验、统计查询和系统管理的基础数据。分发日志记录分发数据类型、文件名称、文件大小、累计信第29页息、日期、起止时间、状态（成功、失败、重传）等信息。325资料管理子系统资料管理是对小灵通采集分检系统运行相关的参数、规则、协议进行管理，对其进行增加、修改、查询等管理操作。3251系统参数管理系统参数管理是指对系统处理各阶段的配置参数进行管理。包括数据采集配置参数管理、预处理配置参数管理、文件分发配置参数管理等。32511数据采集配置参数管理数据采集配置参数管理是指对数据采集阶段的配置参数进行管理。管理的内容主要包括采集点、采集IP地址、登录用户名、口令、采集目录、备份采集目录、采集方式、采集条件、告警条件、文件命名规则、采集优先级、采集目的地、目的地目录、目的地备份目录、数据采集进程数等。32512预处理配置参数管理预处理配置参数管理是指对预处理阶段的配置参数进行管理。管理的内容主要包括预处理主机、预处理的输入目录、生成文件命名规则、生成字段、标准化记录格式、交换机类型、不同类型记录过滤条件、预处理进程数、正确记录存放目录、错误记录存放目录第30页等。32513文件分发配置参数管理文件分发配置参数管理是指对文件分发过程使用的相关参数进行管理。管理的内容包括分发源目录、目的目录、生成文件的命名规则等。3252模块功能约束对系统参数的操作要求严格地审核，不符合业务逻辑规范的，系统会提出告警提示，严重情况下，系统将不允许修改，从而保证系统内资料数据的正确性和完备性。所有结点的数据应保持同步更新，以保证数据的一致性。可在线修改或扩充系统参数，预先设定切换点，实现参数更替的平稳切换、不影响系统的正常运行。可灵活地对参数进行插入、修改、废止、单项查询、多项查询等操作。系统操作方便，界面友好。修改前对相应参数进行备份，保证用户可按需要恢复任何时期的历史参数，并对重要参数的修改操作做日志记录，供维护管理人员查询。326查询统计子系统3261查询处理数据查询针对采集分检系统的话单数据、业务处理跟踪数据、日第31页志数据、参数等信息进行查询。32611话单记录查询话单记录查询根据计费对象、批价信息、中继信息、时间信息等条件查询输出结果。查询条件可以任意组合，以实现复杂的查询。系统利用数据库高效的并行处理和数据库的优化，对数据库进行快速、准确的查询。该功能仅用于内部查询。32612业务处理跟踪查询提供指定时间内，各处理阶段的话单文件及详单记录的查询。提供指定时间内，各处理阶段的某种错误信息的查询。能够根据指定条件，跟踪查找相应的处理任务完成状况，某一操作人员的操作情况。32613统计数据查询根据指定条件，查找相应的统计报表数据，每类报表都应提供不同计费对象、计费周期的明细报表的查询，包含业务种类、呼叫类型、次数、话单数、时长、应收、应付金额等。可查询的报表或项目，如通话业务量的实施查询（可选择日期、时间段查询其统计值和详单）、历史月的计费统计报表、按本地网局名或主叫归属局查询。第32页32614参数查询根据指定条件，查找相应的系统参数数据，包括有采集、分拣参数、交换机参数、长途区号表、告警控制表、权限管理表等。32615日志查询提供指定时间内，各处理阶段的日志文件记录信息的查询。根据指定条件，查询日志内容，如采集日志、标准化、入库、分发日志查询等。32616查询方式系统提供的查询方式分为简单查询和组合查询。简单查询指根据需要查找的内容，查询人员只需按界面提示输入固定查询条件即可获得查询结果。组合查询指根据业务要求，查询人员可根据系统提供的查询要素进行自由组合构成查询条件，获得进行查询结果。系统可根据用户不同的要求，灵活的设置查询输出方式，表格或图表。根据不同业务部门的需要，可为特定的业务部门从查询要素中定制基本的查询组合。32617查询权限管理查询对象为上级主管部门。各查询对象的查询权限有层次性，原则上各查询对象只能查询各自的数据。全局性统计分析数据、用户第33页批价清单数据、用户汇总数据的查询只限于上级主管部门。查询对象及查询权限定义如下上级管理部门对各省中心的统计数据等标准资料查询省批价中心对本省内业务的各种标准查询，如详细话单查询，原始话单，来集数据，统计数据和日志查询等。同时支持查询要素的组合查找地市批价中心有数据查询请求时，省中心人工响应。32618查询安全机制为保证系统安全，查询服务应能保证用户通信的机密，并在法律规定的范围内进行。采集分拣系统应为不同级别的不同操作员设定权限，各操作员只能查询其权限内的信息。查询服务要有日志记录，日志内容包括查询申请人身份、查询操作人员工号、查询操作日期、查询业务。查询记录不支持外部查询。3262统计处理32621统计类型针对电信业务都是基于时长、字节或跳次的流量来计算收入的特点，本系统将数据统计分为以下几种类型话务量类统计、收入类统计、日志类统计、错单类统计等。第34页32622话务量统计话务量统计主要针对详单信息进行统计，形成来话和去话话务量统计以及话务量在各时间段、分布情况统计。提供按照营业区、主被叫号码、通话时长、通话时段、通话类别等要素的每天、每月和每年的话务量地区分类统计。32623收入情况统计收入统计主要针对各类费用信息进行统计，形成费用收入、费用计算等方面的统计。提供各类收入的情况。收入统计报表分为三种日统计报表、月统计报表和年统计报表，按各个地市分类统计。32624日志统计日志统计是对本系统运行过程中产生的日志数据进行统计，形成各式报表。他主要包括数据采集日志统计、预处理日志统计、批价处理日志统计等。32625错单统计错单统计是对系统运行过程中产生的错误记录按处理阶段、错误类型等进行分类统计。系统在预处理、批价中，均可能产生错单。错单统计针对各阶段的错单进行分类统计，为错单的分析、降低错单率良好的依据。第35页32626指标体系指标体系实际上是指如何将各类管理数据在统计分析数据平台中表示，也即如何管理信息的数据结构。指标体系适用的对象是管理者，实际上是一个管理信息集成系统。完整的指标定义应包括统计指标的业务含义（即指标名称）、统计方法和统计数据等几部分内容。其中统计方法规定了指标的统计口径、计算方法和取数依据。指标体系必须要有较强的可扩展性。为使指标体系能适应新业务的拓展和今后可能的组织机构的变化，必须设计一个灵活的指标体系层次分类信息存储结构。统计处理子系统的指标体系以统计要素为出发点，从详单表中提出统计要素数据，形成各种中间数据，为前台快速形成报表打下坚实基础，统计分析子系统提供的中间结果也为决策系统提供信息。32627统计设置326271统计报表的设置系统能够根据用户的不同信息统计需求设置统计报表。能够对所有统计报表的保存时限进行设置。生成的统计结果能以不同的文件格式存储，如保存为所需格式的文本文件、EXCEL文件等。326272统计要素的设置系统的统计数据来源于统计要素，统计要素是对数据源按照各种第36页可能统计的基本需求确定各个统计要素，依照其属性进行分别存贮或汇总，形成各种统计要素之间潜在的逻辑关系。统计要素可以由其他的统计要素或基本数据形成，使统计元素的定义具有灵活的可扩充性，可修改性。统计要素有使用时限的限制，一旦失效将不再进行统计处理。326273统计要素与统计报表的关联设置系统提供灵活、准确的报表与统计要素关系设置功能。能够根据用户的不同需求，任意地将统计要素集合到统计报表中，形成提供各种信息的统计报表，并利用报表自动生成系统工具生成各种统计、分析报表，并以报表、文件、图形等多样化的报表展示方式提供。32628处理方式326281实时统计处理按照明确的统计要求，（如每日各地市话务量统计，每日错误话单统计，每月各时段的话务量统计，每月规定上交报表），系统中提供专门的统计处理，实时自动激活，完成从基础数据层（清单数据）的统计处理，提供给统计输出处理。实时统计应是层层处理，首先根据用户需求，按照较全面的统计要素分门别类从基础话单层中挖掘统计基础层数据，（建议以日为单位），然后在统计基础层数据上定期产生相应的分类高层统计数据（如以月为单位），上述的各层的统计数据将做长期保留，以适应不第37页同的统计输出要求。实时统计结果将保留在数据库中，尤其是统计基础层数据，系统允许用户针对不同的统计数据设定备份时限，系统将根据不同的备份时限自动进行备份处理。实时统计处理提供处理控制界面，允许用户对统计启动时间、统计时段、统计要素、统计内容等方面进行调整，具有一定的处理灵活性。326282人工激活统计处理（非实时统计）系统提供一些较灵活的统计处理界面，允许用户在设定统计要素和输出方式后，人工激活，立即进行统计处理。人工激活方式是为一些需随时进行的统计项目或统计内容易变更的统计要求而设，如按通话类型统计到目前为止全省网间通话业务量（含通话次数、通话时长、通话费等）。对于经常进行的、运行时间较长的人工激活统计项目，系统应提供数据存储功能，用户可选择本次统计结果是否保留，以备后期查询。32629输出方式系统提供一套表格输出的定义机制，和相应的报表样式，用户可通过此定义机制灵活生成所需表格。表格输出应有完整的表头、生成日期、报告单位说明信息。系统第38页可提供界面对这些说明信息进行调整，如根据统计要素的变化调整表头说明。可提供图形、报表、文件的输出方式。可静态生成、动态刷新统计的输出结果。326210实现方式3262101固定报表对于某些中国电信要求必须生成的，而且在短时间不会发生变化的报表，可通过编程或其他工具实现固定格式输出的表格3262102灵活报表提供用户基于上述统计要素生成表格，可提供用户选择统计要素或制定某统计要素满足的条件，然后系统自动生成相应的表格3262103即席报表为满足用户在异常情况下的特殊查询统计，系统可专门提供报表自动生成系统工具，它可以根据用户的需要定制各种查询统计条件，并生成相应的报表。利用报表模块，用户可以完成正常情况下的任何查询统计。327回退子系统作用描述处理过程中若通过校验等手段发现错误，要求回退。系统将内存第39页块中的数据生成异常话单文件，等待重新处理。回退处理主要针对计费处理主体流程中各个模块的处理功能进行回退，将处理数据恢复到处理前的状态，再次调用功能模块进行处理的过程。系统操作人员主动要求回退处理，按一定（例如按文件回退、按局向回退）的条件，把数据回退到某一阶段，或全部回退。对于计费处理流程中的任何一个处理过程，都是一个数据流的顺序处理过程，当任何一个处理环节出现问题时，都需要能够进行回退，重新处理。回退策略由于回退是记录级的操作，它处理的性能相对比较低。因此在对计费系统进行回退处理时，首先需要界定回退处理的业务范围，从业务范围上确定回退的业务数量或者时间范围；然后确定处理流程的回退范围，是否需要全部回退，还是需要进行部分回退，或者是进行重做，使这部分数据的重新处理对本系统的影响降低到最小的范围。是需要全部回退（回退到采集数据源），还是仅需要回退到批价，如果需要进行全部回退，则需要全部的再处理。如果需要部分回退，则仅需要进行部分再处理。在进行回退时，主要完成对历史环境的清理，就是需要确定有哪些历史数据环境需要进行清除，只能清除那些在而且仅在回退范围之内的数据环境，这样才能使回退对于处理的影响最小。第40页在进行再处理时，需要按照顺序进行，即按照采集、预处理、批价等环节顺序进行处理。3271回退回退主要是清除历史处理环境，为再处理准备功能环境。造成回退的原因有很多种，大致可以分为如下三大类1系统问题这是由于程序出错导致数据处理错误，需要进行程序修改并同时把相关错误的数据进行回退或者重做处理。2资料问题这是由于资料录入或修改错误，导致系统计算的费用有误，对于该错误，可以选择全部回退、部分回退或者重新处理方式。3中继路由问题这是由于基础网络进行调整或者资料进行调整，中继路由等信息的变更并没有及时通报计费中心，导致计费系统处理出错，可以选择回退或者重新处理的方式。回退处理贯穿计费主体流程的整个流程，包括采集回退、预处理回退、批价回退等几个方面。采集回退，清除已经采集到的网元记录，重新到相关网元设备上进行重新的使用记录采集。预处理回退，对于预处理过的数据重新进行预处理。第41页批价处理，对于已经批价过的使用记录重新进行批价。回退一般是处理流程的逆序进行回退。3272再处理再处理是在回退的基础上，再次调用相应的处理功能，对数据进行再次处理。再处理一般按照处理的顺序，即按照采集、预处理、批价等环节顺序进行。3273回退日志记录回退处理日志，明确在该次回退处理中的操作人、文件名、处理话单数、处理开始时间、处理完成时间和各种话单数，并按一定的格式生成日志记录，入库保存。328审核校验在小灵通计费帐务系统进行处理的每个阶段点均设计审核校验功能，进行审核校验，并在审核校验发现错误之后，系统引入信息发布的功能，如警告确认、异常显示等手段。进行阶段性回退，避免错误扩展。审核校验是在系统全过程中的每个处理流程检查输入的参数合理性，并在处理的输出结果采用系统自动或人工验证方式，对系统提供相应的日志、统计数据、不同数据间平衡关系进行审核，检查数第42页据的异常、系统处理异常、人为处理的数据和计费帐务的数据进行必要的、有效的检查。3281审核校验业务处理流程描述审核校验贯穿系统处理的全过程。审核校验在各个阶段由于业务特性的不同，采用不同的审核校验方式。在每个处理流程中检查输入参数的合理性，并对处理输出结果采用系统自动或人工验证方式，对系统提供的日志、统计数据、不同数据间平衡关系进行审核，检查数据异常、系统处理异常情况，对人为处理的数据进行必要的、有效的检查。审核校验业务流程如下图第43页YESYES是否能自动处理NO审核校验的对象审核校验开始分析审核校验方式是否通过审核按照规则处理NO人工处理记录审核日志是否回退处理重新处理审核处理回退处理修正处理NOYES记录异常处理日志是否人工修正YESNO审核校验结束记录异常结束日志第44页3282审核校验方法审核校验贯穿系统处理的全过程。审核校验在各个阶段由于业务特性的不同，采用不同的审核校验方式，主要有基于业务规则定义的异常数据审核校验，如误单的判断和检查基于流程数据平衡关系自动审核校验，如分拣的话单数与预处理数据之间的平衡关系。基于日志的审核校验，系统提供丰富的日志。基于人工抽样审核校验。基于统计数据分析的审核校验，统计对比分析根据统计的规律。3283审核校验功能模块审核校验采集审核预处理审核数据分发审核对交换机的容错检查格式化审核清单入库审核第45页3284审核校验功能模块描述32841采集的审核校验为了保证采集数据的正确性、完整性和一致性，我们采用如下流程对原始数据文件进行校验对于原始数据文件依某种规则命名的数据源，在一轮采集之前，通过读取文件属性的方式，先进行文件探测。如果探测到数据源中A文件以后的连续N个文件不存在，则认为A文件后的数据文件还未生成。根据探测的结果，生成待采集文件列表和漏号文件列表。如果探测到某个文件的长度为0，则隔一段时间后重新读取其属性。若K次以后，该文件长度仍为0，则认为该数据文件是一个正常的空文件，将其加入待采集文件列表。对于原始数据文件通过标记表示文件状态的数据源，则通过读取标记生成待采集文件列表。采集过程依照待采集列表中顺序，将源文件采集到一个临时目录。源文件采集下来后，取目标文件的属性，与源文件属性比较，如果文件大小等不一致，则告警，并重新采集该源文件；否则计算目标文件的校验值，并与前一文件的校验第46页值比较，如果校验值相同，则告警，并在目标文件名上添加重复文件标记，将其转移到异常文件目录。通过文件校验以后，将目标文件转移到目标目录，并记录文件校验值，标记或释放源文件，记录日志，接着进行下一个文件的采集过程。在采集文件的过程中，如果出现异常，程序将进行告警。如果是可以自动恢复的故障，则进行故障恢复处理。如果故障成功恢复，则重复执行上一步，否则程序休眠一段时间后，重新开始采集当前文件。32842格式化的审核校验I该模块主要是对标准化话单计费要数进行数据审核效验，识别其中的错误或无效话单。II在格式化的各个处理环节都详细记录日志，以备人工审核。32843预处理的审核校验1、数据完整性检查检查话单预处理后原始文件中记录总数有效话单数无效话单数错误话单数重复话单数话单文件的完整性第47页检查交换机原始话单文件序号的完整性；提供与交换机话单数量的核对，即在指定时间有交换机提供确定数量的话单统计，与计费系统在相同时间段内的统计数量应该一致。2、交换机原始话单的正确性检测分析按业务数据要求对原始话单数据进行正确性分析、检查。定期统计各类错误话单的种类、错误原因、数量等。有关交换机的错误，将提交相应技术报告给局方。3、各类接口文件的差错检测发方与收方文件数量和记录数量的等同性；文件内部数据的正确性、完整性。上述审核效验功能主要是基于系统自动的、定期的检测处理完成。系统将检测结果以报表形式提交给用户。对检测中发现的问题应能及时告警，反馈给用户。4、对标准化话单计费数据进行数据审核校验，识别其中的错误或无效话单。5、对在话单检错过程中产生的各类异常话单文件进行错误分析和纠错处理，并提供相应的统计分析数据供管理维护人员分析，进行人工干预纠错。6、在预处理的各个处理环节都详细记录日志，以备人工审核。第48页32844清单入库的审核校验1、对入库前的数据和入库后的数据进行校验，保证数据全部入库。2、清单入库的各个处理环节都详细记录日志，以备人工审核。32845数据分发的审核校验1、对分发的数据进行校验，保证分发数据的正确性和完整性。分发校验对文件合法性和正确性进行检查，检查内容包括文件类型、文件大小、文件状态、文件连续性等。文件正确性检查主要检查文件类型、文件大小是否与数据源一致，文件是否正常关闭等。文件合法性检查主要对文件序号进行检查，防止文件重复和遗漏。2、对数据分发过程、状态进行日志记录。分发日志是审核校验的基础数据。分发日志记录分发数据类型、文件名称、文件大小、累计信息、日期、起止时间、状态（成功、失败、重传）等信息。第49页32846对交换机的容错检查由于交换机的扩容或版本升级，经常会造成其输出的原始话单数据不符合格式要求，从而造成部分批价数据的丢失和大量无法批价错误话单存在，因此，作为交换机数据的接收系统有必要对其进行数据容错处理，及时发现交换机的错误，提醒其进行更正。系统对各类错误话单进行定期分析，将属于交换机问题的话单进行分类、深入分析，帮助运维部门确定错误原因，提供技术报告。系统提供对批价数据量的实时检测功能，当发现某类交换机提供的话单类型的数量不正常的变化，将立即产生告警。系统提供定期的与交换机话单统计的核对功能，确保交换机输出话单的完整性。329集中监控、代理子系统为实现各应用进程的配置、状态的统一管理和监视，以及对个应用进程的统一控制，保证计费数据的正确性、完整性和一致性，所有应用软件的监控都在一个平台上进行。当被监控主机或业务程序出现异常情况时，监控程序通过监控界面进行告警。监控程序可提供完整的日志文件供值班人员分析。日志文件主要记录系统的启动和关闭、应用程序的启动和退出、事务的处理情况、被监控主机和业务程序的各种异常情况等。监控程序能够接受被监控业务程序的告警信息，并在监控屏幕上显示出来。值班员可以第50页通过监控界面对被监控主机的告警阀值进行修改。值班员可以通过监控界面对每个被监控业务程序的配置文件进行修改，并对业务程序进行一定的控制。监控程序能够对操作人员进行识别和认证，并且按操作人员的等级进行用户权限控制。监控系统采用三层结构在每台服务器和采集机上有唯一一个代理程序。应用程序只与本机上的监控代理通信，应用程序发往监控服务程序的信息需经过监控代理中转。监控服务器收集监控代理发送的信息，并接收管理终端的查询请求，以及执行或转发管理终端的控制命令。管理终端提供面向用户的接口，提供友好的图形界面。监控代理监控服务器业务程序用户界面指令告警、状态及反馈信息指令告警、状态及反馈信息指令告警、状态及反馈信息外部接口第51页采用这种组织形式应用程序不需要知道监控服务程序的具体位置；对于通信过程中的异常可由监控代理进行处理；监控代理还可以在连接不上监控服务程序的时候缓冲业务程序的信息；监控代理也可以帮助监控服务程序完成一些工作，例如定期轮询应用程序、检查应用程序的状态等，使系统具有极大的灵活性。系统应用软件的监控信息通过标准的MIB库进行定义，监控代理对外通讯符合标准SNMP协议。3291告警级别的划分告警级别一般分为如下三级一般性错误（不影响系统正常运行的错误）；警告信息（影响系统的正常运行，但不会导致数据的损坏或丢失）；严重故障（严重影响系统的运行，并可能导致数据的损坏或丢失）警告信息和严重故障的告警默认将以声光告警方式通知系统管理员或相关的操作人员。告警处理中可以设置各类应用监控参数的阀值，可以设置各类监控告警的次数限制，可以选择告警方式如声音、颜色、语言类型等3292集中监控、代理功能模块集中监控系统资源监控系统资源监控数据库资源监控数据库进程监控控采集处理监控控控数据库死锁监控控控预处理、格式化监控数据分发监测接口系统监控接口异常监控日志监控信息告警网络监控清单入库监控第52页3293集中监控功能模块描述32931系统资源监控主机及操作系统监控主要是用来监测主机CPU、内存、I/O、磁盘阵列等物理资源的使用情况和操作系统的运行情况，发现异常时能及时做出相应处理。对操作系统的监控包括进程运行的例程数量、对进程运行时所消耗的CPU、所占用的内存的限制等等；详细性能分析提供有关系统资源消耗的详细数据，用于判断系统性能瓶颈和进行系统性能优化，系统性能指标一般包括CPU使用分析、磁盘性能状态分析、文件系统分析、内核分析、内存使用状态分析、进程分析、交换区分析、网络通信分析等。32932数据库资源监控1、监控数据库的表空间（数据表空间、索引空间、临时表空间等等）使用情况2、监控回滚段使用情况第53页32933数据库死锁监控1、数据库进程监控，登录用户、登录机器名称等等2、显示进程的状态3、显示进程使用资源4、显示死锁资源32934采集处理监控接收数据采集模块的监控信息，对数据采集进程的运行情况进行监测，报告采集文件的采集点、文件名称、文件大小、采集时间以及采集时发出的异常信息。当数据采集监测发现故障时，监控系统能及时进行告警。监控各采集机运行情况；浏览脱机采集日志；浏览采集统计信息。32935预处理监控监测预处理进程的运行情况，相关的信息包括已处理的文件、异常记录文件、错单信息、重单信息等。当发现故障时，系统能及时进行告警。32936数据分发监控对计费系统与其他系统间文件传输情况进行监测。数据分发第54页监测的内容包括传输的文件的文件名、文件大小、传输时间、传输源、传输目的地等信息。当数据分发监测发现故障时能进行及时告警。32937接口系统监控1、监控与批价系统相关的重要接口的运行情况2、启动和关闭接口进程32938接口异常监控1、记录与计费系统相关的重要接口的运行异常信息2、提供运行异常信息报警功能3、提供运行异常解决建议32939日志监控跟踪系统参数和业务参数的维护日志；跟踪数据采集日志信息；跟踪系统各环节处理日志信息；跟踪数据分发日志信息；跟踪员工查询、统计、操作处理日志。3