已阅读5页,还剩63页未读, 继续免费阅读
(水利水电工程专业论文)数字城市中的分布式数据处理关键技术研究.pdf.pdf 免费下载
版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
i 摘要 数字化城市又称作数字城市是最近几年随着以互联网为核心的信息技术在 全球迅猛发展与应用而出现的一个新概念电子政务作为数字城市中的一个有机 部分是当前我国政府信息化建设的重要组成部分随着我国电子政务的不断发 展在政府的日常事务中其数据的处理量也不断的急剧增加分布式的数据处 理技术可以解决在数据处理量过大而当前现有的计算机设备不能独立完成相应 的计算任务的矛盾 j a v a语言提供的平台无关性和分布性 使其被认为是创建企业解决方案的一 个极好平台尤其适合开发分布式的应用程序j 2 e e代表 j a v a家族中最新的抽 象概念它具有强大的分布式处理能力其 r m i j i n i和 j a v a s p a c e s技术为实 现异构的分布式计算环境提供了坚实的技术基础 本文对基于 j a v a的分布式计算技术进行了深入研究主要工作和成果如下 首先对数字城市和电子政务的概念和框架进行了分析和讨论根据电子政务 的特殊功能和数据类型提出了针对电子政务的分布式数据处理模型及系统主要 特征 其次重点介绍了基于 j i n i的分布式计算环境并利用其关键技术建立了分 布式电子政务数据处理模型对模型中的任务分解数据划分和模型中的同步与 通信机制进行了深入研究讨论 在分布式数据处理的基础上实现了分布式计算环境的建立和相关类库的设 计和实现并对其内部的流程和功能进行了详细的分析和讨论 在文章的最后利用应用实例对基于本分布式计算模型的性能进行了详细 的综合的分析和讨论应用实例表明该环境能够在复杂系统中有效的进行分布 式计算同时也验证了分布式数据处理的可行性和实用性 关键词 数字城市 电子政务 分布式计算 j a v a j i n i ii a b s t r a c t digitization city also named digital city, is a new concept, which is a result of the rapid development and application of internet-based information technology in these years. electronic government affair, a part of digital city, is the important element for the information technique construction of our government. as the continuous development of electronic government affair, in the routine affair, the amount of data, that need to be processed, also incresses sharply. the distribution data process technology can smooth the contradiction between tremendous data and incapability to undertake independently the computing task with the existing computing devices. for the characters of heterogenous and the distribution provied by java language, it is considered to be an excellent platform to build a application system for enterprises, especially for developing the distribution application programs. j2ee represents the latest abstract concept in the java family with strong distributive process ability, and its rmi, jini and javaspaces technology provide stable basis for heterogenous distribution computing enviornment. in this paper, the jini-based distribution computing techniques are deeply explored. and the main work and achievements are shown as follows: firstly, the concept and framework of digital city and electronic government affair are analyzed and discussed. according to the special function moduls and data types, a distribution data process model and main system characteristic for electronic government affair is founded. secondly, the jini-based distribution computing environment is introduced in detail. and with the its key technology, the distribution data process model for electronic government affair is built. in the task assignment for model, data partition and synchronization and communication scheme is discussed. thirdly, based on the model, a distributive computing environment is implemented and the detail about system design and relevent classes and libraries are introduced. finally, at the end of this paper, with practical example, the performances of distribution-based computing model is comprehensive discussed. the example shows that iii this enviornment can process effetively distribution computing in the complicated systems, and at the same time, it verify the feasibility and practicability of distribution data process. k e y w o r d s : d i g i t a l c i t y e - g o v e r n m e n t d i s t r i b u t e d c o m p u t i n g j a v a j i n i 1 1 绪论 1 . 1课题背景 数字化城市( d i g i t a l c i t y ) 又称作数字城市是最近几年随着互联网为核心的 信息技术在全球的迅猛发展与应用而出现的一个新概念 数字化城市的概念是在数 字地球出现之后产生的数字地球的核心内容是全球信息数字化主要指应用地理 信息系统遥感全球定位系统等技术以数字的方式获取处理和应用关于地球 自然和人文因素的空间数据并在此基础上解决全球各种问题自从前美国副总统 戈尔于 1 9 9 7年提出数字地球以来数字城市作为数字地球的一个分支得到了迅猛 的发展 3 数字城市所涵盖的范围也不断的扩大从早期的地理信息系统到现在的 数字经济数字社会数字生活和数字政府等 互联网是二十世纪人类最重要的技术创新之一互联网的快速发展使人类已经 走进了网络信息时代网络日益走进人们的生活改变着社会的方方面面电子政 务作为数字城市的有机部分随着数字城市和网络技术的不断前进越来越受到各 国各级政府的重视所谓电子政务就是将政府职能电子化网络化信息化 即在一个虚拟的电子政府平台在互联网上实现政府的职能工作凡在网下可以实 现的政府职能在网上都可以实现西方学者给电子政务下的定义为电子政务实 质上就是把工业化模型的大政府特点是集中管理分层结构在物理经济中运行 变为新型的管理体系以适应虚拟的全球性的以知识为基础的数字经济同时 也适应社会的根本转变 2 其核心是大量频繁的行政管理和日常事务都通过设定好 的程序在网上实施大量决策权下放给团体和个人政府重新确立其职能在政府 职能转变的中电子政务无疑又提供了一个宽广的天地 毫无疑问 电子政务经过我国各级部门和相关科技人员的不懈努力已经取得了 巨大的进步 由以前的无纸化办公到现在的网络化办公 使我国政府部门向信息化 网络化现代化迈出了关键的一步然而信息化的发展必然伴随着信息量的急剧增 2 加事实也证明在电子政务的发展过程中对于数据量数据模型都提出了更高 的要求 在数据的处理方面数字城市数据的多样性也变得纷繁复杂比如由最初的地 理信息系统中的相关图形处理到现在的电子政务的分布式数据处理等 数字城市中 的数据不单纯在数据量的增加 而且由于特定的地理位置诧异导致的数据的分散分 布性也凸现出来为了利用现有的资源有效的对数据进行相关处理分布式计算 技术成为解决现有问题的可行性方案之一 1 . 2国内外研究现状 从首次出现数字地球这一概念至今不过几年的时间在这期间世界一些发 达国家开始了建设数字化城市的实践并取得了相应的进展国际数字化城市 建设主要是在一些发达国家展开的最具代表性的是美国和日本 美国是数字地球的发源地也是数字城市建设比较早的国家实际上在 美国数字地球数字化城市的概念早已出现如智能化建筑数字化家 庭信息化社区等美国自 1 9 9 3年开始着手进行国家的电子政务建设现已 完成了电子政务的建设规划 其最终目标就是使美国公民可以像目前使用私营部门 提供的全天候信息与服务一样7 2 4小时地使用政府的信息和服务政府充分利 用 i n t e r n e t和其他信息技术以实现效率的最大化并向公众提供无缝的安全 的在线信息和服务 从 2 0世纪 9 0年代以来日本的经济发展一直处于较为低迷的状态所以日本 政府希望把推动数字化城市建设作为刺激日本经济的手段 同时日本政府在 2 0 0 0 年 9月即勾勒了一个 e - 日本的构想拟在未来几年建成日本的电子政务即完 全用电子化手段来处理各种行政事务及公共服务 4 目前数字化城市的取得了很 大的进展已经能向人们提供二维的地图和三维的虚拟空间提供的实时信息包括 交通天气购物以及观光等而且城市居民和旅游者都可以通过互联网等手段在 数字化城市中进行交流与沟通 中国电子政务的发展历程中国电子政务起步于上个世纪 8 0年代中期初期 3 发展主要表现在两个方面一是 2 0世纪 8 0年代中期中央和地方党政机关所开展 的办公自动化( o a ) 工程建立了各种纵向和横向内部信息办公网络为利用计算机 和通信网络技术奠定了基础二是 1 9 9 3年底启动的三金工程即金桥工程金 关工程和金卡工程这是中央政府主导的以政府信息化为特征的系统工程重点是 建设信息化的基础设施为重点行业和部门传输数据和信息但是这些都还只是 电子政务发展的雏形是电子政务发展的最初级阶段到 9 0年代末期由于信息 网络技术的快速发展和信息基础设施的不断完善电子政务的发展进入快车道突 破了部门和地域限制向交互性和互联网方向发展1 9 9 8年 4月青岛市在互联 网上建立了我国第一个严格意义上的政府网站青岛政务信息公众网1 9 9 9年 1 月4 0多个部委( 局办) 的信息主管部门共同倡议发起了政府上网工程其目 标是在 1 9 9 9年实现 6 0 以上的部委和各级政府部门上网在 2 0 0 0 年实现 8 0 以 上的部委和各级政府部门上网 4 中国的电子政务经过了十几年的建设在信息化方面打下了厚重的物理基础 取得了一定的成就但是同时也沉淀下来一些问题由于过去对信息化的建设一直 是在分散体制下的投入造成了现有的信息系统相对的分散异构和封闭没有统 一的体制和架构相互之间不能互动信息资源无法得到有效的利用和共享于是 如何建立统一的电子政务信息架构对现有信息系统进行整合使信息资源得到有 效的管理和共享就成为目前迫切需要解决的问题 1 . 3研究思路及内容 随着计算机技术和高速网络技术的不断发展 传统的集中式计算正在逐渐向分 布式计算转变相对于集中式计算在分布式计算环境下工作的用户所面对的不再 是单一机器上的硬件资源和它上面的数量有限的软件资源而是贯穿整个企业部 门乃至整个 i n t e r n e t上的所有可提供服务的高性能计算机和大量的数据信息 分布式计算严格来讲是指在一个多台独立的机器组成的分布式系统中由多 个结点协同完成一项计算任务以实现复杂问题的求解和信息资源的共享分布式 计算所要解决的问题主要包括以下两方面 4 1 ) 充分利用系统中所有计算机的计算能力完成复杂任务求解所面临的高性 能计算问题 2 ) 充分利用已有的应用领域中的资源完成系统的应用集成以及信息资源的 共享 分布式计算所要解决的问题具有很强的实际意义它要求应用系统根据实际 情况对分布式数据处理的相关模型计算方法等进行研究和设计为了在理论上和 实践上采用可行方案和跟踪当前先进技术本文采用了目前最流行的 j a v a技术构 建系统 j a v a是一种多线程语言它内嵌支持线程的创建调度很适合进行并行和 分布式计算此外j a v a是一种高性能与平台无关具有好移植性的语言及平 台适合于网络计算先前的计算环境大多局限于 p v m ( 一个支持网络并行计算的 软件系统) 和 m p i ( 为编写消息传递程序而开发的广泛使用的标准) 很少有人采用 j i n i j a v a s p a c e s这一新兴的分布式计算环境把这一新兴的分布式计算环境引 入到数字城市分布式计算环境中具有很强的理论及现实意义 本论文的内容组形式如下 第一章 绪论对论文的背景知识分布式技术和 j a v a技术的基本概念和应用 做了简单的介绍 第二章 重点介绍了数字城市和电子政务基本概念框架和应用背景分析了 当前数字城市中所采用的相关技术并对电子政务中的数据模型进行了相关探讨 第三章 介绍了基于 j a v a的关键分布式技术提出了基于 j a v a的分布式计算 模型重点讨论了模型中的任务分解数据划分以及同步与通信机制等 第四章 基于上一章的研究和讨论实现了基于 j i n i的分布式环境的建立和相 关类库函数的实现以及详细分析了他们的功能和流程 第五章 主要介绍应用实例和系统性能特性并对其进行了分析讨论 第六章 总结论文所做的工作并对进一步的开发与改进提出了一些设想 5 2 数字城市的基本概念与技术 2 . 1数字城市 2 . 1 . 1数字城市的概念与背景 数字城市是数字中国乃至数字地球的重要组成部分所谓数字城市与园 林城市生态城市山水城市一样是对城市发展方向的一种描述它是指 数字技术信息技术网络技术渗透到城市生活的各个方面并在城市规划建设 与运营管理以及城市生产生活 充分地利用现代信息技术将城市的各种数字信息及 城市的各种信息资源加以整合并充分利用8数字城市以计算机网络为基础综合 运用 gis(地理信息系统)遥感宽带网络多媒体及虚拟仿真等技术对城市的 基础设施功能机制进行自动采集动态检测管理和提供决策服务等数字城市促 进了城市不同部门不同城市之间的信息共享交流和综合提高城市资源利用效 率增强城市的聚集扩散与辐射功能进而提高了城市的规划管理与发展水平 数字城市将整个城市涉及到的各种信息包括地理环境基础设施自然资源社 会资源经济资源金融资源旅游资源及人文资源等以数字化的形式进行采集 和获取并通过计算机统一存储管理和再现实现各种信息的交流和综合为城 市资源在空间上的优化配置在时间上的合理利用实现城市的可持续发展提供强 有力的决策手段 生活在数字城市的人们将通过网络在家工作并通过远程教育系统接受继 续教育和培训企业通过电子商务进行生产和组织管理数字社区则为人们提供了 网络化和数字化的生存环境最终实现数字生活 正因为如此在 1998 年美国副总统戈尔首次提出数字地球的概念之后许多 国家和地区都将数字地球技术系统的重要组成部分之一数字城市的研究与建 设作为其抢占科技产业和经济制高点的战略之一从 internetweb 网站的跟踪 调查以及主要专业杂志的介绍可知最近专门以数字城市同样名字为研究命题 6 的研究机构全世界虽然只有一家(美国宇航局 nasa 的虚拟环境实验室)但是数字 城市相关技术已经开始应用在很多领域在美国大约有 50 个城市正在建设数字城 市其他发达国家也纷纷开始数字社区和数字城市的综合建设实验例如芬兰计 算机工程师林都立试图应用信息技术展现生活和城市的新未来 在网络上复制真实 世界的赫尔辛基市成为世界上第一个虚拟城市2日本已经建成一批智能化生 活小区数字社区的示范工程新加坡提出数字城市的设想为国民提供一个 综合业务数字网和异步数字用户专线将新加坡 90的家庭连接在一起实现网 上生存的梦想在国内近十多年来深圳北京海口济南广州等城市和 国内著名科研院校相继建立了一批专业数据库和应用开发系统 为数字城市的研究 积累了经验和数据 2 . 1 . 2数字城市的内容及框架 数字城市的内容主要包括技术组成组织结构及应用等方面数字城市组织结 构即数字城市工程将通过建设宽带多媒体网络地理信息系统等基础设施平台 整合城市信息资源建立电子政务电子商务社会保障等空间信息管理服务系统 7 数字城市是城市信息技术的综合应用也是当前信息技术应用最广泛的领域 就这个意义而言数字城市应用十分广泛 归纳起来主要有十二个方面电子政务 电子商务城市智能交通市政基础设施管理公共信息服务远程教育社会医 疗保障社区管理突发事件处理城市环境检测智能化小区水网调配等 数字城市的基本框架为以应用为中心,以理论基础设施保障体系和技术开 发为基础,以网络信息设施空间信息建设标准与规范安全与保密法规与执 法的制订和信息化水平评估指标,旨在进行监测的数字神经系统的实施为必要条件, 以人才培养和知识普及为保障的结构是全面的科学的 7 2 . 2电子政务 2 . 2 . 1电子政务的概念与背景 电子政务( e - g o v e r n m e n t ) 是政府机构为了适应经济全球化和信息网络化的需 要自觉应用现代信息技术将政务处理与政府服务的各项职能通过网络实现并 对政府的组织结构和工作流程持续不断地优化与创新以实现提高政府管理效率 精简政府管理机构降低政府管理成本改进政府服务水平等目标其核心是应 用信息技术提高政府事务处理的信息流效率改善政府组织和公共管理 一般而言政府的主要职能在于经济调节市场监督社会管理和公共服务 而电子政务就是要将这四大职能电子化网络化利用现代信息技术对政府进行信 息化改造以提高政府部门依法行政的水平电子政务实质上就是在全国范围内构 建一个电子政府将原有的政府通过互联网办公技术转变为新型的管理体系以适 应虚拟的全球的以知识为基础的数字经济适应社会运行方式的根本转变因 此与传统的政府政务相比电子政府具有一下四个突出的特点 1 ) 电子政务将使政务工作更有效更精简 2 ) 电子政务将使政府工作更公开更透明 3 ) 电子政务将为企业和居民提高更好的服务 4 ) 电子政务将重新构造政府企业居民之间的关系使之比以前更加协调 使企业和居民能够更好地参与政府的管理 2 . 2 . 2电子政务系统 电子政务是数字城市建设的重要一部分根据政府机构的业务形态来看通常 电子政务主要包括三个应用领域 2 1 ) 政务信息查询面向社会公众和企业组织为其提供政策法规条例和 流程的查询服务 2 ) 公共政务办公借助互联网实现政府机构的对外办公如申请申报等 8 提高政府的运作效率增加透明度 3 ) 政府办公自动化以信息化手段提高政府机构内部办公的效率如公文 报送信息通知和信息查询等 社会公众和企业主要通过政务信息查询以及公共政务办公与电子政务平台建 立沟通相关事务处理请求通过办公自动化系统中转给政府工作人员政府工作人 员可以通过办公自动化系统进行政务处理及对政务信息查询系统的更新 通过对这 一典型业务模型的分析可以看出在电子政务系统中主要存在三种信息流 1 ) 政务办公信息流主要存在于政府机构内部办公的过程中 2 ) 公共事务信息流主要存在于政府机构对外办公的过程中 3 ) 政务咨询信息流主要存在于社会公众和企业查询相关信息的过程中 2 . 3电子政务中的分布式数据处理的研究 数字城市作为全球网络化进程中的新概念展现在人们面前信息化网络化 智能化和可视化是对数字城市最基本的要求网络化意味着信息资源的分布 性而分布的资源需要相互合作以解决公共问题随着数字地球在全球范围内的深 入研究人们对分布式计算的基本模式在数字城市中的重要地位有了更进一步的 认识 图 2.1 电子政务信息流模型示意图 安 全 信 息 交 换 系 统 外部用户 政务公共信 息库 政务办公信 息库 内部用户 信息更新 工作流 政务查询 信息流 政务办公 信息流 事务信息流 9 网络技术的增长速度甚至连计算机网络专家也始料未及特别是近几年来 互联网及其相关技术飞速发展已给人们的生活和工作带来了巨大的变化 随着计算 资源的网络化广大的计算机个人用户迫切需要共享分布在网络上的丰富资源 并逐步实现计算机支持下的协同工作此时基于万维网的分布协同计算成为影响 当今计算机技术发展的关键技术力量 1 0 电子政务作为数字城市中的重要一部分随着电子政务的不断向前发展其数 据处理量呈几何级数增长跨部门的数据交换与共享机制是通过一站式电子政务架 构来进行的而且是以广义政务工作流的一个并行分支进行处理在其相关数据处 理上必将采用分布式数据处理模型 目前在电子政务中需要用到的分布式处理模型主要分以下几个模块 1 ) 政府各部门内部的分布式数据处理模块如三金工程网上工商系统网 上税务系统网上财政系统网上统计系统等在这些系统中均需要建立自己的分 布式数据处理模块完成特定的任务和服务 2 ) 政府内部办公专网的分布式数据处理模块由于政府内部专网所涉及的部 门多数据量大保密性要求高等特点更要求分布式数据处理模型有良好实时性 安全性等比如一个企业的注册就要涉及到税务工商金融财政环保等系统 要实现公正高效廉洁的政府办公迎接 w t o的挑战就必须要求电子政务系统 能实时高效安全地对各部门的数据信息进行整合和处理 3 公共查询系统的分布式数据处理模块一般人认为公共查询就是简单的 访问数据库其数据处理要求不高就我国目前的电子政务系统来看有一定的道 理但就发展的眼光来看将来的公共查询将涉及到天气旅游地理交通等公 共信息如果单纯的访问数据库是达不到预期的目的因此分布式数据处理模块 也是公共查询系统的不可缺少的一部分 适应于电子政务分布式数据处理模型应具有以下四个特征 1 分布式特征包括数据分布和应用分布 2 互操作性允许数据在不同的系统之间无缝传输一个应用系统中的应用 可以调用另一个应用系统中的应用来完成逻辑上统一的任务 10 3 可扩展性要求尽可能利用已有数据设施不做或少做改动并且能够容 纳以后新出现的和系统所生产的数据这样就可以最大限度地保护已有投资 4 良好的交互性作为用户对互联网数据应用的需求应当允许合法用户对 已有的数据进行更新和增删 2 . 4与数字城市相关的主要技术 一般来说 当谈到数字城市中的技术问题时 主要是指综合运用地理信息系统 遥感遥测网络多媒体及虚拟仿真等技术而事实上数字城市所采用的技术 应该根据特定的功能和应用采用相关的技术 这其中并没有某种技术可以实现数字 城市的所有功能因此在电子政务中的关键技术不是采用 gis 或 webgis 等实 际上当前的电子政务的关键技术主要包括cegxml基于 j2ee 的分布式计算 技术可信 web service 技术工作流技术和代理技术等4 1) cegxml在电子政务服务架构中xml 是其运行的核心技术之一也是 整个框架中应用数据编码格式针对一站式电子政务服务应用模式的实际需求国 家电子政务将采用统一的政务专用的 xml 语言即 cegxml(china e-government xml) 2) 基于 j2ee 的分布式计算技术适用于创建服务器和服务的企业版 j2ee 是 一种利用 java 2 平台来简化诸多与多级企业解决方案的开发 部署和管理相关的复 杂问题的体系结构j2ee 还为这些组件提供了一整套企业服务通过自动化的方 式完成应用程序中开发中的诸多耗时且费力的艰难工作 为用户提供一种可创建广 泛兼容的企业解决方案而无需复杂编程的平台 3) web service它本质上是一种应用计算模式web service 通过使用标准的 互联网应用协议提供计算机系统之间的通信将软件功能表现在 internet 或 intranet 上web service 可以有效地屏蔽底层技术细节的差异性所带来的异构计算 平台中资源共享与应用整合的问题 4) 工作流是一种反映业务流程的计算机化的模型它是为在先进的计算机 环境下实现经营过程集成与经营过程自动化而建立的可由工作流程管理系统执行 11 的业务模型 5) 代理(agent)技术agent 技术是分布式计算技术和人工智能技术完善发展 基础上的产物它具有如下几个特点自主性主动性反映性和可动性等 此 外在具体工作中还有许多技术可供选择比如 windows dna microsoft.net 等都在实践中得到了很好的引用然而应该注意到平常所说的分布 式计算主要集中在应用所面对的业务流程上它们主要是指逻辑层次上的分布式 比如 j2ee 的分布式计算技术的分层结构模型基于 web service 的分层应用模型 而在本文中所讨论分布式计算技术主要集中在数据处理上分布式处理 它与前面所 提到的分布式技术有着本质的区别在本文所提到的分布式模型中一个任务往往 需要多台计算机共同协作才可能完成计算任务在分层模型中主要在于机器间 的主动或被动的访问更多注重在数据的流向上 2 . 5小结 本章主要介绍了数字城市和电子政务的概念和相关理论在这些理论的基础 上本文着重讨论了电子政务系统的数据流模型接着介绍了电子政务的几种分布 式数据处理模型说明在电子政务中采用分布式计算技术的必要性最后讨论了在 数字城市和电子政务中所涉及到的相关主要技术并比较了本文所采用的分布式计 算技术与其他分布式应用技术的不同 12 3 分布式数据处理框架模型研究 3 . 1分布式计算环境 1 ) 分布式计算环境 分布式计算环境( d i s t r i b u t e d c o m p u t i n g ) 是利用操作系统提供的功能对网络 资源进行统一管理 它的目标是提供一个综合服务设施, 以支持分布式应用的开发 使用和维护最早的分布式计算环境是 s u n m i - c r o s y s t e m公司提出的以 s u n n f s ( 网 络文件系统) 为基础的 o n c ( 开放网络计算) , 这是一种连接各种机型的通信体系而 另外一种分布式计算环境称为网络计算系统( n c s ) 1 4 分布式计算环境是近 2 0年 来影响计算机技术发展的最活跃因素之一它的发展经历了两种不同的技术路线 第一种是理想的技术路线试图在互连的计算硬件上部署全新的分布式操作系统 全面管理系统中各自独立的计算机呈现给用户单一的系统试图第二种是现实的 技术路线即在网络计算平台上部署分布式计算环境提供开发工具和公共服务 支持分布式应用实现资源共享和协同工作当前人们所说的分布式计算技术是指 在网络计算平台上开发部署管理和维护以资源共享和协同工作为主要目标的分 布式应用系统 然而随着我国电子政务的迅速发展上述所提出的分布式计算环境可以很好 的解决电子政务中的分布式应用的问题还不能很好解决海量数据处理的应用实 际上 是对当前的电子政务应用打了一个折扣 在本文所提出的分布式计算环境中 主要针对电子政务的特定需求 除了支持分布式应用 实现资源共享和协作工作外 着重在实现完成数据处理的分布式处理 分布式计算环境具有以下若干重要特征 ( 1 ) 资源共享资源共享分硬件资源和软件资源的共享 ( 2 ) 开放性开放性主要是指系统的可伸缩性可移植性和可互操作性 ( 3 ) 并发性并发性允许多用户同时发出命令并与计算机交互同时允许多 13 服务器进程并发运行每个进程响应不同的客户要求以及进程间的通信 ( 4 ) 容错性容错主要有两个基本方法即硬件冗余和软件恢复 ( 5 ) 透明性透明性主要包括位置透明性迁移透明性并发透明性副本透 明性并行透明性等 分布式系统通过网络连在一起的可以独立工作的计算机组成这些计算机安 装了分布式计算环境使得它们能够协同工作共享系统资源正如那句名言网 络就是计算机所描述的未来的计算世界是连接的世界 2 ) 现有分布式技术的比较分析 当前的分布式计算主流技术主要有一下三种d c o m ( 分布式组件对象模 型) , j a c a r m i ( 远程方法调用) 和 c o r b a ( 公共对象请求代理结构) 它们都在逻辑总 线上实现了组件对象逻辑分层和位置分布的透明性, 以及相关服务, 给系统开发人 员提供了诸多方便 c o r b a 即 通 用 对 象 请 求 代 理 体 系 结 构 ( c o m m o n o b j e c t r e q u e s t b r o k e r a r c h i t e c h t u r e ) 的缩写是由对象管理组 o m g定义的一种分布式体系结构c o r b a 是一个开发的与开发商无关的规范所面向的是一个分布式体系结构以及允许不 同应用通过网络协同工作的基础设施对象请求代理( o r b ) 也称为对象总线它构 成了此体系的结构引擎 通过利用 o r b 可以对所有常用功能的对象实现网络支持 并几乎都可免费获得事务安全和持续服务等c o r b a是一种语言中性的软件构件 模型可以跨越不同的网络不同的机器和不同的操作系统实现分布对象之间的 互操作 d c o m是 m i c r o s o f t 与其他业界厂商合作提出的一种分布构件对象模型 d i s t r i b u t e d c o m p o n e n t o b j e c t m o d e l其发展经历了一个相当曲折的过程 d c o m起源于动态数据交换( d d e ) 技术通过剪切/ 粘贴( c u t / p a s t e ) 实现两个应用程 序之间共享数据的动态交换 对象连接与嵌入 o l e就是从 d d e引伸而来的 2 0 d c o m 它可以说是一种通信协议, 提供组件通信的底层控制, 能够使位于不同计算机上的 c o m对象相互通信, 关于这些计算机是在局域网广域网, 还是 i n t e r n e t之中, 则不 用考虑, 也就是说 d c o m技术实际上就是微软用来实现 c o m对象的位置透明性的. 而 14 且, d c o m是 c o m技术的无缝扩展, 这样对于现有的基于 c o m的应用组件以及工具 等都易于实现向分布式计算领域的迁移, 这样既保护了客户的已有投资, 也使应用 系统能适应现代技术的需要 j a v a r m i , 是 s u n公司的基于 j a v a软件的分布式对象技术基于 j a v a的对象机 制, 它提供了一种简单的直接的分布式应用系统的实现模式j a v a r m i的平台无 关性是通过 j v m来实现的, 也就是说只要分布于网络中的客户机和服务器都运行 j v m , 就可以使用 j a v a r m i机制在客户程序和服务器程序间相互调用方法, 实现信息 传输. r m i是采用 r p c机制, 使分布对象可以通信和协同工作 2 4 j a v a r m i最大的优 势是其允许能够象传递简单类型数据一样直接进行整个对象的传递, 这也是其他的 分布式技术所没有的. j a v a 对于软件构件的观点与 c o r b a 中的构件观点存在一定的 区别在 c o r b a中c o r b a / o r b相当于一根软总线构件可以即插即用而在 j a v a 中软件构件是能够进行可视化操作的可重用软件它满足一定的特征要求并可 以根据需要进行定制和组装 j a v a提供了一个概念清晰结构紧凑的分布计算模型和构件互操作的方法为 构件应用开发提供了相当的灵活性c o r b a是一种集成技术而不是编程技术它 提供了对各种功能模块进行构件化处理并将它们捆绑在一起的粘合剂j a v a和 c o r b a在很大的程度上可以看作是互补的c o r b a可以扩展 j a v a在网络语言组 件边界操作系统中的各种应用d c o m的主要缺点在于其对平台无关性的支持能 力. 不过在实际应用中, c o m对象往往以后台应用的形式为客户提供服务, 这使得对 象在设计与实现时不利于编程人员的调试工作j a v a的优势除了对象传递外, 就是 其绝对的平台无关性, 由于目前 j a v a语言已成为 i n t e r n e t上占绝对优势的广泛应 用的程序语言, 其优势所在是 d c o m 和 c o r b a 所不能及的. 但 j a v a 语言要求编程人员 必需熟知此语言, 而不象 d c o m和 c o r b a那样, 编程人员可以有较多地自主选择. 具体到应用中c o m 主要应用在分布式计算的应用中而 c o r b a它仅是一个规 范在实践中它通常和其他语言一起实现分布式计算比如目前比较流行的一 个分布式计算模型是 c o r b a e j b 可是j a v a技术除了拥有以上所介绍的优点外 再加上他自己的衍生技术 j i n i除了能完成 c o m和 c o r b a 所能完成的一般意义上的 15 分布式应用还能完成电子政务中的分布式数据处理应用 因此针对本课题本文提出了基于 j a v a和 j i n i的分布式数据处理模型它秉 承了所有的 j a v a语言的优点和特性还能高效地简单地实现电子政务的分布式 计算任务 3 . 2基于 j i n i的分布式处理模型 3 . 2 . 1 j a v a简介 j a v a是由 s u n公司开发的面向对象的编程语言j a v a语言具有面向对象分 布性健壮性可移植性等特性自从 j a v a出现以来人们对基于 j a v a平台的分 布式计算寄予厚望 2 7 基于 j a v a平台的解决方案具有很大的灵活性和可扩展性 j a v a语言是一种多线程语言它支持内嵌线程的创建调度很适合于采用 j a v a 进行并发计算和并行计算另外j a v a语言具有强大的网络支持能力可以采用 数据报s o c k e t s s e r v l e t e j b e n t e r p r i s e j a v a b e a n sj d b c r m i j i n i和 j a v a s p a c e等进行 j a v a并行分布式程序设计实现基于 j a v a的并行分布式计算 相信随着 j a v a语言的日益成熟化 会有越来越多的科研工作者开始采用 j a v a语言 和 j a v a计算平台进行科学研究比如基于 j 2 e e的分布式应用不仅在电子政务而 且在电子商务企业架构等许多领域得到了广泛的应用和推广在本文所研究的分 布式计算模型中就主要运用了基于 j a v a的 j i n i r m i j a v a s p a c e s等技术实现 电子政务的分布式数据处理 在电子政务的海量数据处理中由于它的数据本身的特性要求系统根据这种 特性提出相应的有效简单和可行的解决方案基于 j a v a的 j i n i等技术不失为一 种理想的选择之一j i n i技术不仅为系统的分布式计算模型提供了统一的规范而 且它的体系中自带的各种服务也为实现计算模型的功能提供的强大的支持和应用 接下来文章主要研究和探讨基于 j i n i技术的分布式计算模型的框架和建立 16 3 . 2 . 2 j i n i技术 j i n i是由 s u n公司 r % p a t h % ( 2 ) 设置 c l a s s p a t h变量 如果只是运行 j i n i所带的例子程序就不必对 c l a s s p a t h做任何修改因为 j i n i所带的 j a r文件使用了可执行 j a r 机制这项技术来源于 j a v a 2 它允许 j a r文件包含一个缺省的应用类这个类在调用 j a r文件时自动被引用有了 它的支持应用程序可以轻松地把 j a r文件连接到 j a v a的可执行文件启动所需 要服务或例子应用程序如果只是需要启动 j i n i服务使之在网上运行这已经足 够了不过除了运行例子之外可能有些读者还想用 j i n i内核来开发一些自己的 应用这时就必须修改 c l a s s p a t h变量使之指向完成开发所要的 j a r文件程序开 发所需的 j a r文件主要有三个: j i n i - c o r e . j a r包含了内核接口是 j i n i规范 的一部分j i n i - e x t . j a r包含了开发 j i n i应用程序要用到的一些非标准接口 s u n - u t i l . j a r含了一些 s u n公司提供的软件工具类所有的 j a r文件都位于 j i n i / l i b目录中 w i n d o w s系统用下列命令进行设置 s e t c l a s s p a t h = c : j i n i l i b j i n i - c o r e . j a r ; c : j i n i l i b j i n i - e x t . j a r ; c : j i n i l i b s u n - u t i l . j a r ; % c l a s s p a t h % 4 ) 使用 g u i启动 j i n i运行时服务 j i n i附带了一个便于使用的 g u i以启动所需的 j i n i服务在启动 j i n i以前 应用程序应首先在启动命令前在目录下新建两个日志目录即 l o g和 t e m目录l o g 目录必须手动建立而 t e m目录可以在运行指令中指定由 g u i自动建立 ( 1 ) 运行 g u i 在完成了对 p a t h的设置之后可以很方便地启动配置应用程序方法是 w i n d o w s系统j a v a - c p c : j i n i l i b j i n i - e x a m p l e s . j a r j a v a c o m . s u n . j i n i . e x a m p l e . l a u n c h e r . s t a r t s e r v i c e - c p 选项的作用是为j a v a 虚拟机设置c l a s s p a t h使之包含j i n i - e x a m p l e s . j a r 32 文件 最后一个选项是启动服务的 g u i应用程序的全名 如果将 j i n i - e x a m p l e s . j a r 预先设置在 c l a s s p a t h 环境变量中则当系统启动 g u i时可以方便的使用 j a v a c o m . s u n . j i n i . e x a m p l e . l a u n c h e r . s t a r t s e r v i c e就足够了 ( 2 装载安全策略文件 一些运行服务需要运行它们的 j v m被一个特定的安全策略文件启动 安全策略 的概念来自于 j a v a 2 用于对 j v m中所运行的 j a v a代码提供更细化的控制 在图 4 . 1的左边是启动 j i n i各服务的指令右边是中止相应服务的指令其 中各个指令的具体设置可以在相应 g u i选项卡中设置 在指令设置中应该重视以下几个各个概念 a . 属性文件 当通过 g u i来启动 j i n i各项服务时首先要装载一个属性文件此属性文件 以 p r o p e r t i e s为后缀 启动 j i n i中的各个服务的参数设置都可以在这个属性文件 中进行设置 b . 代码库 理解代码库的最简单的办法是把它视为利用 r m i进行远程类装载的类路径 在 j a v a某个程序利用 r m i远程类装载查找它当前不知道的类时正是代码库告诉它 到何处找到该类 代码库指的是服务器进程如何告诉客户机进行到何处获得代码的 方法 图 4.1 启动 jini 33 同样的在代码库不要使用l o c a l h o s t 作主机名l o c a l h o s t 用来指代当 前主机因此如果服务器把代码基设为了包括l o c a l h o s t 的 u r l 则客户会根 据此代码库属性试图在自己的系统中下载代码而不是去找服务器同样当在同 一台机器上测试客户和服务器时它可以欺骗性地运行而如果在代码库的 u r l中使用实际的主机名并为每个服务单独运行 h t t p服务器则如前所述代 码下
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 2026年正版心理测模拟试卷子带答案
- 2026年全国职业院校技能大赛导游业务知识竞赛题库带答案
- 2026年中药油剂工知识考核模拟试卷带答案
- 2026年围棋等级考试题库带答案
- 2026年职业道德测试模拟试卷(含答案)
- 信息会考题库及答案
- 2026年朔州叉车考试题库带答案
- 2026年上林县明亮镇卫生院口腔科医师招聘考试题库带答案
- 外科胆道疾病题库带答案
- 钢铁厂轧钢工艺细则
- 高考语文句子重组专项突破训练
- 2025广东揭阳揭东农商银行小微金融部人才招聘(公共基础知识)测试题附答案解析
- 骨髓移植后血型鉴定课件
- 《邮轮烹饪英语》-《邮轮烹饪英语》-Appendixes
- 魅力辽宁课件
- 天津市2021-2024年中考满分作文59篇
- 口腔正畸接诊流程技巧
- 军队职工抚恤管理办法
- GB/T 39542.3-2025技术制图活动铅笔第3部分:黑铅芯HB铅芯弯曲强度
- 班级历程回顾
- 森林旅游学习通超星期末考试答案章节答案2024年
评论
0/150
提交评论