【毕业学位论文】(Word原稿)资本市场网络信息监控系统的设计与实现-软件工程

中图分类号： 学校代码： 10055 密级： 公开 专 业 硕 士 学 位 论 文 资本市场 网络信息 监控 系统的设计与 实现 论文作者 指导教师 副教授 申请学位 软件工程 培养单位 软件学院 答辩委员会主席 评 阅 人 南开大学研究生院 二一 三 年 五 月 中文摘要 中文摘要 互联网传播是信息技术迅速发展 形成的新型传播方式 ， 网络已经被认为是继电视、广播、报纸 之后的“第四媒体” ，它使得 信息的传播更 便捷、 更 广泛 、更 快速 。 由于 网络有 着传统媒体无法比拟的优势，越来越多的人通过互联网获取 信息 和发表 观点 。 网络信息监控已经成为各级政府和主管部门 一项重要工作。 资本市场是一个信息市场，市场化程度非常高。互联 网 也日 益成为资本 市场信息传播的主要渠道。面对网上日益泛滥的资本市场信息，资本市场监管部门需要及时了解和严密监控 网上的各类 资本市场信息 ，掌握信息 动态，发现误导市场信息。 目前，解决这一问题的最佳信息途径就是开发信息监控系统对资本市场网络信息进行实时监控。 本文首先分析了 资本市场网络信息监控系统设计的背景及研究现状，介绍了相关基础理论和相关技术。其次， 结合 资本市场网络信息监控 的实际 工作，分析了系统的需求情况， 提出构建 资本市场 网络信息监控系统 的设计。最后， 在分析与设计的基础上，对系统的功能模块的实现进行了必要的说明，并结合系统运行 的实际界面对系统的实现效果和用户操作进行了简要介绍 。 关键字 ： 资本市场 ， 网络信息监控 ， 系统分析 ， 系统设计 is a of of of of to an of at is a of a of of of of to in a of on At to is to of of of of of of it of a a of to on it of of by 目 录 中文摘要 . I . 录 . 一章 绪论 . 6 第一节 研究的背景 .二节 研究的现状 .三节 论 文的研究内容与组织结构 . 论文的研究内容 . 论文的组织结构 .二章 基础理论与关键技术概述 . 10 第一节 资本市场网络信息概述 .二节 资本市场网络信息的类别及特征 . 资本市场网络信息的 类别 . 资本市场网络信息的特征 .三节 资本市场网络信息监控 . 信息源的选择原则 . 资本市场网络信息 的监控重点 .四节 系统开发的关键技术 . B/S 结构 . 息检索技术 . 据库 .五节 本章小结 .三章 系统的需求分析 . 17 第一节 系统的总体需求 .二节 用户类型分析 .三节 系统的功能与用例分析 . 个人设置功能 . 系统配置功能 . 实时信息 .录 专题分析功能 . 信息处置功能 . 统计报告功能 . 我的工作区功能 . 信息检索功能 .四节 系统的性 能需求 .五节 系统的可行性分析 .六节 系统的开发与运行环境 .七节 本章小结 .四章 系统的设计 . 30 第一节 系统设计原则 .二节 系统架构设计 .三节 系统的功能模块设计 . 个人设置模块 . 系统配置模块 . 实时信息模块 . 专题分析模块 . 信息处置模块 . 统计报告模块 . 我的工作区模块 . 信息搜索模块 .四 节 系统的数据库设计 . 系统 设计 . 数据表结构设计 .五节 本章小结 .五章 系统功能的实现 . 45 第一节 用户登录功能的实现 .二节 个人设置功能的实现 . 个人登录密码的修改 . 压缩密码的修改 .三节 系统配置功能的实现 . 配置分类规则 . 配置采集源 . 配置用户权限 . 配置时间域 . 词库管理 .四节 实时信息功能的实现 .五节 专题分析功能的实现 .录 第六节 信息处置功能的实现 .七节 统计报告功能的实现 .八节 我的工作区功能的实现 .九节 信息搜索功能的实现 .十节 本章小结 .六章 总结与展望 . 60 第一节 总结 .二节 展望 .考文献 . 61 第 一 章 绪论 6 第 一 章 绪论 第一节 研究 的 背景 随着互联网技术的不断发展，拉开了信息时代的大 幕。从空间上看，网络遍布 社会 各个角落，各个行业；从时间上看，网络每时每刻都是在运行，不断有人发布信息，信息传播的速度也是其他媒介无法比拟的；从传播方式看，由于 将 传 统的单向传播 改变 为双向传播， 人人都成为 信息的发布者，又 是信息的传播者和使用者 。信息的来源范围扩大了，影响力更大了 。 中国互联网络信息中心 (计发布的 第 31 次 中国互联网络发展状况调查统计报告显示， 截至 2012 年 12 月底，我国网民规模达到 ， 互联网普及率 （互联网使用人数占全国总人数的比例） 为 如图 示 。 图 国网民规模与互联网普及率 在 互联网应用上 ， 获取信息依然 是网民的首要 选择 。资本市场是高度信息化的市场，信息的公开、真实、及时是资本市场有效运行的基础。互联网以其在信息传播方面的便捷、交互、迅速等优势已经 成为资本市场参与者获取信息的重 要途径。 目前，不仅新浪、网易、搜狐等综合 门户网站纷纷开办了财经频道，各财经类报纸也创办了网络版，各种专业财经网站如雨后春笋般成长。一方面由于互联网的便捷及时性，网络财经媒体的发展壮大， 丰富了 资本市场参与各方 获取信息的途径，并正取代传统媒体成为 其 获取 资本市场 信息的首选。另一方面，第 一 章 绪论 7 网络媒体也成为 资本市场参与者 发表见解、意见，发泄不满的场所。 由于网络媒体匿名性，信息发布相对传统媒体非常自由，各类虚假的信息，谣言、非法信息也充斥其中，更有违法者利用互联网传播信息操纵市场，扰乱市场秩序。 面对网上各类资 本市场信息，如何做到及时监测， 及时 掌握 动态 ，及时化解信息误传带 来的风险，打击借助互联网进行 非法活动，对于资本市场监管者来说是一个课题。 目前解决这一问题的最佳途径是开发和设计建立互联 网信息采集、监测 、分析、报告 系统，通过技术手段，利用专用的 信息监控系统 ，及时获取相关信息。 建立 网络资本市场信息数据库 ，并对网络信息进行分类，以可视化的界面对热点新闻和专题进行展现。 同时，对敏感 信息进行监测，及时发现，及时处置， 为 资本市场监管 者及时掌握 信息状况 ，打击网上 违法行为提供服务。 第二节 研究 的 现状 互联网 被认为是继报纸、广播、电视之后的“第四”媒体，由于其传播速度快、范围广、门槛底、互动性、匿名性等特点，已经成为公众获取信息的重要载体 ，也是公众发表意见、看法的重要平台。近年来，随着一系列“网络事件”的爆发，网络 信 息 也越来越得到各级政府、各类单位、研究机构的重视。 目前，随着 互联网 信息检索技术 和信息挖掘技术的发展以及 信息监控 工作的需要， 国内外 出现 了不少网络信息 监控系统。国外对 网络信息的 监测和分析等相关方面的研究起步很早。比如： 主要是按照情感 偏好 对文档 内容 进行 分析 ， 并按照 正面和负面 两种类型对 搜索 到 的内容 进行 分 类 显示。 为“基于互联网的信息挖掘检索平台”。 该系统按照 语义规则 将 网页 分成各种类 型 ，并对 各个 网页进行了详尽的注释 ，它可以对网络信息进行复杂高效的检索 。 它在 互联网上检索企业数据库 就 象搜索大众化 信息 一样 方便 。 观点挖掘系统 它是通过对 文本 内容进行分析，找出其中表示主观意思的句子，并对其中表示 态度、情绪、观点 的句子进行 注 释 和标 识 ，并形成信息摘要。 随着我国网络事件的不断发生， 网络信息监控工作越来越重要。 国内一批专业从事互联网信息技术的公司 也开发了各种各样的网络 信息监控系统 。比如 ：第 一 章 绪论 8 深圳乐思软件技术 有限公司开发的 乐思舆情监测系统 ， 复旦大学舆情研究实验室主办的国内最大的舆 情研究和监测平台中国舆情网的帕拉斯舆情监测 系统、麦知讯公司开 发的 第三方 互联网 舆情 监控 系统、 奇虎 义网络信息 监测系统等，这些系统运用 了 自主研发的 互联网 搜索引擎 和文本挖掘等技术 ， 基本上实现了 对互联网 信息进行自动采集 、 敏感词 识别、智能 聚类 分类、主题发现、专题聚焦 ， 热点话题 追踪等功能。 综合对比分析现有的网络 信息 监 控 系统 ， 可以看出： 目前的网络信息监控系统基本上是以搜索引擎 为框架， 信息 监控的 范围相对较广泛 ， 涉及的信息包括方方面面 。主要包括， 社会政治、经济文化、教育医疗、突发 社会事件 等 信息， 缺少 对 具体专业领域内的研究，对资本市场领域的涉猎和研究极 少。但是，通过对网上信息监控现状的研究 ， 对资本市场 网络 信息监控系统 相关开发 设计工作 提供了很好的帮助 ，为本文的研究 工作具有 借鉴和参考 价值 。 第 三 节 论文 的 研究内容 与组织结构 论文的研究内容 本文 的研究内容 主要围绕以下几点展开 ： （ 1） 通过 分析 传统模式下 资本市场信息监控 的 主要工作 ， 从 功能需求和性能需求两个方面 对系统需求 进行梳理 ， 简要分析 系统开发的可行性。 （ 2）根据系统的需求分析，分别从 网络结构设计、 功 能模块划分、数据库设计 等多个方面 完成系统 设计工作 。 （ 3）根据系统的需求分析和设计思路，简要 描述 功能模块中 各 主要界面的实现情况。 （ 4）简要 总结 系统开发 的主要 工作， 展望 系统未来可进行的更新和升级 工作。 论文的组织结构 论文内容的组织结构 为 ： 第一章 绪论。在这一章中，主要是对论文研究的背景 和研究内容等进行 第 一 章 绪论 9 简要 介绍。 第二章 理论基础 与关键技术概述 。这一章对 与 资本市场网络信息 监控系统开发、设计 相关 的 概念、 关键技术等进行 简要的阐述。 第三章 系统的需求分析。在这一章中， 从功能需求和性能需求两个方面，对 资本市场 信息监控 系统的 需求 进行描述，对系统开发的 可行性进行分 析 。 第四章 系统的设计。在这一章中，分别从系统的 网络结构组成、功能 模块以及数据库等多个方面， 对 系统开发所必须的设计工作 进行 描述 。 第五章 系统的实现。在这一章中，给出了 资本市场网络信息监控 系统主要功能模块的实现界面，对实现情况进行了简要的介绍。 第六章 总 结与展望。在这一章中，对系统的设计和开发工作进行了总结，并对系统 未来的发展和持续开发进行了展望 。 第 二 章 基础理论与关键技术概述 10 第 二 章 基础理论 与关键技术概述 结合 资本市场 网络 信息 监控工作的 实际 ， 在分析研究 当前 信息 监控 系统 的开发与应用 的基础上， 为更好的研究资本市场网络信息监 控系统， 需要简单介绍 系统 在开发时 涉及的 相关 基础 理论 和 关键 技术 等 。 第一节 资本市场网络 信息 概述 “信息 ”一词在英文、法文、德文、 西班牙文 中均是 “日文 中为 “情报 ”，我国台湾称之为 “资讯 ”，我国古代 是用 “消息 ”。作为科学术语最早出现在哈特莱（ 1928 年撰写的 信息传输 一文中。 20 世纪 40 年代，信息的奠基人香农（ 出了信息的明确定义。此后许多研 究者从各自的研究 领域 出发，给出了不同的定义。 本文要研究的信息是指社会生活中人们普遍认知的信息。 信息， 泛指人类社会传播的一切内容 ， 就是 能够为视觉、听觉、触觉和嗅、味觉等信息采集器官采集到的各种直观的、抽象的事物（例如文字、数学、音乐、景物、色彩等都被称 之为信息）。 网络 信息 ，就是人们在 互联网上传播的一切内容，是人们能够在互联上看到、听到的各种事物的总和。 资本市场 (亦称“长期金融市场”、“长期资金市场”。 是 期限在一年以上各种资金借贷和证券交易的场所。因为在长期金融活动中，涉及资金期限长、风险大，具有长期较稳定收入，类似于资本投入，故称之为资本市场。 包括股票市场、债券市场和长期信贷市场等。筹资者和投资者是资本市场的主要参与者，加上中介机构和管理机构，他们相互制约、相互依存就构成了 完整 的 资本市场。 资本市场网络信息 ，就是人们在 网络上 传播的与资本市场 本身及其 参与者有直接或者间接关系一切内容。就是人们可以通过互联网获得的关于资本市场及其参与者有关的 新闻、观点、评论、意见、传言等。资本市场网络信息 主要包括 网 上关于国家宏观经济政策、金融政策、 市场运行情况、 监管机构、上市公司、中介机构、投资者的各种信息 。 第 二 章 基础理论与关键技术概述 11 第二节 资本市场网络信息的类别及特征 互联网 技术 快速发展及其应用的普及 ， 使得 互联网 已经成为 信息 传播的 重要 途径 之一， 成为了人们获取信息的重要渠道 。资本市场网络 信息载体和传播介质都是互联网， 资本市场信息通过网络的作用，传播速度更快、 范围更 广、影响力也更大。不同类型 的信息 关注度也不同，公信力不同， 影响力不同， 需要按照不同类别和 特点 来对资本市场信息 进行 监控 。 资本市场网络 信息 的 类别 网络 在 资本市场 信息 产生和 传播过程中起着 越来越大的 作用。 资本市场 网络 信息 按其来源主要 分 为 ： 新闻和评论信息 、 论坛 (股吧 )信息 、博客 信息 、 微博客 信息 等。不同的 信息 来源 有着不同 的 传播特性， 有着不同的内容偏好，影响力和公信力也不尽相同。 (1)新闻 评论 信息 ，这部分 资本市场 信息 主要包括 新闻内容及其评论 。 这类信息主要来源于各综合门户网站（新浪、网易等 ）的财经频道、专业财经网站（和讯、东方财富等）的 综合 新闻 、财经要闻 频道， 各种 传统 媒体的网络版 （证券时报网、资本证券网等） 。此类信息多是具有新闻资质的媒体发布的 新闻和以及对新闻事件的权威评论 ，内容 基本 真实可靠 、观点客观公正，影响力也相对较大 。 (2)论坛 （股吧） 信息 ，该部分 资本市场信息主要来源于 各种网络社交平台 （天涯社区）的 财经社区论坛， 各类 综合 网站 或者财经网站（ 搜狐、新浪、东方财富）的 财经论坛、股吧等 。 这类信息在网络信息中数量 最大， 网民关注、参与度最大，影响范围广 的。 同时， 此类信息多是网民观点、看法的表达 ，也有传闻、传言的 散布，甚至会有一些谣言和过激的言论 。 (3)博客， 主要指财经博客。这部分资本市场信息主要是各类财经博客作者表达其对资本市场新闻、评论、事件的看法、观点的文章。 通常是 作者经过深思熟虑 的 ， 是作者积累的资本市场知识和经验的思想结晶， 所阐述的观点，得出的结论也都是有理有据的， 对 政策、事件 的反思与讨论也最深刻，看法也 更鲜明，更透彻。 其影响力与作者本人在资本市场的影响力相关。 (4)即时通讯 信息，指 、聊天室等 中传播的信息 ，交互性强，信息来源范围更广 ，个人观点是 也都是随意的，即兴的 ， 情绪化的，很难 找到成体系 第 二 章 基础理论与关键技术概述 12 的 观点 。 这类信息私密性强，影响小，通常不作为监控的重点 资本市场网络信息的 特征 资本市场从一开始就是一个信息市场，资本市场信息往往影响市场的运行，影响证券的价格，从而会伴随着一定的利益。 随着互联网的不断发展而产生发展的， 资本市场信息与互联网结合，使 它 的传播力与影响力大大加强，其即具有资本市场信息的特点，又 具有网络 信息的一般特点。 具体来说， 资本市场网络信息 的 具 有以下特征 ： (1)开放性。资本 市场网络信息的开放性主要表现在信息发布、信息传播与信息浏览的开放性。互联网从一开始就 是开放的， 任何 人任何时间 、在任何地方 ，只要 能够上网 ，都 可以在互联网 上发布 信息、发表观点 、浏览信息 。 资本市场的参与各方都可以通过互联网发布信息、查阅信息，对资本市场政策、事件进行评论。 (2)集中性。 虽然各类新闻网站、财经网站、论坛迅猛发展，各网站 或者多或少有涉及资本市场 相关信息，但由于 信息使用 者的浏览 习惯、信息的权威性和影响力 等原因。少数网站的信息涵盖了大多数有影响的信息，少数网站集中了大多数信息使用者的阅读。 资本市场信息主要集中在各大门户网站财经频道 ，财经门户网站、财经论坛等， 人们对其浏览和评论 也 都集中在各大门户网 站、论坛、 财经名博 等，具有相对的集中性。 (3)即时性。 资本市场瞬息变化， 人们总会对 影响市场运行的 政策 信息 、 热点评论 感兴趣， 对市场热点事件尤为关注。同时， 市场发生波动时很快会有各种传言信息在网上传播。资本市场的 政策、评论、事件对市场的影响也会在很短的时间扩散， 随着时间的推移，人们对这些信息的注意度也 会下降， 影响也将慢慢消退 。 (4)突发性和随机性。 资本市场网络信息同其他网络信息 一样，都具有突发性和随机性的特点。人们的注意力多集中在当下发生、或比较敏感的事件或现象，这些事件的发生都有随机和突发的特点，一旦某 个敏感的 资本市场 事件发生， 信息会很快在网上散布 ， 对市场的影响 就会迅速形成，而后在互联网上会 放大，并 迅速传播。 (5)随意性 。网络 是 是虚拟的 ，信息发布者可以是匿名的， 并且缺少一定的 第 二 章 基础理论与关键技术概述 13 规则限制和有效监督。 投资者在遭受损失时、情绪激动、发泄不满往往会随意发布一些不负责任的议论，更有一些 不理性、偏激 言论。 第三节 资本市场 网络信息监控 信息源的选择原则 互联网上 的存在着各种各样的信息 ， 如何在海量的互联网信息中采集到 信息监控 工作需要的 信息，是 信息监控系统开发者必需考虑的和解决 的一个 重要问题，在 解决了 信息监控技术难题的基础上 ， 选择可靠且具有代表性的信息源也要 非常重要的 。 可以说信息源 选择 的成功与否关系信息监测工作的成败。 具体来说， 互联网资本市场 信息源就是呈现 资本市场新闻、 事件、现象以及相关 观点、 评论的网站 及其频道 。 选择 信息源 主要应该遵循以下原则： 1、影响力原则：随着 互联网 的普及和发展，资本市场的不断发展壮大，越来越多的人参与 到 资本市场 之中 。同时，更多的人从互联网获取资本市场信息，但不同的网站信息的影响力不同，资本市场信息监控就是要对具有一定影响力的信息进行监控 。 2、相关性原则：资本市场信息监控工作要 求 所获取的信息要与 资本市场信息监控 工作目标相符合，是与 资本市场参与各方相关的新闻、 事件、现象以及相关 观点、 评论 等 信息，其他无关的信息都属于无用 信息，大 量的无用 信息势必影响系统工作效率，甚至会影响互联网 信息 监测的结果 。 3、时效性原则：资本市场 瞬息万变，对信息 时效性 的要求更高。 信息的时效性 就是 指获取最新事件信息的及时程度。对于资本市场来说，资本市场信息的时效性决定信息价值， 第一时间获取 信息是信息监测工作的基本要求 。 一条再重要的信息，失去了时效性就失去了价值。 4、关注度原则 ： 关注度就是指人们对信息的重视和注意 程度。 对于 资本市场信息来说关注度越高的信息其 传播速度就越快， 传播 范围也就越扩。关注度很高的信息也就是日常所说的热点信息。 资本市场信息监控就是对影响力大、相关性强、市场关注度高的信息进行 采集、整理、分类、分析、报告。同时，又要考虑监控的时效性 。 第 二 章 基础理论与关键技术概述 14 资本市场网络信息 的 监控 重点 依照上述原则对网上资本市场信息源网站进行选择，一般采用人工判断选择的方式。 如何判断一个网站的 信息相对资本市场来说具有影响力、相关性、时效 性和 具有较高的关注度 ， 除了 页面的访问量和用户的链接数等参考的标准以外，网站排名和日常工 作经验也是选择信息源网站的重要参考 。 从资本市场信息来源分类，可以将信息分为新闻信息 、论坛信息、博客信息、 即 时通讯工具信息等。资本市场监控主要监控前三类信息， 通过百度查询中国 综合门户 网站 财经频道 排名 或者财经网站 排名获取各类网站排名 。 按照排名靠前的网站结合资本市场网络信息监控工作的经验，并通过 对 网站信息的相关分析，选择 属于 资本市场 信息的来源 网站的财经新闻频道、财经论坛频道 等 。同时，考虑到各类资本市场的专家经常通过互联网发表对 资本 市场相关政策的评论，其影响力不容忽视 ，所以 这类专家 的 博客也 要依据其更新频率和活跃程度酌情收录。 第 四 节 系统开发的 关键技术 B/S 结构 B/S 结构 即 浏览器 /服务器 ） 结构， 是 起后的一种网络结构模式 。 客户机上只 需 要安装 浏览器（ ， 客户端 工作主要是在览器 上完成 。 系统功能的核心部分集中 安置在 服务器 上 。同时在 服务器 上安装 各种 数据库。 用户通过 浏览器 发布指令经 数据库进行数据交互。 这样 统一了客户端 ， 简化了系统的开发、维护和使用。 B/S 架 构只在服务器端（ 安装管理软件 ， 所有的客户端只 安装浏览器 ， 主要事务逻辑在服务器（ ， 只有 极少部分事务逻辑在前端（ 现， 用户 操作完全 通过浏览器实现 ， 网络管理人员只需要 管理服务器和 做硬件 维护。 B/S 结构的主要优势有（ 1）用户端 不 需 用安装任何专门的软件 就 能使用。（ 2） 系统的 维护和升级方式简单。 但是 ， B/S 结构的也有不足 ： 因为主要核心第 二 章 基础理论与关键技术概述 15 部分及数据库都在服务器上，容易产生超负荷运转，一旦发生故障，后果非常严重 。 息 检索 技术 由于互联网信息技术的 迅速发展及其应用的不断推广，使得 息海量增长，传统的通过浏览来查找所需要信息的方式已经不能满足人们检索 息的 需要。 从 20 世纪 60 年代以来 ,信息检索领域在索引模型、文档内容表示、匹配策略等方面取得了 很多研究成果 。 这些技术的成功应用，使得 息检索得以实现。 息检索是指从大量 档的集合中找到与给定的查询请求相关的、恰当数目的文档子集。 息检索， 一是 全文 信息 检索技术 。 全文 信息 检索技术 就是把 将文档看作是全文处理的对象， 对大量 息 建立由 关键字或词 到文档的倒排索引 ，在此基础上使 用关键 字或 词来对文档 进行查询， 系统 按照查询请求，从信息数据库中检索与条件相匹配的信息，并将相关 文档 网页 返回给用户 。 另一种方式是 通过网站分类技术的应用，将网站 进行树状 归类 ,每个 网站 至少 属于一个类别 ，并对网站进行简要描述 ,人们通常按照类别查找需要的信息。 如 一定程度上， 足了人们信息检索的需要。但是，无论哪种技术都有其自身的缺陷。全文检索虽然 是一个很成熟的技术 ，但它 返回的文档数 非常 庞大 且精准度不高， 缺乏检索的智能化和个性化， 同时 覆盖也不十分 全面 ， 某些相关的文档可能又因为不包括相应的关键字而检索不到。 同样， 网站分类技术 虽然因为网络信息导航极大的方便 用户而大受欢迎。但 它 成本较高 ， 且不容易查询 到网站内部的重要信息造成了信息丢失。 据库 由瑞典 前属于 关联数据库 在不同表中存放 数据 ， 而不是 在 一个大 库内 存放所有 数据 ，这样 速度 和 灵活性 都提高了 。 虽然 与其他的大型数据库 （ 例如 相比， 章 基础理论与关键技术概述 16 存在 不足之处，但是 由于其 体积小、速度快、成本低，开放源码 等特点。 常高， 于一般的个人使用者和 中小型系统 来说已经绰绰有余 了 ，而且由于 此可以大大降低总体拥有成本 。 为了降低总体 成本 ， 在中小型 系统 中广泛 选择 了 第 五 节 本章