互联网信息搜索及监测系统_网络舆情

1、-. z. - - .可修编 .互联网信息搜索与监测系统白皮书金鸽网络科技2014年7月-. z.目录 TOC o 1-3 h z u HYPERLINK l _Toc397610628一、开发背景 PAGEREF _Toc397610628 h 2HYPERLINK l _Toc397610629二、系统概述 PAGEREF _Toc397610629 h 2HYPERLINK l _Toc397610630三、系统构造 PAGEREF _Toc397610630 h 2HYPERLINK l _Toc397610631四、功能简介 PAGEREF _Toc397610631 h 2HYPE

2、RLINK l _Toc397610632(一)信息采集 PAGEREF _Toc397610632 h 2HYPERLINK l _Toc397610633(二)信息监测 PAGEREF _Toc397610633 h 2HYPERLINK l _Toc397610634(三)智能分析 PAGEREF _Toc397610634 h 2HYPERLINK l _Toc397610635(四)信息预警 PAGEREF _Toc397610635 h 2HYPERLINK l _Toc397610636(五)统计报告 PAGEREF _Toc397610636 h 2HYPERLINK l _T

3、oc397610637(六)舆情导控 PAGEREF _Toc397610637 h 2HYPERLINK l _Toc397610638(七)辅助功能 PAGEREF _Toc397610638 h 2HYPERLINK l _Toc397610639(八)系统管理 PAGEREF _Toc397610639 h 2HYPERLINK l _Toc397610640五、系统特色 PAGEREF _Toc397610640 h 2HYPERLINK l _Toc397610641(一)深度与广度相结合的信息采集方式 PAGEREF _Toc397610641 h 2HYPERLINK l _T

4、oc397610642(二)基于语义的负面信息过滤技术 PAGEREF _Toc397610642 h 2HYPERLINK l _Toc397610643(三)智能的行业核心智能体 PAGEREF _Toc397610643 h 2HYPERLINK l _Toc397610644(四)信息采集智能调度 PAGEREF _Toc397610644 h 2HYPERLINK l _Toc397610645(五)属性自动提取技术 PAGEREF _Toc397610645 h 2HYPERLINK l _Toc397610646(六)来源规则匹配技术 PAGEREF _Toc397610646

5、h 2HYPERLINK l _Toc397610647(七)黑自动发现技术 PAGEREF _Toc397610647 h 2HYPERLINK l _Toc397610648(八)移动终端信息展示技术 PAGEREF _Toc397610648 h 2HYPERLINK l _Toc397610649六、运行环境 PAGEREF _Toc397610649 h 2HYPERLINK l _Toc397610650七、公司资质 PAGEREF _Toc397610650 h 2HYPERLINK l _Toc397610651八、联系方式 PAGEREF _Toc397610651 h 2-

6、. z.开发背景根据第33次中国互联网络开展状况统计报告，截至2013年12月，中国网民规模达6.18亿，互联网普及率为45.8%。其中，手机网民规模达5亿。中国进入群众麦克风时代，各类网络媒体如微博、微信等新兴媒体层出不穷，导致社会舆论格局发生巨大变化，每一位网民和手机用户都可能成为公民报道者，在一些突发公共事件中经常成为第一信源。特别是微博客、微信的异军突起，成为新闻曝光和舆论发酵的重要平台，信息的传播速度足以在数小时传遍全球，因此，及时掌握舆论相关信息，无论对政府还是企事业单位，都有着至关重要的意义。由于互联网具有虚拟性、隐蔽性、发散性、渗透性和随意性等特点，越来越多的网民乐意通过这种渠

7、道来表达观点、传播思想。但是，网络信息存在很大的不可控性，使网络更容易成为一种非理性的表达渠道，任何一个被关注的事件，都容易在网上产生舆论风暴效应，短时间形成新闻热点，进而对政府、公众产生巨大的舆论压力。为了有效的解决舆情管理工作中存在的滞后、被动的弊端，到达全面、及时的获取互联网信息的目的，需要建立互联网信息搜索与监测系统，形成全方位的监测网络体系，实现手工监测模式向信息化监测模式的转变。系统概述互联网信息搜索与监测系统软件，是一款集信息的搜索、采集、分析、预警、整合、呈报、导控为一体的海量信息挖掘工具软件，以实现发现信息源头，追踪传播路径，监控传播主体，导控舆论倾向为总体目标。系统针对不同

8、行业的业务需求，在领域专家的协助下，实现对互联网上的论坛、博客、新闻、贴吧、微博、搜索引擎、微信等各类媒介信息的精准搜索与实时监测；系统采用自然语言理解、知识挖掘、本体构建等核心技术，对信息进展有效的提取、分析、过滤、聚类、分类和预警，以满足广阔用户对信息及时性、全面性、智能性、精准性的使用要求；系统提供官方信息权威发布和精准信息定向回复功能，以到达早监测、早发现、早处置、早导控的目的。系统构造系统采用 B/SBrowserServer，浏览器效劳器系统构造。数据的分析和存储由位于网络中心的效劳器处理，不管是系统管理员还是终端用户，都通过浏览器来访问本系统获取、分析和处理信息。这种构造能做到真

9、正的分布式网络计算，有效降低网络流量，减轻客户端负担，还能平安、方便地与互联网接口。另外用户分布或行走于全国各地，通常都有移动办公需求，系统提供移动终端访问接口，用户只需随身携带移动通信设备，就可以访问系统，获取最新舆情信息。系统构造图功能简介系统首页信息采集系统采用定向采集和全网搜集相结合的信息采集方式，针对与日常业务具有密切关系的进展实时监控，使的任何新的信息能快速及时的被采集。(1)置的搜索信息整合功能系统置了几十个搜索引擎，支持对知名新闻媒体、论坛、贴吧及微博、微信平台的站垂直搜索，扩大了信息采集的围。管理员根据系统的运行状态、效劳器资源使用情况，灵活设置搜索引擎的启用或暂停，提升系统

10、搜索引擎的自动调度能力。采用基于知识库的信息提取技术，过滤掉局部无效的信息，提取出关键、敏感的信息，到达准确搜索。 (2)新闻、资讯类的采集系统支持对新闻上的新闻、资讯信息的采集，可以采集信息中的标题、作者、来源、时间、正文、点击率等信息项，可采集包括新华网、人民网、中国政府网、新浪新闻、搜狐新闻、联合早报、路透中文网、中国网、环球网、网易新闻、正义网等等。(3)博客类的采集系统支持对博客上的博文信息进展采集，可以采集博文标题、发表时间、容、标签、分类、评论、评论人、阅读人次、转发量等信息项，可采集包括新浪博客、博客网、网易博客、搜狐博客等等。(4)论坛、贴吧类的采集系统支持对论坛、贴吧上的发

11、帖回帖信息进展采集，可以采集帖子标题、发表时间、发帖人昵称、帖子容、浏览次数、回复次数、回帖人昵称、每个回帖容等信息项，可采集包括强国论坛、天涯社区、西祠胡同、新浪论坛、百度贴吧等等。(5)微博、微信类的采集系统支持对新浪、腾讯、搜狐、网易等各大微博上的信息进展采集，同时支持对微信平台信息的搜索采集，可以采集微博首页的热点信息、各行业及政府机关的官方微博信息、指定用户ID的微博上的信息。(6)个性化采集目标的一键式配置过程用户除了可以在公共采集目标中勾选自己所关注的采集目标外，还可以自己新增自定义采集目标，自定义采集目标是用户个性化的，只有管理员可以看到，其他用户是看不到的。系统采用自动化的采

12、集目标配置过程，用户只需要输入的地址，就可以实现的对该的采集。的类型、编码、时间格式以及版面、子版面等信息参数系统都能自动获取，无需用户配置。信息监测系统将互联网的信息监测分为六种：本我监测、业务监测、行业监测、人员监测、事件监测、定向监测。本我监测，主要监控网络上与本单位密切相关的信息，比方信息中提到本单位的*个人、*个部门或者*件事，只要涉及到本单位的信息，就可以监测到，并自动归集到预先设定的本我监测类别。业务监测，主要监控网络上与本单位业务围密切相关的信息，比方检察院，关注的就是检察系统工作中感兴趣的信息，为检察工作提供案件线索、分析事件开展态势等，比方反贪、渎职、公诉等等相关的信息，只

13、要与本单位业务相关，就可以监控到。行业监测，主要监测互联网上同行业兄弟单位的最新信息。人员监测，主要用来对本单位主要领导、关键岗位或对本单位影响较大的相关人员的监测，采用智能化生成规则的方式，可根据用户需要，生成几十、几百、甚至上千条监测规则。事件监测，主要是针对已发生的或者将来可能发生的重大突发性事件进展监测。用户可以选取系统置的特征词，也可以自定义需监测事件的特征词，用来完成对网络上舆情信息的有效挖掘、及时监测。定向监测，可以对新浪、搜狐、腾讯、网易等主流微博进展定点监测，还可以对百度贴吧、微信进展定点监测，保证第一时间获取关注对象的信息。智能分析系统采用多维的信息分析统计技术，对网络突发

14、事件从发生、蔓延、高潮和缓和各个阶段的信息分布、媒体传播趋势、媒体分布及起源信息进展分析，并以图文并茂的形式直观展示网络舆情的动态。智能分析信息预警监测预警是一种时效性要求很高、重要程度要求很高的精准网络舆情监测功能。监测预警包括监测和预警两个过程，当系统监测到舆情信息后将及时发出预警，让相关人员第一时间掌握舆情状况。本系统预警方式分为三种：在线弹框预警、手机短信预警和电子预警。系统采用信息分级预警机制，用户可根据自身需求自由设置信息的预警方式、预警周期、预警对象以及预警条件。用户可以设置当系统监测到突发事件发生时，以短信、等方式及时通知相关人员，实现及时预警、快速处理舆情的效果。用户无需时刻

15、盯在电脑桌前就可查看和处理最新的监测信息，真正实现把用户从繁忙的舆情监测工作中解放出来。预警设置统计报告系统提供舆情专报、简报和舆情统计汇总表三种报告形式，用户可以针对*个舆情事件生成专报，记录事件的来龙去脉，也可以从信息列表中勾选一些重要的信息生成信息简报，向相关领导汇报，还可以统计一段时间的舆情详细信息，方便管理人员整理归档，此外系统还支持专报的自动生成功能。系统提供媒体统计、专题统计和预警统计三项综合统计功能。媒体统计功能可以直观的反映出近阶段用户的工作重点偏向于哪些媒体，在舆情引导工作方面做到有的放矢。专题统计功能可比照反映出各个专题监测的当前网络转播态势，指导用户开展处理工作的优先。

16、媒体统计舆情导控舆情导控包括舆情管理、导控日志两个功能。舆情管理实现单位重大舆情信息的归集管理功能。本功能提供论坛、贴吧、微博的官方权威信息发布功能。结合系统中的媒体分布分析、信息起源追踪等功能，系统可以通过发布官方声明、事实真相、说明态度等信息，预防舆论激化、舆论一面倒的情况出现。除了官方权威信息发布，系统还提供各大论坛、微博、贴吧的定向回复功能，对于个别信息进展有针对性的一对一对话，通过回复网上的帖子、微博、贴吧等澄清事实真相、警告煽风点火的网民，从而到达引导舆论走向、将不好的苗头扼杀于萌芽状态的目的。权威信息发布导控日志记录用户的官方权威发布、信息定向回复的操作日志，同时记录舆情导控操作

17、的反响结果，如*论坛发布信息成功等。辅助功能账号管理账号管理功能用于微博、论坛、贴吧等账号信息的新增、修改和删除，添加的账号可用于系统采集信息、发布信息和回复信息。通讯录通讯录功能用于设置当前用户的通讯录信息，包括联系人的、人员类型、手机、地址等信息。通讯录设置的信息可用于用户推送信息时，推送目标的选取；预警设置时，预警目标的选择；报告生成时，推送目标的选择。规则管理规则管理功能用于新增、修改、删除系统的专题规则，包括正文规则、来源规则和预警规则。媒体管理媒体管理功能可以自定义媒体来源中的行业分类、地域分类和媒体类型，系统在检索信息时可根据域名自动过滤信息。快捷检索快捷检索功能用于检索系统信息

18、, 支持四元组搜索。用户可通过关注点的检索结果发现新的关注点和关注信息，从而对系统监测进展查漏补缺。系统管理包括用户管理、网络设置、参数设置、登录日志等，可对用户账号进展管理，也可对系统网络环境进展设置。权限控制系统提供完善的用户权限管理机制，既充分保证了系统的平安性，又保证了各用户之间信息的私密性。用户创立的监测专题、预警方式、专报、简报等实行相互隔离，其中系统管理员可以统一管理用户创立的监测专题，帮助用户维护监测专题。用户可以将获取到的信息推送给指定的联系人，实现舆情信息协同处理。系统状态用于查看系统设备当前的各项性能指标，包括CPU、存、硬盘、网络资源使用情况，系统线程调度状态、采集规则

19、队列情况、采集信息数、授权信息等。系统特色深度与广度相结合的信息采集方式系统采用搜索整合和定向采集相结合的信息采集技术，既可以做到对网络舆情信息的全面搜索，又可以有针对性的对指定的论坛、博客、新闻、贴吧、微博等媒体的深度采集。真正做到网络舆情的全面采集，不留死角。基于语义的负面信息过滤技术由网络知识工程专家精心搜集分析整理的一套涵盖了公职人员工作、生活特征、职位、行业特征、地域等各方面的本体知识库。基于知识库，系统动态置一套涵盖了所有系统用户所属行业的行业负面库，结合智能的语言分析技术进展监测信息的相关性及负面性过滤，极大的提高了系统信息的精准性和智能性。智能的行业核心智能体系统由专门的知识工程研究小组搜集分析整理出一套完备的核心智能体，包括行业本体库及通用本体库。其中行业本体库涵盖了全国各类行业的行业指代词、特有职位和业务关键词，通用本体则包含了公职人员的行为特征库、职位库和公共组织库。依托完备的核心智能体，配合精细的逻辑算法，系统可以根据不同用户所属行业及地域，自动生成成百上千条与其相关的日常监测规则，用户也可以在规则管理中手动添加修改删除日常监测规则，还可以添加URL规