版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领
文档简介
学院大数据深化项目需求项目概况1.1学校信息化建设现状学院经多年的信息化建设,取得了一定的成果,随着各个部门业务系统的逐渐建设和完善,其持续带来大量的静态业务数据亟需整合;随着“最多跑一次”的深化推进,让数据多跑步,师生少跑路,衍生的办事大厅带来的大量的动态业务数据亟需整合;随着学院数据治理和优化,学院的师生生活数据也亟需整合、治理和优化,从而完成相对完善的学校的大数据服务。为解决数据流转时间长、效率低、查找不方便等问题,学校需建立完善一个通用的、“随需应变”的高灵活性融合式“数据服务大厅”,该系统将整合学校现有各业务系统数据,打破信息孤岛,解决师生“查、采、办、用”等各数据需求,形成一站式数据应用门户,有效解决师生“跑断腿”的服务现象,提升了我校整体的信息化服务水平,适应学校未来业务的发展需求。1.2项目总体建设目标本项目是面向用户提供的一站式数据服务大厅,打破各部门、各系统间的壁垒,以先进的数据-应用服务理念,将分散在各领域的数据和应用有效的整合起来,在帮助各系统有效的实现业务贯通和数据整合的同时,形成一个真正意义的高校一站式服务中心。对师生用户而言,实现同一种操作体验,完成各种信息服务和业务流程。对于学校管理者而言,通过业务的整合,实现校级的管理统计分析和优化再造,进入一个不断提升管理效率的良性循环。数据服务大厅的建设将给学校后续信息化建设提供一个从数据、业务、流程到系统对接整合的完整解决方案,形成“大中台,小应用”应用格局,满足学校后续各类新建应用的快速迭代上线。1.3项目总体建设原则 系统采用“大中台、小应用”的理念,实现应用开发多端融合采用B/S架构,深度整合学校现在表格自助填报系统和网上办事大厅,所有展现报表采用学校现有的报表平台进行二次开发,支持Unix、Linux、Windows等操作系统,支持Oracle、Mysql、MPP架构数据库。使用J2EE技术开发,采用组件技术及在数据交换上对XML的支持。系统必须遵循以下技术方面的原则:先进性和成熟性 系统设计采用超前思维,先进技术和系统工程方法,同时注意思维的合理性,技术的可行性,方法的正确性。不但能反映当今的先进技术和理念,而且具有发展潜力,能保证未来若干年内占主导地位。先进性与成熟性并重,并考虑到近年来的应用发展特点,把先进性放在重要位置。平台化和开放性 为整合资源和汇聚数据的需要,需要建设平台化的应用,具有开放性。既能满足已有应用系统的对接集成,又能提供标准开发的接口,快速接入其他应用。并建设应用的准入审核机制,让应用无缝对接。可靠性和稳定性 在考虑技术先进性和开放性的同时,还从系统结构,技术措施,系统管理等方面着手,确保系统运行的可靠性和稳定性,达到最大的平均无故障时间。可扩展性及易升级性为适应应用不断拓展的需要,应用系统的软硬件环境具有良好的平滑可扩充性,支持轻应用可通过后台配置及插件自由组合的方式实现。系统具有高度的可管理性,使得管理员和运行维护人员的管理简便快捷,降低运行维护费用。系统用户必须坚持易维护的设计原则,确保结构清晰、界面友好、操作简单、维护方便。技术规范和标准遵照已制订的相关信息标准、技术标准和数据管理标准,建立统一的技术规范和标准,建立统一的用户认证、统一的数据字典、统一的管理规范,并为第三方软件提供二次开发所需的接口规范,接口设计主要包括应用系统集成接口、数据交换接口等,实现与已有系统、计划建设系统的无缝对接。安全性和保密性系统具有完备的用户权限管理功能,实现分层管理、多级协作的权限分配机制和工作流配置管理,禁止超越权限的操作,保护原始数据,保护系统免遭破坏,信息资源的充分共享,更要注意信息的保护和隔离,设置系统安全机制,数据存取的权限控制。应实现高可靠性的数据备份方式,无需人工干预的前提下实现数据不少于每日自动异机备份,系统瘫痪(如数据库瘫痪、硬盘故障等)恢复时间应小于1小时。实用性和高性能 采用的技术具有实用、成熟、稳定、安全的特点,以提高系统整体运行效率为重点,既便于用户使用,又便于系统管理。应用服务器及和数据库服务器要求安装在不同的物理服务器上分级部署,支持5000注册用户同时在线,单台服务器支持普通应用并发>1000用户,确保在大并发访问量下的稳定可靠,具备系统运行监控和数据备份的有效策略和机制。1.4项目总体技术要求提供的平台和系统所采用的技术路线应充分支持采购人数据服务大厅的应用需求和未来发展,确保整体架构设计的科学性、数据结构设计的合理性、核心算法设计的先进性、部署设计的灵活性,确保系统的整体性能优越。1、遵循学校信息化标准。系统的建设必须符合和遵守学校制定的信息化相关标准要求,以便规范地进行业务数据的采集、存储、传输、应用。★2、涉及应用开发语言。采用Java编程语言,系统遵循J2EE的技术路线,基于B/S架构,业务应用系统必须基于Oracle11g或以上版本数据库,采用Html5+Css3结合的前端框架技术开发。3、面向对象的组件技术。面向对象技术的组件模型可顺利地建、后台分布式应用程序。4、应用程序开发与运行结构。应用系统平台的开发及运行结构要基于后台数据库的三层架构,即应用服务器和数据库服务器。5、接口技术。通过接口充分整合学校现有数字化校园的应用系统。能完成跨业务部门的业务流程和相对应的细颗粒度的分级授权体系。6、应用服务端支持IE8以上,Chrome、FireFox、Safari、360等主流浏览器,针对不支持的浏览器访问时应有引导提示;7、高可靠性与安全性。整个系统能在长时间内正常、稳定工作,避免随数据量增长系统反应迟缓。涉及隐私信息严格按照授权权限分层管理,对日常管理操作进行日志记录。8、本系统中,面向使用者的应用功能,均要求可以通过接口实现碎片化服务应用与数字化校园门户平台对接上线,实现用户业务在网上办理提交、反馈的一体化。系统建设内容数据服务大厅建设,面向校领导、校内师生及相关管理人员提供相关信息服务,同时提供个人相关的综合服务功能,整合学校办事大厅平台与表格自助填报系统开发的相关报表,提供师生在线“查、采、办、用”的等综合业务服务,同时与学校消息中心、日程中心、事务中心、个人中心等进行无缝对接。移动服务大厅基于学校现有企业微信平台开发,建设适应移动端数据服务大厅,提供师生精准个性化移动数据服务,与学校消息中心对接,精准化为师生提供平台消息、短信等提醒功能,预留钉钉、易班等移动平台的接入接口,如学校需要,建设方免费接入到相应的平台。业务中台建设高度灵活、简便易用的可视化业务整合平台,可根据需求自定义不同业务系统业务整合形成新功能,基于业务中台开发面向全校师生的数据服务。对现在报表软件平台进行大版本升级,建设方能平稳迁移所有已经开发的报表。序号设备名称数量功能技术参数要求1数据服务大厅(含移动端建设)1套1.开发功能导航和集中展示的数据服务综合门户,整合校务数据分析平台相关分析报表,建设“查、采、办、用”等统一综合服务的数据展现服务平台2.师生个人数据画像等个性化数据综合服务,并提供各类数据分析报告3.基于企业微信、钉钉、易班等移动平台,整合数据与流程应用,实现师生移动端定制化数据服务4.各类数据统计分析大屏建设2业务中台建设1套建设高度灵活、简便易用的业务整合平台,可根据用户需求自定义页面配置,服务整合;统一认证(含移动端)管理、授权和审计等;全校统一消息中心,支持各系统平台的聚合;3数据中台建设1套数据质量检测、数据计算与建仓、数据共享发布、数据治理清洗服务等4报表平台升级1套将学校现有报表平台升级到最新版本,提供原厂授权。业务中台需求业务中台实现数据服务大厅的统一管理,包括数据服务大厅的导航管理、栏目管理、分类管理等;并支持学校各类服务的整合和分类管理,并通过微应用管理将服务重新组合形成一类主题的服务集合。页面配置管理框架配置:管理和配置服务显示页面,使各类服务显示风格统一。导航菜单:数据服务大厅的服务导航配置,包括导航名称,访问地址,打开方式,显示图标,访问方式,排序等设置。首页配置:首页相关栏目的配置,是否显示等管理。感知配置:首页感知版块的配置。学校概况:首页学校概况版本的配置。友情链接:配置首页友情链接。服务导航平台系统配置:配置需要整合的业务系统,包括系统的类型,访问的地址,系统排序,系统的授权等。模块配置:配置各页面的模块分类,并配置模块所属的角色。服务中心:对服务大厅显示的所有服务进行统一管理,包括服务的名称,服务地址,提供服务的业务系统,图标,服务打开方式,服务的类型,服务的应用端等。服务导航:将服务分配到各个页面内,支持同一服务在多个页面中展现。服务权限:基于用户分组与角色体系,根据学校部门、职务、用户三级进行权限分配,用户、职务、部门数据与数据中心无缝对接,保证权限能根据人员的变更自动变更权限。统一认证服务
统一身份认证服务实现用户身份统一管理,认证中心除了传统的密码登录外,还提供微信、钉钉二维码、企业微信、手机短信的方式进行认证登录,并预留基于生物识别技术认证。提供标准的API接口,实现对第三方业务系统进行接入登录管理,只有接入的业务系统才能对接认证中心,否则不允许认证,并实现与业务系统之间用户的对照转化。用户认证信息保存在redis非关系型数据库中,确保session会话的一致性来实现集群。(1)仪表盘概况仪表盘提供系统运行状态的总览,使管理员对当前系统的运行状态一目了然,便于管理员及时发现问题和异常。管理员可以查看帐号概况、认证概况、服务器状态和系统结构概况等。(2)帐号管理帐号功能帮助管理员完成全校身份帐号数据的查询、增加、删除、修改、过期设置、锁定/解锁和加入组操作;提供基于差异视图的帐号同步功能;提供平台内帐号操作行为的统计功能。(3)认证管理认证功能提供对全校身份认证相关数据的管理功能,包括对认证集成应用的管理和全校用户认证行为记录的查询和统计。●企业微信集成系统提供了与企业微信绑定的功能,企业微信通讯录,通过认证中心自动同步至云端通讯录,并保持定时同步,企业微信身份认证集成,在用户访问该功能时,校园帐号和企业微信帐号实现自动绑定,就可以操作和当前用户相关的数据请求。校方在服务期内使用钉钉、易班等第三方开放平台,建设方免费开发对接。完成通讯录同步,应用接入等开发。(4)授权管理提供校内身份类型组的管理功能,用于区分用户的身份类型,为校内应用提供资源级授权。同时提供身份帐号入组和出组的管理功能,可基于Excel文件实现批量操作;提供授权管理行为的统计功能。(5)系统管理系统功能主要包括一些对平台运行起支撑作用的数据管理和功能设置,包括操作日志管理、管理员管理和配置管理功能。(6)审计管理审计功能旨在为管理员提供及时发现问题之用,可审计出异常的帐号、不合理的认证行为,用于发现系统可能存在的安全问题和隐患。统一消息服务消息中心旨在为提供统一的消息提醒服务,通过消息中间件系统,系统能整合多种通信手段,聚合各类消息(如流程待办提醒、通知、日程提醒等),并整合多种通信通道(如站内信、企业微信、钉钉、易班、邮件、短信等),提供多渠道消息提醒服务,支持消息点对点(P2P)、订阅/发布(Pub/Sub)通讯方式。系统能整合多种通信手段,无缝融入到校园的办公、教学、科研和服务中,降低通信成本、优化沟通方式、提升管理效率。(1)消息发布管理用户可以向自己授权范围内的成员发送信息,支持手机短信、邮件、微信端消息等方式推送。可以按人员、组织机构、全局组、地址簿选择发送消息,也可以通过手机号、邮件帐号等通道发送,发送通道形式可多选,多选的同时选择是否多种方式同时发送。系统支持模板消息,如接收端不支持附件则提供网址下载。系统提供对已经发送消息的管理,可以查看消息发送详情,例如:时间、收件人、主题、内容、发送状态、已读状态等。依据发送状态,对未成功发送的消息可进行删除、重新发送等操作;对于已发送的消息可以直接转发也可以编辑后转发。系统提供草稿箱功能,用于存放用户已编辑但未发送的消息。在草稿中的消息,用户可重新编辑后发送,也可删除。消息可以通过自定义文件夹分类管理,方便操作与查看。系统提供文件夹的增加、修改及删除。用户可以使用标签来对消息进行分类,方便操作与查看,提供标签配置管理,包括增加、修改以及删除功能。用户可以对自己重点关注的邮件加星标,方便操作与查看,星标可以取消。系统提供地址簿,地址簿是一种个人或部门的通讯录,用户可以自由创建地址簿并管理联系人,并能按地址簿进行批量发送。地址簿内的联系人支持系统外联系人,个人或部门还可以向他人共享自己的地址簿。(2)个人消息管理个人消息与个人用户对应,主要用于接收消息与个人消息管理,除了具备消息发布管理功能外,还具备以下功能:1)个人信息维护:展示用户的个人基本信息,包括学/工号、姓名、单位、手机、邮箱等,数据来源通过集成共享库权威数据获取。提供个人基本信息维护功能,包括手机号码、其他邮箱、qq、办公地址等信息;个人可以对自己的信息设置共享范围。2)个人消息管理:用于接收消息与个人消息管理,实现诸如收件箱功能、发件箱功能、草稿箱功能、回收站功能、地址簿等功能。可以对消息进行查询、删除、标记删除、分类、星标等操作,标记删除后的消息可在回收站中找到,回收站在一定时间后自动清空,也可以手动删除或恢复。消息可以通过消息接收时间、发送人、消息体等维度进行检索。3)提醒策略配置对消息的提醒策略进行配置,包括提醒方式(如站内信、企业微信、钉钉、易班、邮件、短信等)、提醒的消息类型以及接受时间的设置。(3)部门消息管理部门消息与部门对应,由管理员开设的代表组织机构的消息盒,是以部门发出的消息。1)角色管理与授权:部门消息模块设有“部门管理员”,并有角色、授权等功能,部门管理员可以再次授权给部门内其他成员。部门管理员可通过角色管理,添加不同的角色并且为角色添加成员,实现对人员的分角色管理,对某一角色进行授权,授权后该角色中的所有成员都拥有了此角色的权限,实现对同等性质的人员统一授权的目的。2)子部门管理:部门消息模块可以创建子部门消息模块,支持学校的垂直业务管理。部门管理员可以管理部门账号,例如为部门账号设置管理员、添加子部门账号,为子部门账号分配通讯录权限、机构人员维护权限、个人账号发送权限以及部门账号发送权限。3)消息审核管理:部门消息模块内可以开启审核流程,消息可以由信息员编辑、管理员审核通过后再对外发送。对于重要的消息,系统提供审核流程,部门内信息员拟稿后,可请求部门管理员审核、部门管理员可请求校级管理员审核,审核通过后才能对外发送。可以查看审核历史。(4)消息查询可以对所有消息的主题和内容进行检索,按“起始时间”、“结束时间”、“内容关键字”、“消息类型”、“消息来源”等多种条件查询。(5)统一用户平台消息中心将与学校认证中心对接,消息中心服务于广大师生,要为各部门、各院系、辅导员、班主任、任课老师提供通知发送功能。因此系统内必须具备数字化校园的基础数据,包括:组织架构、行政、教职工、辅导员、学生等信息。消息中心提供数据同步功能,能定时的以增量方式从共享库读取变化的数据到系统内部。支持应用程序的智能调度,具有基于B/S管理界面的远程统一监控工具,能对本地和其它远程节点、消息及应用状态进行监控。系统支持通过数据接口集成方式、API接口集成方式实现与现有业务系统的消息集成,给第三方应用系统提供消息发送服务。数据服务大厅数据服务大厅建设,面向校领导、校内师生及相关管理人员提供相关信息服务,同时提供个人相关的综合服务功能,整合学校办事大厅流程引擎平台与统一报表平台开发的相关报表,提供师生在线“查、采、办、用”的等综合业务服务,同时与学校消息中心、日程中心、事务中心、个人中心等进行无缝对接。数据服务大厅基本内容(1)首页数据服务大厅的入口,提供登录功能,并支持在未登录的情况下按照各类角色和办事类型预览办事大厅中的服务。登录后,各位数据展现和流程服务全部根据个人的权限进行展示。首页主要展示热点服务和推荐服务、常用服务、今日感知和学校概况信息热点服务是当前访问量比较多的服务,重点在首页提示;推荐服务是管理员推荐当前用户使用的服务;常用服务:根据大数据计算,显示当前全校用户的经常访问服务或用户登录后,显示个人自己经常的服务。今日感知:显示今天学校内主要场所的感知数据实时展现,如图书馆的借阅情况分析,图书馆的进出情况分析,教室的上课情况分析,食堂的学生消费情况分析,学校访客的到访人员的情况,进出校内车辆的情况分析,学生宿舍的归宿统计分析等。学校概况:显示今年的实时校情概况,主要包括学生概况,教职工概况,科研概况,校舍概况,办学条件概况,人才培养概况等,概况建设内容根据学校业务数据质量现场进行调整。整合校务决策分析平台的各视角的大屏,实现全纬度数据了解学校概况。登陆方式:系统支持匿名访问和实名登录两种方式。统一认证登录以后,可以获取与自身有关的信息,如资讯、业务系统信息等。个性化界面:系统提供个性化界面功能,根据不同角色个性化的信息展示,包括领导、教师、学生及不同类别的学生等角色,展示与角色相关的信息。消息中心:消息中心,实现相关消息的集成,集成学校办事大厅、其他第三方系统以展示当前登录人员的相关消息,如邮件数量、站内信,待办待阅信息等相关消息。系统入口:将学校各系统功能界面进行集成展示,提供给用户统一的展示,方便用户查询信息和办理事务。提供快捷链接,快速进入各个业务系统,并支持集成各业务系统消息进行展示,如展图书借阅信息、办事信息等。(2)查询中心2.1师生个人查询中心师生个人数据中心统一整合了师生各类信息查询,无需再单点到相应的应用系统去查询,统一通过数据中心的数据报表服务进行展现。师生个人查询中心需要整合学校报表平台配置的相关报表进行展现,并适应补充完善,基本涵盖师生个人信息、学习、生活、科研、教学、财务、资产等学校已有完善数据的所有数据查询应用。2.2公共查询师生信息:学院或部门负责人及相关业务授权人,可以通过综合查询方式,查阅某个师生(教职工、临时人员、本科生、研究生、附中学生等)的信息数据。查询结果页面应通过页面水印方式,加盖“当前操作人:张三(工号200****)”水印,提高数据保护。健康码信息:防控办负责人可以通过健康码信息查询,查阅学校所有人员的健康码申领情况及变动情况,轻松精准把控防疫工作。人脸照片信息:学院或部门负责人及相关业务授权人,通过查询,查看本部门师生人脸照片上传审核情况,通过短信方式催促师生完善个人照片,保证人脸认证业务上正常使用。(3)采集中心采集中心整合师生需要填写的信息,在一个页面统一展示,方便各业务部门信息采集,主要包括基本信息、科研信息、人事进修、教学信息等信息。此处需要整合学校报表平台的一表通应用。(4)画像中心画像中心是根据不同的对象,生成学校概况、学科画像、学院画像、专业画像、班级画像、课程画像、学生画像、教学画像,根据不同的权限,方便校领导、各业务部门统一查询相关信息,全面掌握各类信息的全貌。教师画像:可以列表形式呈现各单位教师的清单和简要信息;可查看教师的基本信息,包括姓名、性别、所属单位、行政职务、组织关系、职称等可查看教师的授课信息,包括所教课程的名称、授课对象、课程表安排、授课计划等。可查看教师的科研成果信息,包括其发表的论文、专著、申请的专利、科研成果、获奖记录,承接的科研项目信息等。学生画像:用数据展现鲜活、特点突出的学生形象以往,学生数据要到N个系统中去查看,很多业务系统学工管理人员查看权限,甚至有些数据无法查看。利用学生个人数据画像功能,集成学生在校全数据,全方位、多角度呈现学生在校状态。利用校园已有学生相关的数据,描绘学生在校的学习、生活、安全等方面的可以分类查看学生的基础信息、行政班级信息、课程与成绩信息、校内社交关系信息(室友、同班同学、同系学生、师承关系)、网络使用信息、图书借阅信息、一卡通信息(状态、交易)、校内轨迹(将学生的活动信息按时间序列进行整理,生成并存储每个学生的校内轨迹信息)、历史事件信息。个人数据画像通过智能算法提炼出关键词为学生标注形象的标签,从而使每个人都显得特征丰富、个性鲜明。为保护用户的隐私,只有特定权限的角色定义才可查看相关信息。(5)数据分析数据分析整合表格自助填报系统的相关分析报表并在表格自助填报系统基础上完善,分类进行展现,方便使用者在统一的页面找到需要查看的分析报表。完善内容包括:最多跑一次分析大屏:集成网上办事大厅业务数据与日志数据,构建最多跑一次数据大屏,展现部门办件量排行、部门完成量排行、热门应用排行、线上办数据支撑情况、应用建设总体情况等。感知数据分析:集成校内感知数据,包括就餐刷脸数据、图书馆进馆刷数据、学生跑步锻炼数据,车辆道闸情况等,形成师生食堂就餐刷脸情况,图书馆刷脸进馆情况,学生跑步锻炼情况、车辆进出学校情况等感知报表。(6)预警中心学业成绩预警:成绩退步预警:提供对全校各系较上学期成绩退步的学生名单预警、成绩退步学生人数及各系系部人数和人员的详情。可通过预警人数数字点击,可以钻取到系部退步学生人数统计列表,点击列表中的任一数字,可继续钻取到该大队下具体的成绩退步学生名单,以及成绩退步的具体情况。挂科人数预警:提供对全校各系部挂科门数超过一定数量的学生名单预警,系统可设置预警的阈值。可通过预警人数数字钻取到系部退步学生人数统计列表,点击列表中的任一数字,可继续钻取到该系部下具体的挂科超过预警值的学生名单及挂科的具体信息。图书借阅预警未借阅预警:提供对全校各系部未借阅的学生名单预警。图书模块可查看到相应的未借阅预警提醒。点击预警的人数数字,可以钻取到系部未借阅学生人数统计列表,点击列表中的任一数字,可继续钻取到该系部下具体的未借阅的学生名单。高借阅量预警:提供对全校各系部高借阅量的学生名单预警。生活消费预警:未消费预警:提供对全校近期未消费的学生名单预警。消费模块可查看到相应的消费预警提醒。需提示预警范围内的未消费学生人数,具体的未消费时间预警值可配置。用户点击预警的人数数字,可以钻取到系部未消费的学生人数统计列表,点击列表中的任一数字,可继续钻取到该系部下具体的未消费的学生名单。低消费预警:提供全校近期低消费的学生名单预警。健康情况预警:体测成绩预警:提供对全校各系部较上学期成绩退步的学生名单预警、成绩退步学生人数及各学院人数和人员的详情。可通过预警人数数字点击,可以钻取到系部退步学生人数统计列表,点击列表中的任一数字,可继续钻取到该系部下具体的成绩退步学生名单,以及成绩退步的具体情况。数据中台1、数据质量控制数据质量检测工具应包括数据规则检测、数据质量检测、检测任务管理等功能,全方位,多角度的对数据质量进行有效管理,并同时提供检测结果推送功能,以邮件或消息的形式主动发送检测结果给相关数据管理人员,便于数据管理人员及时发现数据质量问题。数据质量检测工具应可提供定义管理数据质量检测规则,依托这些规则分析数据质量,生成质量报表,把质量不高的数据自动挑出来,让管理者知道哪些数据不合规,反过来推动业务系统数据采集质量的提升。学校信息中心通过检测规则管理设置怎么样的数据是合规的,怎么样的数据是不合规的,管理人员定期查看检测报告,和业务系统相关管理人员一起,推动数据质量的改善。系统应至少支持以下检测规则类型:空检查规则:检查字段是否为空;会对元数据标记为不能为空的字段默认进行检查代码检查规则:检查字段取值是否在代码表(由系统中预先进行定义)中;会对源数据中有代码应用的字段默认进行检查文本检查规则:检查单个字段的文本取值是否满足指定的长度和格式,或预先定义的各种固定编码规则;文本长度支持单个长度、多个长度、范围组合等,文本格式支持包括:数字、字母、大写字母、小写字母、字母数字、汉字等,预定义的编码如邮政编码、EMAIL地址、URL地址、身份证号码等;提供全面的数据质量自动化检测工具,能够自动的对数据中心的主数据质量进行检测,并自动生成质量概况图表,供用户分析、排查数据质量问题;提供完善的数据质量分析,对问题数据进行检索、分析,是数据质量问题暴露的窗口。提供对数据质量问题数据的检索、对问题数据数量变化的趋势分析、对问题数据不同检核类别的数据分布分析以及对问题数据的整体分析功能。提供一个集中展示数据平台数据质量状况的窗口,数据质量报告支持图形化展现,包括曲线图、柱状图、饼状图等,并可支持钻取到明细页面,打通链路,支持实时导出即见即所得。并定时将数据质量监测报表发送到业务数据负责人邮箱或短信。数据质量检测工具检测的数据由于不一定会在一个数据中心库,所以业务系统需要支持数据源维护,当检测数据时可按配置选择是检测数据中心库的数据还是业务系统中的数据。数据质量检测工具需要配置数据集和字段,需要支持可从数据库中选择表或者视图自动根据选择的结果从数据库直接读取表结构信息生成数据集和元数据,避免需要人工一个个录入进去,大大提高工作效率以及错误的发生。数据质量检测工具元数据数据检测配置需要支持可设置多个验证条件,方便从不同维度进行数据质量检测,并支持每个元数据字段可设置为是否为核心字段和每个字段的统计占比,方便根据不需要的业务需求统计分析数据质量结果。数据质量检测工具需要支持设置新旧数据质量验证,由于数据实际情况会有很多历史原因,导致不能一刀切来生成数据质量检测结果,系统可按时间点和自定义SQL来设置新旧数据的区分,按时间点为可设置一个时间,系统会默认生成小于该时间的为历史数据,大于该时间的为新数据,验证时分别形成验证结果,自定义SQL则是自己写SQL来区分新旧数据,其余和按时间点一样。数据质量检测工具需要每天生成一份数据集总体验证数据验证结果,一份数据集不同字段的数据验证结果,每个字段的错误数据验证由于数据量不一定,存储可根据实际情况来配置是否需要保存,数据验证结果为统计分析提供数据来源,分析将可实现按每天的增量等情况。数据质量检测工具需要完全采用B/S架构,在不安装任何客户端软件的基础上通过浏览器即可对数据质量进行检测,便于用户操作使用。2、数据计算与建仓数据中台的数据计算核心的问题是解决大体量数据的预处理,基于主数据中心的标准数据,根据学校、系部、专业、课程、老师、学生等维护的分类预统计,并建立自动建立预统计数据仓库。数据仓库需单独配置数仓数据,计算后的数据存储于此库,区分其他业务数据库,专门存储用于共享。数据计算需要可以进行自定义建仓,按学校、系部、专业、课程、老师、学生、专题等分类进行归类,并按数据集、自定义SQL等配置方式对需要进行计算的数据进行配置,建仓即代表会在数仓数据库中创建表用于存储计算后的数据。数仓创建完成后对该业务需要计算的数据进行创建即表字段的创建,数据计算可以根据常规统计(求和、最大,最小,平均、求数)等、也可以根据自定义表达式及自定义SQL来进行统计,以适应各类统计要求。3、数据共享发布通过构建基于学校中心之上的数据服务查询引擎(API接口)发布服务,面向业务统一数据出口与数据查询逻辑,屏蔽多数据源与多物理表;在降低数据管理和使用门槛的同时,提高使用的效率,数据接口发布:提供数据服务功能,对中心数据库的表或视图数据进行封装,并采用JSON格式数据访问和维护接口。数据接口预览:支持预览发布的数据集.数据接口管理:支持启动及停止数据的服务接口,停止后禁止访问数据,启动后恢复数据访问。支持设置数据服务接口的有效访问时段。用户账号设置:支持设置可以访问数据服务的账号。数据授权访问:支持授权账号查阅数据服务目录。用户密钥管理:支持为授权账号生成数据访问密钥,用户使用密钥读取数据。数据访问统计:支持为授权账号生成数据访问密钥,用户使用密钥读取数据。数据访问统计:支持数据服务的访问统计。提供数据服务访问日志管理功能,可以进行访问记录的查询和统计。支持对数据服务调用的审计,能够实时查看在线客户端以及历史服务使用情况。4、数据服务功能1、支持将采集的数据动态发布为API的功能,管理员可以无需编程随时自定义API实时发布。2、可自定义API的分类方式,实现大量API的有序分类管理。3、发布API时可针对每个字段进行可选择的加密,防止敏感信息意外泄露。4、支持对API的实时状态监测,可查看API的调用情况。5、支持将非关系型数据库的数据进行API接口发布。6、数据采集入库后,可在平台中进行方便的数据内容查看。7、提供管理工具,对集群状态、主机状态、组件状态、性能指标等进行图形化管理。8、为了有效保障数据使用安全,要求数据访问与服务能具有精细化授权机制。帆软报表升级必须获得帆软的升级认证授权,保证能平稳升级帆软平台。1. 平台升级平台整体风格简约现代,交互流畅易用,支持登录标题与平台标题分开设置,配色支持更多的自定义项,包括顶部标题行样式、面板聚焦颜色、左侧导航背景、悬浮面板背景、标签栏背景、文字颜色;日志存储脱离数据库,改为基于帆软自主开发的Swift引擎,全面提高日志存取分析效率,有效避免由于日志过大导致系统过慢甚至宕机,优化了对超大量用户的支持(10W级用户),各管理系统页面可达到秒级响应。配置脱离XML,改存数据库,确保不再出现保存丢失的情况;用户管理:用户可被禁用;同步数据集可以增加ID;批量删除支持一次删除所有用户,不再是原来的一次最多删除一页用户;支持对平台使用用户进行设置;支持管理员在添加用户、为用户重置密码后,系统自动发送邮件通知此用户;目录管理:支持在根目录下添加模板;支持模板和目录混排;支持对目录整体进行批量删除;权限管理:去除了“用户权限查看”与“权限项查看”,所有配置所见即所得,可以更方便的查看和配置权限,增加了权限来源查看的功能,令权限的配置过程更加清晰,支持直接对用户设置权限,支持权限复用,权限配置时支持对人员管理、目录权限、管理系统进行搜索;支持在平台中创建数据连接;支持所有日志支持导出,增加了高级查询条件,同时增加记录了模板在平台中的路径、不通过平台的报表访问、打印与导出的操作类型,高级系统监控插件内置,新增用户行为、模板热度、性能监控三个Tab,新增管理日志,记录全部平台管理设置操作日志;增加公有云授权机制,不需要提供机器物理信息,可直接到帆软认证服务器进行在线认证,方便快捷,安全可靠。2. 集群升级支持热部署:增加删除节点不需要重启集群,只需拷贝其他节点文件到该节点并启动既可;对高可用性方面优化:适配新的集群特性,某节点宕掉,自动切换其他节点,登入的用户无需重新登录。并保持所有单机功能可用。提升了集群的高可用性;对并发性能方面优化:负载更加均衡,同时单节点支持的并发数更大。在负载均衡的情况下,并发数随节点呈线性增长。提升了集群的大并发性;新增本地缓存机制:文件服务器、状态服务器、外置的数据库的内容会在第一次及更新时,读取信息到缓存里。并在保存文件、配置时写入各服务器。提升了访问响应速度并有效降低对各服务器的读写并发;新增状态服务器:解决Session同步的各种问题。状态服务器存储集群的各类信息。存储Sessionid与节点信息和关联关系,不再需要配置Session粘滞。简化了配置内容,使用简单;新增文件服务器:用于共享模板及模板所引用的附件。保证每个节点访问的模板及附件实时一致。保证模板及附件的高一致性;集群下,平台配置信息全部存储在外置数据库。保证每个节点访问的平台配置实时一致。保证平台配置信息的高一致性;平台新增集群的可视化配置界面:可进行状态服务器、文件服务器的绑定与配置。并在开启集群后,可实时查看各节点的内存运行情况,并配置各节点的IP,端口,主机名的信息。让集群部署更简单快捷。3. 安全性升级平台中所有密码加密存储,降低密码泄露风险;使用Token验证,解决HTTP响应分割、会话标识未更新、跨站点请求伪造的问题;不再返回报表绝对路径,修复发现目录列表模式的漏洞;新增Cookie增强、文件上传校验、SecurityHeaders及访问控制等一系列安全防护功能。能降低上传恶意文件、跨站脚本等多种攻击方式的威胁,缓解CC攻击和爬虫爬取,提高应用的安全性;支持密码定期更新,密码强度限制与修改密码时短信、邮箱验证,进一步提高了平台的安全性建设,防暴力破解增加登录次数限定功能,可以限制允许登录错误次数和锁定时间,超出则锁定,可等锁定时间过去自动解锁或通过管理员解锁及重置密码解锁。增加滑块验证和邮箱验证,滑块验证开启时如用户输入密码错误次数达到两次,第三次开始需要进行滑块验证;水印功能优化:设置界面简化,现在可对字号进行设置,解决了密度设置不明确带来的困扰;优化对公式及换行的支持,并以顶层透明的形式显示,不再被内容遮挡;优化打印及PDF导出效果,让数据更加安全。4.运维升级云端运维:通过大量复杂计算模型、基于大数据的统计、比较和拟合,给出更精准、更智能、更全面的运维建议。无需消耗本地计算资源。持续更新成长的运维平台,功能更新不会对用户产生任何负担;数据脱敏:只涉及产品改良和应用运维所需数据,不涉及业务数据,用户可以随时看到上传了哪些数据;优化智能释放机制:在内存占用达到阈值时可以通过强制GC有效地回收资源,保证系统的可用性。同时用户可选择在内存使用过高时自动地清理过早或过大的会话;增强模板限制功能:通过对于数据集中的行数、模板中的单元格数、SQL的执行时长进行限制,有效防止单模板占用过大内存、SQL执行过久造成线程阻塞的问题;使用延迟队列检查Session是否过期,用户可以通过简单的设置对会话生命周期进行管理。5.设计器升级远程设计重构:传输时的序列化数据格式由XML改为字节,降低传输的数据量,采用Netty框架做私有通信协议替换HTTP协议作为远程设计的通信协议,降低传输的数据量,保证了网络间通信的高效,降低了数据传输的出错率;支持使用系统管理员账号配置远程设计用户,并给远程设计用户分配各自的模板的权限。方便远程设计下每个开发人员的权限精细化管理。保证模板安全,避免权限泄漏;修复内存泄漏的相关bug,新增限制最大缓存模板个数功能,保证内存不会随着使用时间增加而不断提升。从而解决卡顿问题;远程设计状态下,支持在设计器内对目录下的文件和文件夹进行操作。可对文件和文件夹进行新增、删除、重命名。6.大屏升级新增更炫酷播放图表、离屏控制、组件动画。针对大屏应用场景:增加了6~7个高级图表组件,15种动态加载动画及离屏控制功能并支持3D组件和加载动画的联动。解决了大屏用户追求更酷炫的效果和远程操控大屏的需求;通过视频媒体传输方式,将大屏界面投影到手机或平板,并通过点击等操作实时远程操控大屏界面。7.图表升级调整地图目录结构,新增'世界'目录,且置于'国家'目录之上,形成钻取关系;推出老图表的插件,有需求的用户可以通过安装插。8.移动端升级在表单重布局下,图表数据点不再以悬浮tooltip的形式显示,转为顶部显示,扩大了图表数据点提示显示区域,同时指尖在屏幕连续滑动,即可切换查看数据点提示;在表单重布局下,选中图表后,可以通过双指滑动对图表进行缩放,对于密集型图表,提升了操作便利性;在表单中,每个组件独立,进行组件内部操作如滑动、翻页、缩放等,通过激活组件再进行以区别于表单整体的操作;在表单重布局下,选中图表会先显示数据点提示,然后可以进行联动、钻取操作;表格中点击格子,若只有联动或者单超链,仍然会直接触发。弹出形式更佳统一,提升视觉效果,操作更加方便。9.其他升级与优化单元格设置为「以HTML显示内容」时,在原有支持功能的基础上,新增了对于IMG标签、List标签、Style标签、Table标签中的各项属性、文字上下标、文字样式的支持;在有HTML时可支持单元格的各项属性设置;自适应优化:页面重加载时不再到后台请求计算,而是改为前台缩放,减少计算,优化体验。包括拖动浏览器窗口大小、执行全屏操作等;(3)取消原控件校验出错时的回滚机制,替换处理逻辑为:保留当前编辑内容,即控件编辑过后如果校验失败,则提示出错信息同时控件保留当前编辑的内容;优化了控件在多个实际值对应相同显示值情况下的处理逻辑,当直接在控件里选值时,无论是参数查询还是填报控件,均支持实际值和显示值多对一的情况;邮件正文预览报表内容时,以HTML方式显示报表内容。解决了之前邮件中以图片显示报表内容时出现的内容模糊,文字不支持复制的问题。三、项目实施要求1.时间进度本项目自合同正式签署生效起2个月内完成,平台系统应进入全面试运行。投标人需要在投标文件中给出实施工期进度表。具体进度要求待定,中标后与采购人商议决定。实施时间基本分为两个阶段,每个阶段的具体内容可根据学校的实际情况适当进行调整。投标人需要详述项目实施方案,包括工期进度表、项目实施组织机构、项目组成人员分工和人员保证、项目实施方式与采用的项目管理工具等方面的内容。2.实施方案投标人案中应进行简要的描述,主要内容应包括以下几个层面:(1)组织架构与职责:在项目的管理过
温馨提示
- 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
- 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
- 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
- 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
- 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
- 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
- 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
最新文档
- 品类管理中潜在机会识别法
- 2026江苏南京市第一医院劳务派遣人员招聘1人信息及参考答案详解1套
- 2026四川省骨科医院招聘50人备考题库含答案详解(基础题)
- 2026陕西西安文理学院高层次人才和紧缺特殊专业人才引进50人备考题库及答案详解(易错题)
- 2026福建泉州市晋江市医院医共体单位编外人员招聘8人备考题库(一)带答案详解(完整版)
- 2026湖北省长江新材有限公司社会招聘9人备考题库含答案详解(预热题)
- 2026云南文山州富宁县第四批城镇公益性岗位招聘5人备考题库含答案详解(夺分金卷)
- 2026国家海洋环境监测中心海洋生态修复室劳务派遣人员招聘2人备考题库及答案详解(历年真题)
- 2026河南事业单位联考驻马店市招聘142人备考题库含答案详解(培优a卷)
- 2026福建省南平人力资源服务有限公司顺昌分公司( 就业见习岗位)招聘1人备考题库及完整答案详解一套
- 2026年乡镇高层次人才引进笔试题库与解析
- 2026云南昆明市禄劝县第一人民医院昆明市延安医院禄劝医院编外人员招聘19人笔试备考试题及答案解析
- 血透室职业暴露应急处理演练脚本
- 2026年人员代理合同(1篇)
- 2026年甘肃省陇南市宕昌县人民法院招聘聘用制司法辅助人员笔试备考试题及答案解析
- APQC跨行业流程分类框架 (8.0 版)( 中文版-2026年4月)
- 2025年浙江省综合性评标专家库评标专家考试历年参考题库含答案详解
- GB/T 3457-2013氧化钨
- GB/T 13810-2007外科植入物用钛及钛合金加工材
- 纳米材料的力学性能课件
- 2.3二次函数与一元二次方程、不等式
评论
0/150
提交评论