痛点剖析
数据是学校的核心资产,也是学校举办高水平大学的核心竞争力,因此解决数据问题, 提升信息化应用水平,已是当务之急,刻不容缓。目前学校已经步入智慧校园建设阶段,在前期信息化建设阶段,已在基础设施、信息系统、用户服务方面取得了长足的进度,但是随着应用建设的逐步深入,管理更加细化,由于 数据平台建设时间已久,在当前智慧校园的建设需求下已无法实现较好的支撑,有关于数据的问题也不断暴露出来,面临的问题具体表现如下:
——标准无法有效执行:当前的学校信息标准更多的是留存于文档介质,导致信息标准的修订难以快速有效分发,业务应用的承建商不能方便获取最新版本和直接使用信息标准。
——缺乏完善的数据治理体系:应加强对数据质量、安全和生命周期管理,控制数据从输入、加工、传输、输出等数据各个处理环节的质量要求,完善和统一数据生命周期管理规范和流程。
——数据架构落后带来的数据质量问题:数据集成、交换和共享的系统架构和核心技术老旧,导致更多依赖线下进行数据共享,且中心库的数据结构没有经过严格意义上的针对性 设计,没有经历“数据治理”阶段,数据范围和数据质量不容乐观。
——缺乏更多数据种类的利用:目前数据平台仅面向于业务系统中的主数据进行集成和管理,对于更多类型的数据无法进行承载,例如半结构化机器日志数据、非结构化外部互联 网部数据等。基于传统关系型数据库的数据平台架构,无法对当前的一些有价值的“大数据”提供支撑和处理,限制了学校未来数据工作的开展。
——数据共享方式老旧,效率低下:智慧校园阶段对于数据的实时交互和应用的快速响应提出了更高的需求,传统基于 ETL 工具单点集成的模式不仅无法复用建设成果,更带来了完全依赖人工、线下沟通协调复杂的问题。目前急需更为高效的线上数据连接体系,实现 一次治理多次复用,并构建一套可连接业务厂商、信息化处、校内核心数据、业务应用的完整体系。
需求愿景
从学校当前的建设现状出发,即首先解决数据集成共享和数据质量问题。通 过建设数据治理平台和日志处理分析平台,大大改善当前存在的数据体系问题。并引入数据治理服务,帮助学校建立起一套可持续提升的“全量数据资产体系”,保证学校对于核心数据资产的沉淀和利用。并在此基础上构建统一的大数据平台,为今后所有的信息化应用建设提供低门槛、可获取的数据服务,从而加快应用建设步伐、降低数据对接成本,进一步实现大数据平台对智慧校园建设的支撑作用具体建设目标可细化为:
1) 通过数据治理平台的建设,构建完整的从业务数据输入、加工、传输、输出等数据各个处理环节的质量管理体系,对将数据处理的流程进行有效的管控。避免原先对平台承建厂商的过度依赖,实现学校对于业务系统数据的自主管理。
2) 引入数据治理服务,包括需求调研、信息标准制定与迭代、代码标准制定与迭代、数据集成清洗转换、数据质量提升等方面,最终形成标准化的数据资产和对应的管理制度,从数据集中管理阶段逐步向全量数据资产利用阶段转变。
3) 日志处理分析平台的建设,在业务系统数据治理的基础上,进行更多数据类型的综合治理和关联应用。实现对例如网络、行为审计、防火墙等海量日志数据的处理,并与学生、教师等业务数据进行关联,拓展分析的维度,提升分析精准度。
4) 构建基于大数据平台的统一数据开放和管控体系,降低数据对接的难度,进一步实现线上的数据开放和全流程管控,为智慧校园生态体系的构建打下坚实的基础。
5)构建基于大数据平台的分析应用,为学校教师群体提供可感知、愿意用的大数据分析服务,解决教师个人信息口径多、各系统间数据不一致的问题,通过数据聚合从不同视角呈现个人及其关联数据。