高职院校实时流场景新探–无锡职业技术学院全域数据中心

      无锡职业技术学院（以下简称“无锡职院”）是一所国有公办的省属全日制普通高等职业院校，是首批“国家示范性高等职业院校”之一。作为走在全国高职院校前列的学校，无锡职院对于智慧校园建设一直有着深刻的认知，坚持立足校情、推陈出新，不断探索大数据技术在更多业务赋能场景中的落地实践。

      为了解决前期信息化建设成果不能满足日益增长的信息化发展需求问题，学校与迪塔维深入合作，构建全域数据治理及校园大脑决策分析平台，解决数据集成共享与数据质量提升、数据应用问题。通过全域数据治理工作，建立起一套合规的、可持续提升的数据规范体系。

      值得一提的是，全域数据治理及校园大脑决策分析平台实现了“全实时数据同步”这一近乎苛刻的场景需求，不仅保障了数据的即时性和准确性，也为学院的日常教学和管理提供了强大的数据支撑。

      下面跟着迪小数一起看看无锡职院的建设情况吧~

流批一体数据引擎：实时同步的基石

      无锡职院全域数据治理及校园大脑决策分析平台的实时同步能力依托迪塔维自主研发的流批一体数据引擎实现，该引擎基于分布式架构，在学校多台虚拟机服务器之间实现多机热备、负载均衡，是实现数据实时同步、分布式数据集成的关键技术支撑。

      集数据批量计算与实时数据流处理能力于一身，通过流式数据处理技术实现低开销、准实时（毫秒级）的业务数据入湖、数据清洗入仓的操作，同时以先进的实时数据订阅机制和开放的数据API，确保数据的实时下发和共享，助力学校快速打通各个异构数据源，以准实时（秒级延迟）的方式完成数据采集、计算和监控呈现。

四大实时流系统：实时同步的实战尝试

      支持大批量任务集成并发及数据实时同步，成功实现校级数据资产的集成共享，人事系统、一卡通系统、一站式服务大厅和协同办公四大核心业务系统实现了T+1向“实时流”的跨越，支撑师生快速办卡、进出校门申请、一卡通消费查询、课程会议安排等实时业务需求。

      通过实时流技术，人事系统实现了人员信息、薪资变动的实时同步，解决数据流转延迟的问题；一卡通系统保障了账户余额、消费记录等数据的实时更新和同步，实现了统计查询实时展现的需求；一站式服务大厅实现不同业务系统间数据的实时交换和共享，大大提高办事效率；协同办公系统则保证了文件、任务等信息的实时更新和同步，满足上课、会议安排、值班请假等实时数据展现的要求。

      基于更多的实时数据，学校实现了自动化、高保鲜的数据质量检测服务，支持在线生成数据质量统计报告、图表及详细的质量问题明细，能够自动向业务部门推送数据质量问题并进行质量预警，大幅简化了数据质量管理的流程，通过实时监测和自动化反馈机制，帮助老师迅速发现和解决潜在的数据质量问题，为业务决策提供更科学准确的数据支持。

33个实时任务稳定运行：实时同步更广阔的应用天地

      无锡职院在本次数据治理过程中，通过搭载流批一体数据引擎的数据中台能力，共同步运行了33个实时任务，上百个高频轮询（秒级）数据同步接口，覆盖了数据实时采集、传输、转换和同步的多个环节，依托流批引擎的高效处理能力，所有任务均得以平稳、高效运行，为学校的高时效性业务场景提供了实时、准确的数据支持。

      自数据中台4.0问世以来，“实时同步”一直是4.0的一个鲜明符号，经过两年时间50多个用户现场的验证，迪塔维流批一体数据引擎在数据实时同步能力的功能与性能方面，均承受住各种突发情况的考验。在此过程中，虽然各位友商也纷纷宣布具备了实时能力，但我们相信，只有经历过时间和现场双重考验的技术才能真正称之为成熟的技术。以无锡职院的实际场景来看，各类批处理、流处理任务相互关联、编排、自由切换，在系统运行的近两年时间里，从未出现过后台崩溃、平台宕机等问题，系统的稳定性、技术的先进性不断得以验证，这才是我们能够放心向用户推广的经验与技术。

      自2022年10月项目开始部署实施以来，迪塔维与无锡职院的成功合作，既是一次对迪塔维产品技术与服务能力的肯定，也是学校在智慧校园建设方面再上一层楼的有力推动。

      相信在双方的共同努力下，智慧校园建设将迎来更加美好的蓝图。