《计算机技术与发展杂志》发表论文赏析
作者:李恩洲;况立群*;张元;韩燮;熊风光
摘要:针对供热环境在城市间一体化程度的提高而引发的设备种类繁多、采集信息量大、数据类型多样化、处理和分析困难以及各设备数据信息展示不直观的问题,研发并实现了一种智慧供热大数据监测平台,并在山西省供热体系中进行了应用。 平台以云计算为基础架构, 采用基于 React 的前端技术,将开发模块组件化,并通过构建虚拟 DOM( 虚拟文档对象)机制解决了因复杂和频繁的 DOM 操作引发的性能瓶颈问题。 针对供热设备产生数据的结构特点,研发基于 kafka+Spark Streaming 的数据清洗方案,解决了因数据量大、种类多样化而产生的数据处理效率、存储设备压力以及实时数据传输问题。 此外,平台还提供了定制化的可视化界面,并且通过数据分批处理机制,解决了实时数据和大数据量展示过程中响应慢的问题。
关键词:智慧供热;监测;React;可视化;B / S;kafka;Spark Streaming