领域大数据应用开发与运行平台技术研究

来源：软件学报杂志2017年第6期北京时间：

作者：王建民

单位：王建民，清华大学 软件学院, 北京 10008411

摘要：随着大数据技术在不同领域的快速应用，构建大数据应用系统的开发与运行一体化平台，降低大数据技术在各行各业应用普及的门槛，为面向领域的大数据应用系统的快捷开发和高效运行提供方法、工具和平台支撑，成为大数据产业发展的迫切需求.由于大数据固有的复杂性、动态性、多样性及其价值独创性，目前尚未形成系统化的大数据软件开发方法，难以满足不同领域对大数据全生命周期处理的多样化需求.大数据时代的软件工程面临的挑战，体现在互为依赖的两方面：面向大数据全生命周期的集成设计开发环境和基于软件生命周期的系统运行分析工具.结合特定领域的实际需求，研究面向领域的大数据应用系统开发与运行一体化平台技术，覆盖大数据生命周期（获取、清洗、集成、分析、呈现）以及软件生命周期（设计、开发、运行、优化），形成自管理、自适应、自优化的平台化解决方案.在此基础上，开展面向装备物联网及气象民生服务的大数据示范应用，以验证平台的有效性.

关键词：领域需求分析;一体化平台;运行时分析工具;大数据生命周期

基金资助：国家自然科学基金（61325008）；国家科技支撑计划（2015BAH14F02）；清华信息科学与技术国家实验室（筹）大数据科学与技术专项