基于大数据技术的气象算法并行化研究

来源：计算机技术与发展杂志2016年第09期北京时间：

作者：李永生;曾沁;杨玉红;陈晋

摘要：在气象数值预报解释应用业务中，传统数值算法的应用呈现逐步增加的趋势，但是随着算法输入数据种类和数据量的增加导致算法的完成时间大幅增长，甚至出现了算法完成时间性能瓶颈。为了突破算法时间上的性能瓶颈，基于OpenCV算法库，实现了多元逐步回归和卡尔曼滤波算法的执行模块，采用Map-Reduce计算框架设计和实现了多站点输入数据分割的并行化执行模块；规范了算法输入和输出的数据格式，设计了并行算法的Web服务流程以及实现了基于Rest Web Service的算法访问接口。业务应用实验测试表明，并行算法能够很好地满足气象业务实际需求。

关键词：大数据分析技术;并行化;气象数值算法;Web服务