云计算环境下基于数据关联度的海洋监测大数据布局策略
来源:计算机工程与科学杂志2015年第11期北京时间:
作者:黄冬梅1,随宏运1,贺琪1,赵丹枫1,杜艳玲1,苏诚2
单位:(1.上海海洋大学信息学院,上海 201306;2.国家海洋局东海信息中心,上海 200136)
摘要:海洋监测数据是具有强数据关联的大数据,如何高效地进行数据布局,是制约其有效管理和应用的关键问题之一。在云计算环境下,针对海洋监测大数据的特点,提出了一种基于数据关联度的海洋监测大数据布局策略。在保证数据中心存储均衡的情况下,综合考虑了监测任务、监测点和监测数据之间的关联,建立了海洋监测点间的关联度、监测数据间的关联度和监测数据全局关联度,从三个角度对海洋监测大数据进行布局,使得同一数据中心内的数据具有较高的关联度。通过实验分析,该 方法降低了用户访问海洋监测大数据的响应时间,为海洋监测大数据提供了一种有效的布局策略。
关键词:海洋监测大数据,云计算环境,数据布局,关联度,
基金资助:国家自然科学基金资助项目(61272098);上海市自然科学基金资助项目(13ZR1455800);海洋公益性行业科研专项(2011050346)
2015年11期其他文献查阅:
海量气象数据实时解析与存储系统的设计与实现
云计算环境下基于数据关联度的海洋监测大数据布局策略
面向大规模云资源调度的可扩展分布式调度方法
基于低阈值单元的高性能低功耗设计方法
申威处理器硬件数据预取技术的实现
面向高校教学云服务的虚拟机动态调度方法
基于OpenMP的包络对齐并行方法研究与实现
一款可综合全数字锁相环设计与分析
数据流Eager传输:一种分布式流体系结构中的性能优化技术
基于Spark Streaming的视频/图像流处理与新的性能评估方法
一种基于改进的DBSCAN的面向海量船舶位置数据码头挖掘算法
云环境下基于Bayesian主观信任模型的动态级调度算法
数字微流控生化芯片多液滴稀释方法的研究
一种基于HBase的空间关键字查询算法
边排序质量影响因素研究
一种基于网络编码的新型卫星网络可靠组播机制
考虑用户和传播属性的节点影响力评估算法
基于知识发现的风险最小化授权模型
运用SPIN对开放授权协议OAuth 2.0的分析与验证
基于协同过滤的Web缓存替换算法研究
基于逆向游走的PageRank社交网络影响力度量算法
具有7-(8,0)型自同构的二元双偶极值码
Android平台上的多用户无线投影控制系统设计
面向函数依赖的隐私保护研究
广义可能性决策过程的计算树逻辑模型检测
因素空间的属性圆定义及其在对象分类中的应用
一种基于词序的社会情感演变分析模型
基于CAN/LIN双总线电动汽车数字仪表系统的设计
甲骨文知识图谱构建中的实体关系发现研究