《计算机工程与科学杂志》发表论文赏析

BigFlow:科学数据跨中心协同分析服务系统

来源:计算机工程与科学杂志2025年第4期北京时间:

作者:朱小杰, 程振京, 王华进, 杨刚, 田尧, 樊东卫, 米琳莹, 梁兆基,

单位:1.中国科学院计算机网络信息中心,北京 100083;2.中国科学院大学,北京 100049;3.中国科学院国家天文台,北京 100101

摘要:大数据技术与科学数据的融合催生了诸多科学研究的新范式,也带来了对科学数据进行跨中心协同分析的广泛需求。科学数据跨中心协同分析面临跨中心数据流转不畅、跨框架异构计算困难和跨中心作业调度效率不高等技术挑战,同时要确保分析过程的可信性。为应对这些技术挑战,研制了科学数据跨中心协同分析服务系统BigFlow,该系统采用跨中心分布式架构,配备跨框架工作流执行引擎,实现了工作流跨域的可信执行。基于大规模天文星表交叉证认及黄河流域淤地坝位置识别等应用场景,对系统的跨中心协同分析能力进行了测试与验证。

关键词:融合分析,跨中心协同分析,跨框架工作流,可信分析,

基金资助:国家重点研发计划(2021YFF0703900);中国科学院“十四五”网信专项工程建设项目“科学大数据工程(三期)”(CAS-WX2022GC-02);国家自然科学基金(12273077)

2025年4期其他文献查阅:

基于直接内存访问和动态共享缓冲区的超长向量归约操作硬件卸载结构与方法

轻量化卷积神经网络硬件加速设计及FPGA实现

基于国产元器件的大功率多相供电技术研究

基于新型内存语义互连协议的内存池系统研究综述

基于FPGA的高速AES实现与列混合改进

基于孤立集分区的并行Louvain社区发掘算法

面向智慧油气勘探开发系统的多维密态数据聚合技术研究与应用

基于非线性能量收集的非线性信息状态更新系统的信息新鲜度分析#br#

基于表征知识蒸馏的WiFi手势识别方法

具有网络结构适应性的社交网络影响最大化方法

CT图像肾肿瘤分割的三维轴向Transformer模型

基于三维混沌系统的图像加密及FPGA实现

基于改进的YOLOv8n海洋动物目标检测算法:DPSC-YOLO

BigFlow:科学数据跨中心协同分析服务系统

融合双词典的农作物病虫害命名实体识别

基于深度对抗网络的动态图生成模型研究

模式感知采样算法研究

结合噪声数据增强的蒙汉伪平行语料库的构造

填文献完整题目 获取完整文献

填写需求
联系方式
注:学术顾问会在1小时内联系您,请留意!