轻量级遥感数据分布式调度框架DataboxMROACSCD
DataboxMR: A Lightweight Remote Sensing Data Distributed Scheduling Framework
[目的]目前,基于通用平台处理遥感数据,在提升处理效率的同时,也带来了执行轻量级任务效率低、用户使用门槛高、迁移代价大的问题.为降低用户处理轻量级任务的复杂度,降低基于通用平台处理带来的迁移代价,提高用户对任务调度端的控制力.[方法]本文提出了一个高效处理遥感数据的轻量级分布式调度框架(DataboxMR).框架基于UDF(User-Defined Function)技术设计实现了遥感数据处理服务组件(Remote Sensing User-De…查看全部>>
孟祥海;王学志;赵江华;周小华
中国科学院计算机网络信息中心,北京 100190中国科学院大学,北京 100049中国科学院计算机网络信息中心,北京 100190中国科学院计算机网络信息中心,北京 100190
遥感数据分布式调度框架UDF技术调度引擎
《数据与计算发展前沿》 2021 (3)
95-110,16
中国科学院前沿科学重点研究计划项目(No.ZDBS-LY-DQC016)
评论