首页|期刊导航|通信学报|流式大数据平台下的弹性数据迁移能效优化策略

流式大数据平台下的弹性数据迁移能效优化策略OA北大核心CSTPCD

中文摘要

针对流式计算框架在最初设计时缺乏能效方面的考虑,导致其存在高能耗与低效率的问题,提出一种流式大数据平台下的弹性数据迁移节能优化策略。首先,建立负载预测模型与资源判定模型,并进一步设计负载预测算法,通过预测负载变化趋势确定节点资源占用,找到资源过载与过剩节点;其次,建立资源约束模型与最优数据迁移模型,由此提出最优数据迁移算法,以提高节点资源利用率为目的进行数据迁移;最后,建立能耗模型,计算集群进行数据迁移后节约的能耗。实验结果表明,数据迁移节能优化…查看全部>>

蒲勇霖;许小龙;于炯;李梓杨;国冰磊

南京信息工程大学软件学院,江苏南京210044南京信息工程大学软件学院,江苏南京210044新疆大学软件学院,新疆乌鲁木齐830002新疆大学软件学院,新疆乌鲁木齐830002湖北文理学院计算机工程学院,湖北襄阳441053

电子信息工程

流式计算负载预测资源约束数据迁移能效

《通信学报》 2024 (2)

P.188-200,13

国家自然科学基金资助项目(No.62262064)新疆维吾尔自治区重点研发计划基金资助项目(No.2022295358)江苏省高等学校自然科学基金资助项目(No.23KJB520019)新疆维吾尔自治区自然科学基金资助项目(No.2022D01C56)湖北省自然科学基金资助项目(No.2022CFB805)。

10.11959/j.issn.1000-436x.2024006

评论

您当前未登录!去登录点击加载更多...