| 基于GM模型的HDFS副本放置改进策略 |
| 刘芳; 刘艳; 马萌; 曹清清; 吴亚玲
|
| 2023-05-20
|
发表期刊 | 数字通信世界
|
ISSN | 1672-7274
|
卷号 | No.221期号:05页码:70-73 |
摘要 | HDFS分布式文件系统默认副本放置策略在放置节点的选择上具有较大的随机性,且衡量节点负载的指标单一,易导致集群负载不均衡,影响系统性能。文章提出一种基于GM模型的改进策略,该策略综合考虑节点多个负载指标,并使用GM模型对节点量化负载进行预测,同时结合节点的HDFS工作连接数,对节点性能进行综合评价,选出最合适的副本放置节点。实验表明,与HDFS默认策略相比,文中所提策略能够减少作业执行时间和数据传输时间,在系统的执行效率和读写性能方面有较大提高。 |
关键词 | HDFS
副本放置
负载量化
负载预测
|
URL | 查看原文
|
语种 | 中文
|
资助项目 | 湖南开放大学“HDFS默认副本放置策略的改进和优化”课题研究成果(课题编号:XDK-2022-C-5)
|
原始文献类型 | 学术期刊
|
文献类型 | 期刊论文
|
条目标识符 | http://ir.library.ouchn.edu.cn/handle/39V7QQFX/153221
|
专题 | 国家开放大学湖南分部
|
作者单位 | 湖南开放大学信息工程学院
|
第一作者单位 | 国家开放大学湖南分部
|
第一作者的第一单位 | 国家开放大学湖南分部
|
推荐引用方式 GB/T 7714 |
刘芳,刘艳,马萌,等. 基于GM模型的HDFS副本放置改进策略[J].
数字通信世界,2023,No.221(05):70-73.
|
APA |
刘芳,刘艳,马萌,曹清清,&吴亚玲.(2023).基于GM模型的HDFS副本放置改进策略.数字通信世界,No.221(05),70-73.
|
MLA |
刘芳,et al."基于GM模型的HDFS副本放置改进策略".数字通信世界 No.221.05(2023):70-73.
|
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。
修改评论