基于单位层次树的数据归并算法
CSTR:
作者:
作者单位:

作者简介:

通讯作者:

中图分类号:

基金项目:


Data Merge Algorithm Based on Unit Hierarchy Tree
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    为提高数据挖掘处理效率,提出一种基于单位层次树的归并计算方法。以装备维修保障相关数据为例, 建立叶子节点的自下而上逐层归并计算模型,对MapReduce 并行计算模型进行改进,采用完全分布式模式实现 Hadoop Map/Reduce 分布式处理架构,实现面向单位层次树的属性约简与数据归并,对MapReduce 分布式模型的加 速比和可扩展性进行分析。结果表明:该方法取得了较好的效果,具有一定理论价值。

    Abstract:

    In order to improve the efficiency of data mining, a merge calculation algorithm based on unit hierarchical tree is proposed. Taking equipment maintenance support related data as example, establish a bottom-up layer-by-layer merge calculation model of leaf nodes, improve the MapReduce parallel calculation model, and adopt a fully distributed mode to implement the Hadoop Map/Reduce distributed processing architecture to achieve unit-oriented level. The attribute reduction of the tree and data merging are used to analyze the speedup and scalability of the MapReduce distributed model. The results show that the method has achieved good results and has certain theoretical value.

    参考文献
    相似文献
    引证文献
引用本文

罗晓玲.基于单位层次树的数据归并算法[J].,2021,40(12).

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:2021-08-15
  • 最后修改日期:2021-09-24
  • 录用日期:
  • 在线发布日期: 2021-12-06
  • 出版日期:
文章二维码