您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. 基于单元集群的MapReduce中节点失效的改进

  2. 针对传统MapReduce框架中任务节点和工作节点的失效问题,提出了在配置备份节点的分层主从式MapReduce框架中加入单元集群的处理方法。在改进框架中,任务处理的最小单位是单元集群,当单元集群中的某个工作节点失效或者超过时间阙值时,子任务节点则选择该单元集群中的空闲工作节点来分配任务,并且不需要重新传输任务文件分块,这既节省了工作节点重选择的时间,又降低了网络传输的压力。使用该框架针对不同数量的数据块进行实验,工作节点的灾难恢复时间均可以节省25 ms左右,证明了单元集群的处理方法可以有效解
  3. 所属分类:其它

    • 发布日期:2020-10-17
    • 文件大小:239616
    • 提供者:weixin_38620741