注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. Hadoop集群安装与配置手册

  2. 很详细的配置文档，比网上要详细， 主要介绍hadoop集群配置， 包含namenode,datanode配置 基于ubuntu linux系统

  3. 所属分类：Linux

    • 发布日期：2009-12-01
    • 文件大小：563200
    • 提供者：zklth

  1. Apress - Pro Hadoop

  2. Hadoop 项目主页：http://hadoop.apache.org 　　一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。 起源：Google的集群系统 　　Google的数据中心使用廉价的Linux PC机组成集群，在上面运行各种应用。即使是分布式开发的新手也可以迅速使用Google的基础设施。核心组件是3个： 　　1、GFS（Google File System）。一个分布式文件系统，隐藏下层负

  3. 所属分类：Linux

    • 发布日期：2010-01-06
    • 文件大小：4194304
    • 提供者：lele1230

  1. 四台机器配置Hadoop集群的被指文件，范例，

  2. 这个是我做实验时候用的配置文件，和大家共享了 这个是我做实验时候用的配置文件，和大家共享了 工4台机器，一台当NameNode和JobTracker ,另外3台当tasktracker 和 datanode.

  3. 所属分类：专业指导

    • 发布日期：2010-11-30
    • 文件大小：12288
    • 提供者：wang382758656

  1. hadoop&hive安装配置

  2. hadoop&hive安装配置。3台机器，master做为namenonde,将slave1和slave2做为datanode。

  3. 所属分类：其它

    • 发布日期：2011-07-08
    • 文件大小：17408
    • 提供者：billyhu2012

  1. hadoop源码分析

  2. Hadoop源代码分析（六） 既然是RPC，自然就有客户端和服务器，当然，org.apache.hadoop.rpc也就有了类Client和类Server。在这里我们来仔细考察org.apache.hadoop.rpc.Client。下面的图包含了org.apache.hadoop.rpc.Client中的关键类和关键方法。 由于Client可能和多个Server通信，典型的一次HDFS读，需要和NameNode打交道，也需要和某个/某些DataNode通信。这就意味着某一个Client需要维

  3. 所属分类：其它

    • 发布日期：2011-10-09
    • 文件大小：5242880
    • 提供者：dutianmin

  1. Hadoop入门手册.chm

  2. Hadoop由分布式存储HDFS和分布式计算MapReduce两部分组成。HDFS是一个master/slave的结构，就通常的部署来说，在master上只运行一个Namenode，而在每一个slave上运行一个Datanode。

  3. 所属分类：网络管理

    • 发布日期：2012-04-25
    • 文件大小：1048576
    • 提供者：wuchangqing2009

  1. hadoop运行wordcount实例

  2. 包含配置hadoop过程中遇到的一些问题的解决办法和成功运行wordcount实例的步骤

  3. 所属分类：其它

    • 发布日期：2012-05-30
    • 文件大小：1024
    • 提供者：lhth9093

  1. hadoop远程访问资料

  2. hadoop在JAVA中远程访问namenode和datanode的文档总集

  3. 所属分类：Java

    • 发布日期：2012-07-19
    • 文件大小：1048576
    • 提供者：huanghai200911

  1. 云计算环境hadoop搭建

  2. （1）linux操作系统环境，如果你是初学者的话，我建议你用虚拟机装操作系统，可以避免很多问题，从而最快的进入正题。至于版本的选择无所谓了，像redhat,suse,或者是fedora都可以，我用的是比较旧的fedora8，自我感觉相当好使，也就没用更新的. (2) hadoop 资源包，现在最新的是0.21版本，我用的也是这个，它要求jdk必须的是6.0或以上，至于下载我就不说了，一搜结果太多 （3）jdk1.6下载：可以去官方网站上下载linux版本的jdk6,大概是70M左右。 （4）f

  3. 所属分类：群集服务

    • 发布日期：2012-11-07
    • 文件大小：1048576
    • 提供者：shengxia623

  1. hadoop2.0 2个namenode 2个datanode 部署

  2. 1. Hadoop 2.0 2. 部署在2个Ubuntu上 3. 2个namenode 2个datanode

  3. 所属分类：群集服务

    • 发布日期：2013-01-16
    • 文件大小：18432
    • 提供者：af000000

  1. DataNode本地数据存储和管理

  2. 本地数据存储和管理，DataNode的实现包括两部分，一部分是对本地数据块的管理，另一部分，就是和其他的实体打交道。

  3. 所属分类：Java

    • 发布日期：2013-04-25
    • 文件大小：23552
    • 提供者：u010445969

  1. HDFS体系结构(NameNode、DataNode详解)

  2. HDFS体系结构(NameNode、DataNode详解)

  3. 所属分类：Hadoop

    • 发布日期：2019-03-30
    • 文件大小：1048576
    • 提供者：m2214419115

  1. IBM大数据解决方案Enterprise DataNode Using X3690X5 and EXP2512

  2. IBM大数据解决方案Enterprise DataNode Using X3690X5 and EXP2512

  3. 所属分类：其它

    • 发布日期：2020-03-04
    • 文件大小：1048576
    • 提供者：weixin_38718413

  1. hadoop client与datanode的通信协议分析

  2. 本文主要分析了hadoop客户端read和write block的流程. 以及client和datanode通信的协议, 数据流格式等

  3. 所属分类：其它

    • 发布日期：2020-09-05
    • 文件大小：222208
    • 提供者：weixin_38663595

  1. Hadoop datanode启动失败：Hadoop安装目录权限的问题

  2. Hadoop datanode启动失败：Hadoop安装目录权限的问题

  3. 所属分类：其它

    • 发布日期：2016-07-29
    • 文件大小：141312
    • 提供者：binggunspace

  1. Hadoop集群datanode磁盘不均衡的解决方案

  2. Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况，比如集群中添加新的数据节点，节点与节点之间磁盘大小不一样等等。当hdfs出现不平衡状况的时候，将引发很多问题，比如MR程序无法很好地利用本地计算的优势，机器之间无法达到更好的网络带宽使用率，机器磁盘无法利用等等。因业务需要搭建一个新hadoop集群，并将老的hadoop集群中的数据迁移至新的hadoop集群，而且datanode节点不能全部上线，其中还可能会出现节点上线或下线的情况，这个时候就很容易出现机器与机器之间磁盘

  3. 所属分类：其它

    • 发布日期：2021-02-25
    • 文件大小：497664
    • 提供者：weixin_38665162

  1. Hadoop集群datanode磁盘不均衡的解决方案

  2. Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况，比如集群中添加新的数据节点，节点与节点之间磁盘大小不一样等等。当hdfs出现不平衡状况的时候，将引发很多问题，比如MR程序无法很好地利用本地计算的优势，机器之间无法达到更好的网络带宽使用率，机器磁盘无法利用等等。 因业务需要搭建一个新hadoop集群，并将老的hadoop集群中的数据迁移至新的hadoop集群，而且datanode节点不能全部上线，其中还可能会出现节点上线或下线的情况，这个时候就很容易出现机器与

  3. 所属分类：其它

    • 发布日期：2021-01-29
    • 文件大小：497664
    • 提供者：weixin_38535808

  1. 快速学习-DataNode

  2. 第6章 DataNode（面试开发重点） 6.1 DataNode工作机制 DataNode工作机制，如图3-15所示。 1）一个数据块在DataNode上以文件形式存储在磁盘上，包括两个文件，一个是数据本身，一个是元数据包括数据块的长度，块数据的校验和，以及时间戳。 2）DataNode启动后向NameNode注册，通过后，周期性（1小时）的向NameNode上报所有的块信息。 3）心跳是每3秒一次，心跳返回结果带有NameNode给该DataNode的命令如复制块数据到另一台机器，或删除某

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：193536
    • 提供者：weixin_38723753

  1. 11HDFS的读写流程&NameNode、DataNode工作机制——好程序

  2. 一、 HDFS前言 设计思想        分而治之：将大文件、大批量文件，分布式存放在大量服务器上，以便于采取分而治之的方式对海量数据进行运算分析； 在大数据系统中作用： 为各类分布式运算框架（如：mapreduce，spark，tez，……）提供数据存储服务       重点概念：文件切块，副本存放，元数据 二、 HDFS的概念和特性 首先，它是一个文件系统，用于存储文件，通过统一的命名空间——目录树来定位文件 其次，它是分布式的，由很多服务器联合起来实现其功能，集群中的服务器有各自的角色；

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：1048576
    • 提供者：weixin_38743737

  1. Ambari修改DataNode存储目录

  2. 操作背景： HDFS DataNode定义的存储目录不正确或HDFS的存储规划变化时，需要修改DataNode的存储目录，以保障HDFS的正常工作，假定我们现在对应的HDFS数据盘位置为：/hadoop/hdfs/data; 预将数据目录迁移至/data/hadoop/hdfs/data目录底下； 目前操作系统受影响情况： 1） 更改DataNode存储目录需要停止HDFS服务，在此期间集群无法正常对外提供服务 2）需要修改Ambari中HDFS中DataNode 对应的目录 操作步骤： 1）切

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：35840
    • 提供者：weixin_38705723
« 12 3 4 5 6 7 8 »