注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. HDFS文件系统基本文件命令、编程读写HDFS

  2. 本文档时Hadoop云计算平台下运用Hadoop API对HDFS进行相关的操作，详细的记录了程序在eclipse中的应用，代码内容和运行结果，是学习Hadoop非常有用的资料。

  3. 所属分类：IT管理

    • 发布日期：2013-04-12
    • 文件大小：1048576
    • 提供者：trenhe

  1. Hadoop HDFS原理

  2. 本文主要对Hadoop HDFS的原理进行阐述。从HDFS系统架构、HDFS中守候进程、各进程之间的接口、HDFS中的关键数据结构几个方面进行分析，在此基础上，针对HDFS的启动、读、写和建立检查点几个流程进行了说明。从而可建立对于HDFS的机制的深刻理解。

  3. 所属分类：群集服务

    • 发布日期：2015-06-26
    • 文件大小：574464
    • 提供者：zhangbaolin

  1. Chapter3-厦门大学-林子雨-大数据技术原理与应用-第三章-分布式文件系统HDFS（新）

  2. 首先介绍分布式文件系统的基本概念、结构和设计需求，然后介绍Hadoop分布式文件系统HDFS，详细阐述它的重要概念、体系结构、存储原理和读写过程，最后，介绍了一些HDFS编程实践方面的知识

  3. 所属分类：讲义

    • 发布日期：2015-06-29
    • 文件大小：2097152
    • 提供者：qq97294972

  1. Hadoop技术内幕 深入解析Hadoop Common和HDFS架构设计与实现原理.pdf

  2. 前　言 第一部分　环境准备 第1章　源代码环境准备 1.1　什么是Hadoop 1.1.1　Hadoop简史 1.1.2　Hadoop的优势 1.1.3　Hadoop生态系统 1.2　准备源代码阅读环境 1.2.1　安装与配置JDK 1.2.2　安装Eclipse 1.2.3　安装辅助工具Ant 1.2.4　安装类UNIX Shell环境Cygwin 1.3　准备Hadoop源代码 1.3.1　下载Hadoop 1.3.2　创建Eclipse项目 1.3.3　Hadoop源代码组织 1.4　小

  3. 所属分类：Java

    • 发布日期：2015-11-24
    • 文件大小：59768832
    • 提供者：yuan_xw

  1. Chapter3-厦门大学-林子雨-大数据技术原理与应用-第三章-分布式文件系统HDFS（2016年1月26日版本）

  2. 首先介绍分布式文件系统的基本概念、结构和设计需求，然后介绍Hadoop分布式文件系统HDFS，详细阐述它的重要概念、体系结构、存储原理和读写过程，最后，介绍了一些HDFS编程实践方面的知识

  3. 所属分类：讲义

    • 发布日期：2016-03-13
    • 文件大小：2097152
    • 提供者：qq97294972

  1. HDFS原理图

  2. 此图包含内容：HDFS结构/HDFS运行机制、HDFS优缺点、HDFS架构、HDFS数据存储单元(block)、HDFS设计思想、SNN合并流程、Block的副本放置策略、HDFS读流程、HDFS写流程、HDFS文件权限与安全模式，需要使用viso工具打开。

  3. 所属分类：Java

    • 发布日期：2017-02-17
    • 文件大小：114688
    • 提供者：xuxile

  1. hdfs-文件读写测试

  2. 本文通过对一些常见场景的测试，重在探索hdfs分布式文件系统的文件读写原理

  3. 所属分类：Hadoop

    • 发布日期：2017-10-23
    • 文件大小：1048576
    • 提供者：yangguowucao

  1. hdfs user guide

  2. Hadoop Distributed File System (Hadoop分布式文件系统)。HDFS 具有高容错性，并且可以被部署在低价的硬件设备之上。HDFS很适合那些有大数据集的应用，并且提供了对数据读写的高吞吐率。HDFS是一个 master/slave的结构，就通常的部署来说，在master上只运行一个Namenode，而在每一个slave上运行一个Datanode。HDFS 支持传统的层次文件组织结构，同现有的一些文件系统在操作上很类似，比如你可以创建和删除一个文件，把一个文件从一

  3. 所属分类：专业指导

    • 发布日期：2009-04-04
    • 文件大小：33792
    • 提供者：impyy

  1. hdfs读写例子

  2. hdfs读、写、文件列表获取、判断文件是否存在等api使用实例

  3. 所属分类：Hadoop

    • 发布日期：2018-03-05
    • 文件大小：18432
    • 提供者：weixin_41792824

  1. hadoop大数据实战手册

  2. 第一部分核心设计篇 第1 章HDFS 的数据存储………….. .....………………… ……………………····· ··· …..... ... 2 1.1 HDFS 内存存储...............…··························· ·· ···············…….................…... . .. .. ................. 2 1.1.l HDFS 内存存储原理..................…... . .....

  3. 所属分类：Hadoop

    • 发布日期：2018-09-07
    • 文件大小：68
    • 提供者：hanye210

  1. spark core、spark sql以及spark streaming 的Scala、java项目混合框架

  2. 包中构建了Java以及Scala混合框架的maven打包框架以及关于spark core，spark sql 、spark streaming的一些典型案例或者算子使用。其来源于哔哩哔哩 spark 90小时的学习视频的案例。其中有部分关于hdfs的文件读写，使用者需搭建hadoop框架。

  3. 所属分类：spark

    • 发布日期：2018-09-10
    • 文件大小：150994944
    • 提供者：zjh0918

  1. HDFS的Trash回收站功能的配置和使用

  2. HDFS是Hadoop分布式计算的存储基础。HDFS具有高容错性，可以部署在通用硬件设备上，适合数据密集型应用，并且提供对数据读写的高吞 吐量。HDFS能 够提供对数据的可扩展访问，通过简单地往集群里添加节点就可以解决大量客户端同时访问的问题。HDFS支持传统的层次文件组织结构，同现 有的一些文件系 统类似，如可以对文件进行创建、删除、重命名等操作。

  3. 所属分类：Hadoop

    • 发布日期：2019-07-02
    • 文件大小：421888
    • 提供者：abacaba

  1. HDFS集群搭建

  2. HDFS是Hadoop分布式计算的存储基础。HDFS具有高容错性，可以部署在通用硬件设备上，适合数据密集型应用，并且提供对数据读写的高吞 吐量。HDFS能 够提供对数据的可扩展访问，通过简单地往集群里添加节点就可以解决大量客户端同时访问的问题。HDFS支持传统的层次文件组织结构，同现 有的一些文件系 统类似，如可以对文件进行创建、删除、重命名等操作。 cname>hadoop. proxyuser. htpfs hosts</name: * /property> hadoo

  3. 所属分类：Hadoop

    • 发布日期：2019-07-02
    • 文件大小：527360
    • 提供者：abacaba

  1. hdfs与hase.xmind

  2. 此主要为hdfs的入门总结，从认识到实战配置hdfs。以下为内容标题：分布式文件系统、HDFS简介、HDFS的存储原理、HDFS工作机制、HDFS文件读写操作、HDFS HA、HDFS联邦.....

  3. 所属分类：Hadoop

    • 发布日期：2020-06-19
    • 文件大小：8388608
    • 提供者：m0_46209092

  1. hdfs源码.zip

  2. 第1章 HDFS 1 1．1 HDFS概述 1 1．1．1 HDFS体系结构 1 1．1．2 HDFS基本概念 2 1．2 HDFS通信协议 4 1．2．1 Hadoop RPC接口 4 1．2．2 流式接口 20 1．3 HDFS主要流程 22 1．3．1 HDFS客户端读流程 22 1．3．2 HDFS客户端写流程 24 1．3．3 HDFS客户端追加写流程 25 1．3．4 Datanode启动、心跳以及执行名字节点指令流程 26 1．3．5 HA切换流程 27 第2章 Hadoop RP

  3. 所属分类：互联网

    • 发布日期：2020-07-14
    • 文件大小：164626432
    • 提供者：m0_46190977

  1. 利用mycat实现mysql数据库读写分离的示例

  2. 什么是MyCAT 一个彻底开源的，面向企业应用开发的大数据库集群 支持事务、ACID、可以替代MySQL的加强版数据库 一个可以视为MySQL集群的企业级数据库，用来替代昂贵的Oracle集群 一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQL Server 结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品 一个新颖的数据库中间件产品 MyCAT关键特性 支持SQL92标准 支持MySQL、Oracle、DB2、SQL Server、Pos

  3. 所属分类：其它

    • 发布日期：2020-12-15
    • 文件大小：89088
    • 提供者：weixin_38744557

  1. HDFS简介

  2. 一、HDFS的简介 分布式文件系统 HDFS Hadoop Distributed FileSystem 基于流数据访问模式处理超大规模的文件 适合应用大规模的数据集上 HDFS的优点 1）处理超大规模的文件 2）处理结构化，半结构化，非结构化的数据 3）流式的的访问模式一次写入，多次读写且不支持修改 4）运行于廉价的商用机器集群上 局限性 1）不适合处理低延迟的数据访问 2）无法高效的存储大量的小文件 3）不支持多用户的写入和任意的修改文件 二、HDFS的特性 高容错，可扩展，可配置性强 跨平

  3. 所属分类：其它

    • 发布日期：2021-01-07
    • 文件大小：82944
    • 提供者：weixin_38604951

  1. Hadoop各组件详解（HDFS篇）

  2. 一、Hadoop三大组件 1.HDFS 分布式文件存储系统 2.MapReduce 分布式离线计算框架 ​3.Yarn Hadoop资源调度器 1.HDFS HDFS的设计特点是： 1、大数据文件，非常适合上T级别的大文件或者一堆大数据文件的存储，如果文件只有几个G甚至更小就没啥意思了 2、文件分块存储，HDFS会将一个完整的大文件平均分块存储到不同计算器上， 它的意义在于读取文件时可以同时从多个主机取不同区块的文件，多主机读取比单主机读取效率要高得多得都。 3、流式数据访问，一次写入多

  3. 所属分类：其它

    • 发布日期：2021-01-07
    • 文件大小：749568
    • 提供者：weixin_38609693

  1. HDFS读取和写入数据简介

  2. HDFS 的文件访问机制为流式访问机制，即通过 API 打开文件的某个数据块之后，可以顺序读取或者写入某个文件。由于 HDFS 中存在多个角色，且对应的应用场景主要为一次写入、多次读取的场景，因此其读和写的方式有较大不同。读/写操作都由客户端发起，并且由客户端进行整个流程的控制，NameNode 和 DataNode 都是被动式响应。 读取流程 客户端发起读取请求时，首先与 NameNode 进行连接。 连接建立完成后，客户端会请求读取某个文件的某一个数据块。NameNode 在内存中进行检索

  3. 所属分类：其它

    • 发布日期：2021-01-07
    • 文件大小：107520
    • 提供者：weixin_38705873

  1. 11HDFS的读写流程&NameNode、DataNode工作机制——好程序

  2. 一、 HDFS前言 设计思想        分而治之：将大文件、大批量文件，分布式存放在大量服务器上，以便于采取分而治之的方式对海量数据进行运算分析； 在大数据系统中作用： 为各类分布式运算框架（如：mapreduce，spark，tez，……）提供数据存储服务       重点概念：文件切块，副本存放，元数据 二、 HDFS的概念和特性 首先，它是一个文件系统，用于存储文件，通过统一的命名空间——目录树来定位文件 其次，它是分布式的，由很多服务器联合起来实现其功能，集群中的服务器有各自的角色；

  3. 所属分类：其它

    • 发布日期：2021-01-20
    • 文件大小：1048576
    • 提供者：weixin_38743737
« 12 3 4 »