您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. Google三大论文

  2. 摘要 Bigtable是一个分布式的结构化数据存储系统,它被设计用来处理海量数据:通常是分布在数千台普通服 务器上的PB级的数据。Google的很多项目使用Bigtable存储数据,包括Web索引、Google Earth、 Google Finance。这些应用对Bigtable提出的要求差异非常大,无论是在数据量上(从URL到网页到卫 星图像)还是在响应速度上(从后端的批量处理到实时数据服务)。尽管应用需求差异很大,但是,针对 Google的这些产品,Bigtable还是成功的提供了一个灵
  3. 所属分类:其它

    • 发布日期:2012-10-30
    • 文件大小:2097152
    • 提供者:xsh5324
  1. HBase The Definitive Guide.pdf

  2. ■探讨与hadoop的高度集成如何使hbase的可伸缩性变得简单    ■把大型数据集分布到相对廉价的商业服务器集群中    ■使用本地java客户端,或者通过提供了rest、avro和thrift应用编程接口的网关服务器来访问hbase    ■了解hbase架构的细节,包括存储格式、预写日志、后台进程等等    ■在hbase中集成用于海量并行数据处理任务的hadoop的mapreduce框架    ■了解如何调节集群、设计模式、拷贝表、导入批量数据、删除节点以及其他更多的任务
  3. 所属分类:其它

    • 发布日期:2013-06-04
    • 文件大小:5242880
    • 提供者:luxas
  1. Nutch相关框架视频教程讲义 (1-20)

  2. . Hadoop是大数据的核心技术之一,而Nutch集Hadoop之大成,是Hadoop的源头。学习Hadoop,没有数据怎么办?用Nutch抓!学了Hadoop的Map Reduce以及HDFS,没有实用案例怎么办?学习Nutch!Nutch的很多代码是用Map Reduce和HDFS写的,哪里还能找到比Nutch更好的Hadoop应用案例呢? 大数据这个术语最早的引用可追溯到Nutch。当时,大数据用来描述为更新网络搜索索引需要同时进行批量处理或分析的大量数据集。现在,大数据的含义已经被极
  3. 所属分类:Java

    • 发布日期:2013-09-24
    • 文件大小:843776
    • 提供者:yangshangchuan
  1. Hadoop培训课程(6)HBase

  2. HBASE基础知识* HBASE的伪分布的搭建* HBASE Shell*** HBASE的批量导入*** HBASE的Java客户端*** ---------------------------加深拓展---------------------- HBASE的集群的搭建* HBASE的表设计* HBASE的底层存储模型*
  3. 所属分类:专业指导

    • 发布日期:2014-05-15
    • 文件大小:1048576
    • 提供者:fanfanzj
  1. 批量挂载GPT存储的shell脚本

  2. 要做一个hadoop云盘的项目,一台服务器上挂23块硬盘,总共挂30几台服务器,就写了批量shell脚本执行批量格式化,挂载。
  3. 所属分类:群集服务

    • 发布日期:2015-11-06
    • 文件大小:1011
    • 提供者:rui1605
  1. 安装hadoop

  2. 批量安装hadoop示例批量安装hadoop示例批量安装hadoop示例
  3. 所属分类:Hadoop

    • 发布日期:2017-12-27
    • 文件大小:39936
    • 提供者:u010588208
  1. HadoopHA集群 批量启动脚本

  2. HadoopHA集群 批量启动脚本HadoopHA集群 批量启动脚本HadoopHA集群 批量启动脚本HadoopHA集群 批量启动脚本
  3. 所属分类:其它

    • 发布日期:2018-04-11
    • 文件大小:606
    • 提供者:fenglingju
  1. 批量下载】storm环境搭建v1等.zip

  2. strom hadoop,批量下载】storm环境搭建v1等.zip批量下载】storm环境搭建v1等.zip
  3. 所属分类:Hive

    • 发布日期:2018-04-12
    • 文件大小:3145728
    • 提供者:xi235
  1. 星环-transwarp-inceptor使用手册

  2. Inceptor是一款用于批量处理及分析的数据库。它支持SQL 2003标准、Oracle PL/SQL以及DB2 SQL PL,对Oracle、DB2以及Teradata 都有很好的方言支持,是Hadoop领域对SQL标准支持最完善的产品。Inceptor的另一大优势是对ACID的支持,从而可以满足用户对数据处理中一致性和可靠性保障的需求。此外,Inceptor拥有极为优异的大数据分析性能,比Apache Hadoop处理速度快10倍以上,比 MPP处理速度快5倍以上,在TPC-DS和TPC
  3. 所属分类:Hive

    • 发布日期:2018-06-14
    • 文件大小:22020096
    • 提供者:zsy_2011
  1. 星环大数据

  2. 星环科技的产品名为Transwarp Data Hub,它 包含一整套Hadoop组件,星环科技还为Transwarp Data Hub配备 了星环独有的NoSQL搜索引擎、批量分析组件、流处理组件和数据挖 掘组件。Transwarp Data Hub支持Docker和Kubernetes,还提供 独特的PL/SQL编译器。
  3. 所属分类:Hadoop

    • 发布日期:2018-07-12
    • 文件大小:2097152
    • 提供者:zm38332330
  1. Hadoop首选串行化系统——Avro简介及详细使用

  2. 本篇博客,Alice为大家介绍的是Hadoop中作为首选串行化系统的Avro。 文章目录简介特点Avro数据类型和模式Avro基本类型Avro复杂类型Avro数据序列化/反序列化方法1 使用编译的方式序列化反序列化方法2 不使用编译的方式序列化反序列化 简介         Avro是Hadoop中的一个子项目,也是Apache中一个独立的项目,由Hadoop的创始人Doug Cutting(也是Lucene,Nutch等项目的创始人)开发,设计用于支持大批量数据交换的应用。Avro是一个
  3. 所属分类:其它

    • 发布日期:2021-01-07
    • 文件大小:993280
    • 提供者:weixin_38512781
  1. Hadoop分布式文件系统:架构和设计要点

  2. 一、前提和设计目标1、硬件错误是常态,而非异常情况,HDFS可能是有成百上千的server组成,任何一个组件都有可能一直失效,因此错误检测和快速、自动的恢复是HDFS的核心架构目标。2、跑在HDFS上的应用与一般的应用不同,它们主要是以流式读为主,做批量处理;比之关注数据访问的低延迟问题,更关键的在于数据访问的高吞吐量。3、HDFS以支持大数据集合为目标,一个存储在上面的典型文件大小一般都在千兆至T字节,一个单一HDFS实例应该能支撑数以千万计的文件。4、HDFS应用对文件要求的是write-o
  3. 所属分类:其它

    • 发布日期:2021-03-02
    • 文件大小:162816
    • 提供者:weixin_38664989
  1. Hadoop分布式文件系统:架构和设计要点

  2. 一、前提和设计目标1、硬件错误是常态,而非异常情况,HDFS可能是有成百上千的server组成,任何一个组件都有可能一直失效,因此错误检测和快速、自动的恢复是HDFS的核心架构目标。2、跑在HDFS上的应用与一般的应用不同,它们主要是以流式读为主,做批量处理;比之关注数据访问的低延迟问题,更关键的在于数据访问的高吞吐量。3、HDFS以支持大数据集合为目标,一个存储在上面的典型文件大小一般都在千兆至T字节,一个单一HDFS实例应该能支撑数以千万计的文件。4、HDFS应用对文件要求的是write-o
  3. 所属分类:其它

    • 发布日期:2021-03-02
    • 文件大小:162816
    • 提供者:weixin_38556822
  1. 除Hadoop外你还需要知道的9个大数据技术

  2. Hadoop是大数据领域最流行的技术,但并非唯一。还有很多其他技术可用于解决大数据问题。除了ApacheHadoop外,另外9个大数据技术也是必须要了解的。1.ApacheFlink2.ApacheSamza3.GoogleCloudDataFlow4.StreamSets5.TensorFlow6.ApacheNiFi7.Druid8.LinkedInWhereHows9.MicrosoftCognitiveServices:是一个高效、分布式、基于Java实现的通用大数据分析引擎,它具有分布
  3. 所属分类:其它

    • 发布日期:2021-02-25
    • 文件大小:475136
    • 提供者:weixin_38611796
  1. wonderdog:批量加载以进行弹性搜索-源码

  2. 神奇狗 Wonderdog使ElasticSearch易于与Hadoop连接。 它提供了几种功能: 您可以在自己的Hadoop MapReduce作业中使用的 ,可从轻松使用这些InputFormat和OutputFormat类 从 LOAD和STORE到ElasticSearch的 一些用于与ElasticSearch进行交互的 ... com.infochimps elasticsearch</
  3. 所属分类:其它

    • 发布日期:2021-02-19
    • 文件大小:342016
    • 提供者:weixin_42100188
  1. Hadoop分布式文件系统:架构和设计要点

  2. 一、前提和设计目标1、硬件错误是常态,而非异常情况,HDFS可能是有成百上千的server组成,任何一个组件都有可能一直失效,因此错误检测和快速、自动的恢复是HDFS的核心架构目标。2、跑在HDFS上的应用与一般的应用不同,它们主要是以流式读为主,做批量处理;比之关注数据访问的低延迟问题,更关键的在于数据访问的高吞吐量。3、HDFS以支持大数据集合为目标,一个存储在上面的典型文件大小一般都在千兆至T字节,一个单一HDFS实例应该能支撑数以千万计的文件。4、HDFS应用对文件要求的是write-o
  3. 所属分类:其它

    • 发布日期:2021-02-03
    • 文件大小:162816
    • 提供者:weixin_38582793
  1. Hadoop分布式文件系统:架构和设计要点

  2. 一、前提和设计目标1、硬件错误是常态,而非异常情况,HDFS可能是有成百上千的server组成,任何一个组件都有可能一直失效,因此错误检测和快速、自动的恢复是HDFS的核心架构目标。2、跑在HDFS上的应用与一般的应用不同,它们主要是以流式读为主,做批量处理;比之关注数据访问的低延迟问题,更关键的在于数据访问的高吞吐量。3、HDFS以支持大数据集合为目标,一个存储在上面的典型文件大小一般都在千兆至T字节,一个单一HDFS实例应该能支撑数以千万计的文件。4、HDFS应用对文件要求的是write-o
  3. 所属分类:其它

    • 发布日期:2021-02-03
    • 文件大小:162816
    • 提供者:weixin_38636671
  1. Hadoop分布式文件系统HDFS介绍

  2. HDFS是HadoopDistributeFileSystem的简称,也就是Hadoop分布式文件系统。1、硬件错误是常态错误检测并快速自动恢复是HDFS的最核心设计目标2、存储超大文件HDFS适合大量存储,总存储量可以达到的PB、EB级HDFS适合大文件,单个文件一般在百MB级以上文件数目适中3、流式数据访问,最高效的访问模式是一次写入、多次读取HDFS适合用于处理批量,而不适合随机定位访问HDFS存储的数据集作为hadoop的分析对象。在数据集生成后,长时间在此数据集上进行各种分析。每次分析
  3. 所属分类:其它

    • 发布日期:2021-01-30
    • 文件大小:288768
    • 提供者:weixin_38646634
  1. hive-shell批量命令执行脚本的实现方法

  2. 如下所示: #!/usr/bin/bash HADOOP_HOME=/opt/module/cdh-5.3.6-ha/hadoop-2.5.0-cdh5.3.6 HIVE_HOME='/opt/module/cdh-5.3.6-ha/hive-0.13.1-cdh5.3.6' ####### execute hive ###### sql=$(cat <<!EOF use db_01; drop table dept_nopart; create table IF NOT EXIS
  3. 所属分类:其它

    • 发布日期:2021-01-20
    • 文件大小:33792
    • 提供者:weixin_38645373
  1. Hadoop下水环境模拟集群运算模式

  2. 水环境数值模型是模拟、分析及预测水体中物质迁移转化过程及其效应的有效工具。水环境模型的高性能批量计算是当前水环境模拟研究的热点。大数据技术中的分布式集群计算模式为水环境模拟批量计算提供一种可行的解决方案。探索了水环境数值模型在大数据分布式计算框架下的适应性,提出了一种适用于水环境模拟的大数据分布式集群运算模式,并通过实例验证了该运算模式的可行性。
  3. 所属分类:其它

    • 发布日期:2021-01-20
    • 文件大小:1048576
    • 提供者:weixin_38741317
« 12 3 »