注册会员 | 设为首页 | 加入收藏夹
您好，欢迎光临本网站！[请登录] ！[注册会员]！  

搜索资源列表

  1. 精通Spark内核

  2. 精通Spark内核：此阶段聚焦于Spark内核的设计、实现和核心源码解析，对内核中的实现架构、运行原理、性能调优和核心源码各个击破： 1， 通过源码精通Spark内核实现和任务调度； 2，精通RDD、DAGScheduler、TaskScheduler和Worker节点内部的工作的每一步的细节； 3，精通Job的逻辑执行和物理执行； 4，精通Shuffle、Cache、Checkpoint和Broadcast 掌握此阶段即可跻身于Spark内核高手之列！

  3. 所属分类：3G/移动开发

    • 发布日期：2014-10-22
    • 文件大小：36700160
    • 提供者：rocky_wangjialin

  1. 精通Spark内核

  2. 精通Spark内核：此阶段聚焦于Spark内核的设计、实现和核心源码解析，对内核中的实现架构、运行原理、性能调优和核心源码各个击破： 1， 通过源码精通Spark内核实现和任务调度； 2，精通RDD、DAGScheduler、TaskScheduler和Worker节点内部的工作的每一步的细节； 3，精通Job的逻辑执行和物理执行； 4，精通Shuffle、Cache、Checkpoint和Broadcast 掌握此阶段即可跻身于Spark内核高手之列！

  3. 所属分类：3G/移动开发

    • 发布日期：2014-10-22
    • 文件大小：36700160
    • 提供者：wangruoze

  1. 图解Spark++核心技术与案例实战

  2. 1） 大数据爱好者 随着大数据时代的来临，无论传统行业、IT行业以及互联网等行业都将涉及到大数据技术，本书能够帮助这些行业的大数据爱好者了解Spark生态圈和发展演进趋势。通过本书可以了解到Spark特点和使用的场景，如果希望继续深入学习Spark知识，该书也是很好的入门选择。 （2） Spark开发人员 如果要进行Spark应用的开发，仅仅掌握Spark基本使用方法是不够的，还需深入了解Spark的设计原理、架构和运行机制。在本书中将深入浅出地讲解Spark的编程模型、作业运行机制、存储原理

  3. 所属分类：其它

    • 发布日期：2018-04-25
    • 文件大小：70254592
    • 提供者：hmliy_hao

  1. 华为内部spark培训文档

  2. 华为内部培训资料，spark培训，详细介绍spark原理及其工作机制！

  3. 所属分类：spark

    • 发布日期：2018-05-11
    • 文件大小：750592
    • 提供者：wangwei_5201314

  1. 深入理解Spark 核心思想与源码分析

  2. 深入理解Spark 核心思想与源码分析 ,耿嘉安完整版，大数据spark开发必备，你值得拥有。清晰完整版 《深入理解SPARK：核心思想与源码分析》结合大量图和示例，对Spark的架构、部署模式和工作模块的设计理念、实现源码与使用技巧进行了深入的剖析与解读。, 《深入理解SPARK：核心思想与源码分析》一书对Spark1.2.0版本的源代码进行了全面而深入的分析，旨在为Spark的优化、定制和扩展提供原理性的指导。*集团专家鼎力推荐、*资深Java开发和大数据专家撰写。, 本书分为

  3. 所属分类：spark

    • 发布日期：2018-05-22
    • 文件大小：39845888
    • 提供者：jyh2005

  1. kafka、storm、flink、apex、spark五种流式大数据系统调研报告

  2. 本文主要调研了Apache Kafka、Apache Flink、Apache Storm、Apache Apex和Apache Spark Streaming五种流式大数据系统。主要的工作有：1）通过文献阅读和试用比较了它们的实现原理；2）利用了kafka自带的测试脚本进行了kafka性能测试；3）通过Hibench进行了Flink、Storm和Spark Streaming的比较测试；4）进行了Apex的简单测试；5）对以上流式大数据系统进行了总结分析。

  3. 所属分类：Hadoop

    • 发布日期：2018-06-21
    • 文件大小：2097152
    • 提供者：selinaqqqq

  1. Spark大数据处理_原理算法与实例

  2. Spark最好的书之一； 第 1 章从 Hadoop 到 Spark 1. 1 Hadoop一一大数据时代的火种·· 1. 1. 1 大数据的由来 1. 1. 2 Google 解决大数据计算问题的方法 ……................…........... 5 1. 1. 3 Hadoop 的由来与发展………................. .. ......................…. 10 1. 2 Hadoop 的局限性·················……......

  3. 所属分类：spark

    • 发布日期：2018-08-24
    • 文件大小：150994944
    • 提供者：y_a_n2009

  1. spark计算引擎的介绍

  2. 详细介绍了spark计算引擎的工作原理，底层实现的细节，适合对spark有一定了解，想要深入理解spark的朋友

  3. 所属分类：微服务

    • 发布日期：2018-08-28
    • 文件大小：13631488
    • 提供者：qq_36123343

  1. Spark大数据处理

  2. 本书是国内首本系统讲解 Spark 编程实战的书籍，涵盖 Spark 技术的方方面面。 1)对 Spark 的架构、运行机制、系统环境搭建、测试和调优进行深入讲解，以期让读者 知其所以然。讲述 Spark 最核心的技术内容，以激发读者的联想，进而衍化至繁。 2)实战部分不但给出编程示例，还给出可拓展的应用场景。 3)剖析 BDAS 生态系统的主要组件的原理和应用，让读者充分了解 Spark 生态系统。 本书的理论和实战安排得当，突破传统讲解方式，使读者读而不厌。 本书中一些讲解实操部署和示例的

  3. 所属分类：spark

    • 发布日期：2018-01-18
    • 文件大小：3145728
    • 提供者：qq_28743951

  1. spark内部原理介绍

  2. 基于RDD的架构，在这个开源系统栈里包括作为公共组件的Apache Spark;处理SQL的Shark;和处理分布式流的Spark Streaming。我们使用了真实的用户应用案例和传统的基准测试来评估这些系统。我们的实现为传统和新的数据分析工作提供了很好的性能，并成为第一个使得用户可以组合这些计算任务的平台。

  3. 所属分类：spark

    • 发布日期：2018-01-25
    • 文件大小：260096
    • 提供者：yangym2002

  1. 深入理解Spark 核心思想与源码分析

  2. 在深入了解一个系统的原理、实现细节之前，应当先准备好它的源码编译环境、运行环境。如果能在实际环境安装和运行Spark，显然能够提升读者对于Spark的一些感受，对系统能有个大体的印象，有经验的技术人员甚至能够猜出一些Spark采用的编程模型、部署模式等。当你通过一些途径知道了系统的原理之后，难道不会问问自己？这是怎么做到的。如果只是游走于系统使用、原理了解的层面，是永远不可能真正理解整个系统的。很多IDE本身带有调试的功能，每当你阅读源码，陷入重围时，调试能让我们更加理解运行期的系统。如果没有

  3. 所属分类：spark

    • 发布日期：2018-10-06
    • 文件大小：42991616
    • 提供者：kuigoutang2400

  1. Spark编程模型和解析.pdf

  2. Spark编程模型和解析，分析spark底层工作原理，希望对大家有用，谢谢。

  3. 所属分类：其它

    • 发布日期：2019-08-06
    • 文件大小：1048576
    • 提供者：mengqiaoqiao

  1. 基于Spark的实践.pptx

  2. 云计算Spark实践参考，包含详细代码和操作步骤： 理解Spark原理 开发Spark程序：开发环境、程序提交、运行模式 内核讲解：RDD 工作机制：任务调度、资源分配

  3. 所属分类：kubernetes

    • 发布日期：2020-02-04
    • 文件大小：4194304
    • 提供者：m0_37828249

  1. Spark总体架构和运行流程

  2. 本节将首先介绍 Spark 的运行架构和基本术语，然后介绍 Spark 运行的基本流程，最后介绍 RDD 的核心理念和运行原理。 Spark 总体架构 Spark 运行架构如图 1 所示，包括集群资源管理器（Cluster Manager）、多个运行作业任务的工作结点（Worker Node）、每个应用的任务控制结点（Driver）和每个工作结点上负责具体任务的执行进程（Executor）。 图 1  Spark运行架构 Driver 是运行 Spark Applicaion 的 main

  3. 所属分类：其它

    • 发布日期：2021-01-07
    • 文件大小：148480
    • 提供者：weixin_38499706

  1. Spark工作原理

  2. ApacheSpark是一个围绕速度、易用性和复杂分析构建的大数据处理框架，最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一，与Hadoop和Storm等其他大数据和MapReduce技术相比，Spark有如下优势：1.运行速度快,Spark拥有DAG执行引擎，支持在内存中对数据进行迭代计算。官方提供的数据表明，如果数据由磁盘读取，速度是HadoopMapReduce的10倍以上，如果数据从内存中读取，速度可以高达100多倍。2.适用场景广泛,

  3. 所属分类：其它

    • 发布日期：2021-03-01
    • 文件大小：1048576
    • 提供者：weixin_38624628

  1. Flink基本工作原理

  2. Flink是新的stream计算引擎，用java实现。既可以处理streamdata也可以处理batchdata，可以同时兼顾Spark以及Sparkstreaming的功能，与Spark不同的是，Flink本质上只有stream的概念，batch被认为是specialstream。Flink在运行中主要有三个组件组成，JobClient，JobManager和TaskManager。主要工作原理如下图用户首先提交Flink程序到JobClient，经过JobClient的处理、解析、优化提交到

  3. 所属分类：其它

    • 发布日期：2021-02-24
    • 文件大小：366592
    • 提供者：weixin_38590567

  1. elephas：使用Keras和Spark进行分布式深度学习-源码

  2. Elephas：使用Keras和Spark进行分布式深度学习 亚洲象是一个扩展 ，它允许你在规模与分布运行深度学习模型。 Elephas当前支持许多应用程序，包括： 从原理上讲，elephas的工作原理如下。 表中的内容： 介绍 亚洲象带来了深刻的学习与到。 Elephas打算保持Keras的简单性和高可用性，从而允许对分布式模型进行快速原型制作，该模型可以在海量数据集上运行。 有关介绍性示例，请参见以下。 ἐλέφας是希腊语中的象牙，是κέρας的随附项目，意思是牛角。 如果说这听起来

  3. 所属分类：其它

    • 发布日期：2021-02-05
    • 文件大小：2097152
    • 提供者：weixin_42120405

  1. Spark工作原理

  2. ApacheSpark是一个围绕速度、易用性和复杂分析构建的大数据处理框架，最初在2009年由加州大学伯克利分校的AMPLab开发，并于2010年成为Apache的开源项目之一，与Hadoop和Storm等其他大数据和MapReduce技术相比，Spark有如下优势： 1.运行速度快,Spark拥有DAG执行引擎，支持在内存中对数据进行迭代计算。官方提供的数据表明，如果数据由磁盘读取，速度是Hadoop MapReduce的10倍以上，如果数据从内存中读取，速度可以高达100

  3. 所属分类：其它

    • 发布日期：2021-01-27
    • 文件大小：1048576
    • 提供者：weixin_38608055

  1. Flink基本工作原理

  2. Flink是新的stream计算引擎，用java实现。既可以处理stream data也可以处理batchdata，可以同时兼顾Spark以及Sparkstreaming的功能，与Spark不同的是，Flink本质上只有stream的概念，batch被认为是special stream。Flink在运行中主要有三个组件组成，JobClient，JobManager和TaskManager。主要工作原理如下图

  3. 所属分类：其它

    • 发布日期：2021-01-27
    • 文件大小：366592
    • 提供者：weixin_38552083

  1. SparkStreaming：案例动手实战并在电光石火间理解其工作原理

  2. 流（Streaming），在大数据时代为数据流处理，就像水流一样，是数据流；既然是数据流处理，就会想到数据的流入、数据的加工、数据的流出。日常工作、生活中数据来源很多不同的地方。例如：工业时代的汽车制造、监控设备、工业设备会产生很多源数据；信息时代的电商网站、日志服务器、社交网络、金融交易系统、黑客攻击、垃圾邮件、交通监控等；通信时代的手机、平板、智能设备、物联网等会产生很多实时数据，数据流无处不在。平时用户都有网上购物的经历，用户在网站上进行的各种操作通过SparkStreaming流处理技术

  3. 所属分类：其它

    • 发布日期：2021-01-27
    • 文件大小：1048576
    • 提供者：weixin_38706951
« 12 3 »