您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. 在CentOS7上安装Hadoop2.5.2及Spark1.1.1.pdf

  2. hadoop ,spark的基本安装文档
  3. 所属分类:Java

    • 发布日期:2015-12-22
    • 文件大小:2097152
    • 提供者:u014453006
  1. hadoop2.6 spark1.5

  2. hadoop2.6 spark1.5 两者可结合构建集群
  3. 所属分类:其它

    • 发布日期:2016-03-18
    • 文件大小:16777216
    • 提供者:zhaoyunxiang721
  1. hadoop2.6.3-spark1.5.2-hbase-1.1.2-hive-1.2.1-zookeeper-3.4.6安装指南

  2. hadoop2.6.3-spark1.5.2-hbase-1.1.2-hive-1.2.1-zookeeper-3.4.6安装指南
  3. 所属分类:其它

    • 发布日期:2016-04-22
    • 文件大小:2097152
    • 提供者:h295203236
  1. spark平台scala语言自己实现的kmeans算法,相比于MLlib的Kmeans更简单,更容易看懂,代码量少注释多

  2. 不到一百行的代码教你在spark平台中使用scala实现kmeans算法。简单易懂,大量注释。适合初学者参考理解。本程序在intelliJ IDEA2016.1.1 中编程,运行在spark1.6.1 scala2.10.4本地模式下运行成功。 数据集:(其实‘,’前面的1.0 0.0没用,不过不能删除,除非你修改代码中的数据解析代码) 1.0,0.0 1.1 0.1 0.0,2.0 1.0 -1.0 0.0,2.0 1.3 1.0 1.0,0.0 1.2 -0.5 1.0,1.0 1.4 0
  3. 所属分类:其它

    • 发布日期:2016-05-20
    • 文件大小:82944
    • 提供者:vaq37942
  1. hadoop2.6.3-spark1.5.2-hbase-1.1.2-hive-1.2.1-zookeeper-3.4.6安装指南

  2. hadoop环境配置
  3. 所属分类:Linux

    • 发布日期:2016-10-25
    • 文件大小:13631488
    • 提供者:qq_35479718
  1. spark-assembly-1.5.1-hadoop2.4.0.jar

  2. spark1.5版本 早期版本的assembly 包,大家快快来下载吧
  3. 所属分类:spark

    • 发布日期:2018-03-12
    • 文件大小:178257920
    • 提供者:headshot9999
  1. spark-1.3.0-bin-2.5.0-cdh5.3.6 .tgz 第二部分

  2. spark1.3.0在 hadoop2.5.0 cdh5.3.6下编译完的结果,由于文件过大,所以分为两部分上传,必须同时下载,原始的名称为:spark-1.3.0-bin-2.5.0-cdh5.3.6 .tgz
  3. 所属分类:spark

    • 发布日期:2018-05-04
    • 文件大小:88080384
    • 提供者:u014467408
  1. spark-1.3.0-bin-2.5.0-cdh5.3.6 .tgz 第一部分

  2. spark1.3.0在 hadoop2.5.0 cdh5.3.6下编译完的结果,由于文件过大,所以分为两部分上传,必须同时下载,原始的名称为:spark-1.3.0-bin-2.5.0-cdh5.3.6 .tgz
  3. 所属分类:spark

    • 发布日期:2018-05-04
    • 文件大小:209715200
    • 提供者:u014467408
  1. spark-assembly-1.5.0-hadoop2.6.0jar包

  2. spark-assembly-1.5.0-hadoop2.6.0jar包,本地开发Spark应用 必须要用到的jar包
  3. 所属分类:spark

    • 发布日期:2018-08-11
    • 文件大小:179306496
    • 提供者:fly964747264
  1. spark-assembly-1.5.2-hadoop2.6.0jar包

  2. 使用scala开发spark应用时用到的jar包:spark-assembly-1.5.2-hadoop2.6.0jar包
  3. 所属分类:spark

    • 发布日期:2018-08-14
    • 文件大小:163577856
    • 提供者:fly964747264
  1. SparkSql技术

  2. 目录 一:为什么sparkSQL? 3 1.1:sparkSQL的发展历程 3 1.1.1:hive and shark 3 1.1.2:Shark和sparkSQL 4 1.2:sparkSQL的性能 5 1.2.1:内存列存储(In-Memory Columnar Storage) 6 1.2.2:字节码生成技术(bytecode generation,即CG) 6 1.2.3:scala代码优化 7 二:sparkSQL运行架构 8 2.1:Tree和Rule 9 2.1.1:Tree
  3. 所属分类:spark

    • 发布日期:2018-08-16
    • 文件大小:5242880
    • 提供者:silentwolfyh
  1. 去哪儿网基于Marathon管理Spark2.0实现动态扩容实践

  2. 背景:去年10月,我们实现了Spark1.5.2版本运行在Mesos这个资源管理框架上。随后Spark出了新版本我们又对Spark进行了小升级,升级并没有什么太大的难度,沿用之前的修改过的代码重新编译,替换一下包,把历史任务全部发一遍就能很好的升级到1.6.1也就是现在集群的版本,1.6.2并没有升级因为感觉改动不是很大。到现在正好一年的时间,线上已经注册了44个Spark任务,其中28个为Streaming任务,在运行这些任务的过程中,我们遇到了很多问题,其中最大的问题是动态扩容问题,即当业务
  3. 所属分类:其它

    • 发布日期:2021-02-25
    • 文件大小:569344
    • 提供者:weixin_38610573
  1. SparkUnifiedMemoryManager内存管理模型分析

  2. Spark的内存使用,大体上可以分为两类:Execution内存和Storage内存。在Spark1.5版本之前,内存管理使用的是StaticMemoryManager,该内存管理模型最大的特点就是,可以为Execution内存区与Storage内存区配置一个静态的boundary,这种方式实现起来比较简单,但是存在一些问题:为了克服上述提到的问题,尽量提高Spark计算的通用性,降低内存调优难度,减少OOM导致的失败问题,从Spark1.6版本开始,新增了UnifiedMemoryManage
  3. 所属分类:其它

    • 发布日期:2021-02-25
    • 文件大小:248832
    • 提供者:weixin_38731226
  1. Spark入门实战之最好的实例

  2. 本文来自于csdn,本文主要介绍如何使用Scala编写Spark应用程序处理大数据,希望对您的学习有所帮助。安装ScalaIDE搭建Scala语言开发环境很容易,ScalaIDE官网下载合适的版本并解压就可以完成安装,本文使用的版本是4.1.0安装Scala语言包如果下载的ScalaIDE自带的Scala语言包与Spark1.3.1使用的Scala版本(2.10.x)不一致,那么就需要下载和本文所使用的Spark所匹配的版本,以确保实现的Scala程序不会因为版本问题而运行失败请下载并安装Sca
  3. 所属分类:其它

    • 发布日期:2021-02-24
    • 文件大小:473088
    • 提供者:weixin_38581447
  1. SparkUnifiedMemoryManager内存管理模型分析

  2. Spark的内存使用,大体上可以分为两类:Execution内存和Storage内存。在Spark1.5版本之前,内存管理使用的是StaticMemoryManager,该内存管理模型最大的特点就是,可以为Execution内存区与Storage内存区配置一个静态的boundary,这种方式实现起来比较简单,但是存在一些问题:为了克服上述提到的问题,尽量提高Spark计算的通用性,降低内存调优难度,减少OOM导致的失败问题,从Spark1.6版本开始,新增了UnifiedMemoryManage
  3. 所属分类:其它

    • 发布日期:2021-01-27
    • 文件大小:230400
    • 提供者:weixin_38508126