您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. SparkStreaming原理介绍

  2. Spark Streaming 是 Spark 核心 API 的一个扩展,可以实现高吞吐量的、具备容错机制的 实时流数据的处理。支持从多种数据源获取数据,包括 Kafk、Flume、Twitter、ZeroMQ、Kinesis 以及 TCP sockets,从数据源获取数据之后,可以使用诸如 map、reduce、join 和 window 等 高级函数进行复杂算法的处理。最后还可以将处理结果存储到文件系统,数据库和现场仪表盘。 在“One Stack rule them all”的基础上,还
  3. 所属分类:Java

    • 发布日期:2018-01-29
    • 文件大小:989184
    • 提供者:weixin_41686892
  1. Mesos上的复杂数据分析

  2. 本文将介绍多个在Mesos上进行复杂数据分析的框架。我们会介绍如何在Mesos上搭建Storm和SparkStreaming来处理实时数据流,以及如何在Mesos上运行NoSQL数据库Canssandra。大数据的爆炸式增长不仅体现在生产的数据量上,也体现在要求处理海量数据得到有意义结果的速度和多样性上。因此,数据和计算的速度推动开发人员开发实时流处理框架,同时,数据天然的多样性和松散性也促进了NoSQL的演进。随着物联网(InternetofThings,IoT)的兴起,传感器、社交媒体、机器
  3. 所属分类:其它

    • 发布日期:2021-02-26
    • 文件大小:315392
    • 提供者:weixin_38502183
  1. SparkStreaming实时计算框架介绍

  2. 随着大数据的发展,人们对大数据的处理要求也越来越高,原有的批处理框架MapReduce适合离线计算,却无法满足实时性要求较高的业务,如实时推荐、用户行为分析等。SparkStreaming是建立在Spark上的实时计算框架,通过它提供的丰富的API、基于内存的高速执行引擎,用户可以结合流式、批处理和交互试查询应用。本文将详细介绍SparkStreaming实时计算框架的原理与特点、适用场景。Spark是一个类似于MapReduce的分布式计算框架,其核心是弹性分布式数据集,提供了比MapRedu
  3. 所属分类:其它

    • 发布日期:2021-02-25
    • 文件大小:266240
    • 提供者:weixin_38516380
  1. Spark入门实战系列(上)-实时流计算SparkStreaming原理介绍

  2. SparkStreaming是Spark核心API的一个扩展,可以实现高吞吐量的、具备容错机制的实时流数据的处理。支持从多种数据源获取数据,包括Kafk、Flume、Twitter、ZeroMQ、Kinesis以及TCPsockets,从数据源获取数据之后,可以使用诸如map、reduce、join和window等高级函数进行复杂算法的处理。最后还可以将处理结果存储到文件系统,数据库和现场仪表盘。在“OneStackrulethemall”的基础上,还可以使用Spark的其他子框架,如集群学习、
  3. 所属分类:其它

    • 发布日期:2021-02-24
    • 文件大小:539648
    • 提供者:weixin_38565818
  1. Mesos上的复杂数据分析

  2. 本文将介绍多个在Mesos上进行复杂数据分析的框架。我们会介绍如何在Mesos上搭建Storm和SparkStreaming来处理实时数据流,以及如何在Mesos上运行NoSQL数据库Canssandra。大数据的爆炸式增长不仅体现在生产的数据量上,也体现在要求处理海量数据得到有意义结果的速度和多样性上。因此,数据和计算的速度推动开发人员开发实时流处理框架,同时,数据天然的多样性和松散性也促进了NoSQL的演进。随着物联网(InternetofThings,IoT)的兴起,传感器、社交媒体、机器
  3. 所属分类:其它

    • 发布日期:2021-02-20
    • 文件大小:315392
    • 提供者:weixin_38628920
  1. Mesos上的复杂数据分析

  2. 本文将介绍多个在Mesos上进行复杂数据分析的框架。我们会介绍如何在 Mesos上搭建Storm和SparkStreaming来处理实时数据流,以及如何在Mesos 上运行NoSQL数据库Canssandra。大数据的爆炸式增长不仅体现在生产的数据量上,也体现在要求处理海量数据得到有意义结果的速度和多样性上。因此,数据和计算的速度推动开发人员开发实时流处理框架,同时,数据天然的多样性和松散性也促进了NoSQL的演进。随着物联网(InternetofThin
  3. 所属分类:其它

    • 发布日期:2021-01-30
    • 文件大小:136192
    • 提供者:weixin_38729607
  1. SparkStreaming实时计算框架介绍

  2. 随着大数据的发展,人们对大数据的处理要求也越来越高,原有的批处理框架MapReduce适合离线计算,却无法满足实时性要求较高的业务,如实时推荐、用户行为分析等。 SparkStreaming是建立在Spark上的实时计算框架,通过它提供的丰富的API、基于内存的高速执行引擎,用户可以结合流式、批处理和交互试查询应用。本文将详细介绍Spark Streaming实时计算框架的原理与特点、适用场景。 Spark是一个类似于MapRed
  3. 所属分类:其它

    • 发布日期:2021-01-29
    • 文件大小:266240
    • 提供者:weixin_38691742