您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. 云环境下的实时流计算平台研究

  2. 云环境下的实时流计算平台研究 李钊
  3. 所属分类:其它

    • 发布日期:2017-07-07
    • 文件大小:11534336
    • 提供者:jiangdmdr
  1. 实时流计算平台Blink在阿里集团的应用实践

  2. 实时流计算平台Blink在阿里集团的应用实践,希望对大家有帮助
  3. 所属分类:flink

    • 发布日期:2018-03-17
    • 文件大小:29360128
    • 提供者:maimaide
  1. 基于分布式及实时流算法的数据挖掘

  2. 支持多种语言编译(scala\R\Java\python),丰富可调用的API 易于使用 基于内存计算,分布式运行,处理TB级数据速度最快可以秒计 支持全局数据的大规模迭代优化算法、实时流算法 模型部署、调用简单方便
  3. 所属分类:电信

    • 发布日期:2018-11-09
    • 文件大小:1048576
    • 提供者:wtigter
  1. 实时流计算产品与技术发展展望.pdf

  2. 阿里集团计算事业部-产品专家 巴真在2017杭州云栖大会中做了题为《实时流计算产品与技术发展展望》的分享,就实时化的价值: 电商营销活动提升成交金额,流处理系统,流计算应用做了深入的分析。
  3. 所属分类:其它

    • 发布日期:2019-08-29
    • 文件大小:5242880
    • 提供者:weixin_38743737
  1. 大数据实时流计算统计视频.txt

  2. 大数据实时流计算统计,涵盖行业真是案例,使用habse ,spark.
  3. 所属分类:spark

    • 发布日期:2019-09-29
    • 文件大小:116
    • 提供者:buzuotaxuan
  1. 基于实时数据流的煤矿监测数据流计算模式分析

  2. 结合煤矿的现场实际情况和大数据中流计算框架,提出了基于Spark streaming的煤矿实时数据应用的流计算框架。该计算框架可以高效、快速处理来自于监测监控系统的不同系统、不同接口、不同传输速率的要求,快速地采集和处理监测监控系统的实时数据流,融合处理各业务系统的实时数据。该框架的建立可以使得基于采、掘、机、运、通等内容的矿井整体建立运营管控模型,在矿井生产全过程实现信息可采、过程可视、运行可控的能力,确保生产过程信息的完整性、可靠性、真实性。
  3. 所属分类:其它

    • 发布日期:2020-05-18
    • 文件大小:177152
    • 提供者:weixin_38556541
  1. 使用Spark进行实时流计算的方法

  2. 主要介绍了用Spark进行实时流计算的相关知识,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友可以参考下
  3. 所属分类:其它

    • 发布日期:2020-10-15
    • 文件大小:196608
    • 提供者:weixin_38674763
  1. Re-Stream:大数据流计算环境中的实时节能资源调度

  2. Re-Stream:大数据流计算环境中的实时节能资源调度
  3. 所属分类:其它

    • 发布日期:2021-03-19
    • 文件大小:1048576
    • 提供者:weixin_38653155
  1. 基于实时流式计算系统的数据分类节能策略

  2. 为解决实时流式计算中数据存储的能耗问题,采用内存分类存储的思想,提出数据分类策略(data classification strategy, DCS)。将内存存储划分为实时文件区与重复文件区;针对实时文件区中的数据,通过降低预存储区(precharge fast powerdown, PRE zone)的峰值电压,关闭大量的数据节点,使服务器预存储区的部分数据进入不常用文件区,通过 布隆过滤器 (Bloom filter)过滤重复文件区的重复数据。实验结果表明,该策略在存储方面有效节能约27.2
  3. 所属分类:其它

    • 发布日期:2021-03-07
    • 文件大小:645120
    • 提供者:weixin_38638002
  1. 从Storm和Spark学习流式实时分布式计算的设计

  2. 最近我在做流式实时分布式计算系统的架构设计,而正好又要参加CSDN博文大赛的决赛。本来想就写Spark源码分析的文章吧。但是又想毕竟是决赛,要拿出一些自己的干货出来,仅仅是源码分析貌似分量不够。因此,我将最近一直在做的系统架构的思路整理出来,形成此文。为什么要参考Storm和Spark,因为没有参照效果可能不会太好,尤其是对于Storm和Spark由了解的同学来说,可能通过对比,更能体会到每个具体实现背后的意义。本文对流式系统出现的背景,特点,数据HA,服务HA,节点间和计算逻辑间的消息传递,存
  3. 所属分类:其它

    • 发布日期:2021-03-01
    • 文件大小:357376
    • 提供者:weixin_38646706
  1. 波动大数据流上实时流计算的稳定在线调度策略

  2. A Stable Online Scheduling Strategy for Real-Time Stream Computing Over Fluctuating Big Data Streams
  3. 所属分类:互联网

    • 发布日期:2021-02-27
    • 文件大小:5242880
    • 提供者:m0_46427173
  1. 如何实现秒级百万TPS?微博WAIC实时流计算平台架构演进

  2. 本文来自于51cto,随着新浪微博业务的不断推进,对数据处理的实时性要求越来越高。例如,大家所熟悉的微博热词,需要在很短的时间内完成数据处理以供在线系统使用。本文将按照如下四个阶段分享微博实时流计算平台的搭建历程,以及在创建过程中的一些问题和解决方案:实时流计算平台初建实时流计算平台发展总结DQRA设计模式初入实时流计算首先介绍一下我们实时流计算平台开发历程:2015年,我进入新浪微博。当年,我们利用实时流计算做出了物料池系统。2016年,我们进行了用户实时兴趣反馈系统的开发。2017年,我们接
  3. 所属分类:其它

    • 发布日期:2021-02-24
    • 文件大小:987136
    • 提供者:weixin_38516491
  1. 腾讯基于Flink的实时流计算平台演进之路

  2. 这次分享主要包含四个议题,会首先阐述一下腾讯在实时计算中使用Flink的历程,然后会简单介绍一下腾讯围绕Flink的产品化实践:我们打造了一个Oceanus平台,同时腾讯云也早已提供基于Flink的实时流计算服务,接着我们会重点跟大家聊一聊我们对社区版Flink的一些扩展与改进、优化。首先,我们进入第一个议题。Flink在腾讯正式被考虑替代Storm是在2017年。17年上半年,我们主要在调研Flink替换Storm的可行性、特性、性能是否能够满足我们的上线要求。在此之前,我们内部以Storm作
  3. 所属分类:其它

    • 发布日期:2021-02-24
    • 文件大小:1048576
    • 提供者:weixin_38659646
  1. Spark入门实战系列(上)-实时流计算SparkStreaming原理介绍

  2. SparkStreaming是Spark核心API的一个扩展,可以实现高吞吐量的、具备容错机制的实时流数据的处理。支持从多种数据源获取数据,包括Kafk、Flume、Twitter、ZeroMQ、Kinesis以及TCPsockets,从数据源获取数据之后,可以使用诸如map、reduce、join和window等高级函数进行复杂算法的处理。最后还可以将处理结果存储到文件系统,数据库和现场仪表盘。在“OneStackrulethemall”的基础上,还可以使用Spark的其他子框架,如集群学习、
  3. 所属分类:其它

    • 发布日期:2021-02-24
    • 文件大小:539648
    • 提供者:weixin_38565818
  1. Spark入门实战系列(下)--实时流计算SparkStreaming实战

  2. 本文来自博客园,由火龙果软件Anna编辑、推荐。1.1.1流数据说明在实例演示中模拟实际情况,需要源源不断地接入流数据,为了在演示过程中更接近真实环境将定义流数据模拟器。该模拟器主要功能:通过Socket方式监听指定的端口号,当外部程序通过该端口连接并请求数据时,模拟器将定时将指定的文件数据随机获取发送给外部程序。1.1.2模拟器代码 1.1.3生成打包文件【注】可以参见第3课《Spark编程模型(下)--IDEA搭建及实战》进行打包在打包配置界面中,需要在ClassPath加入:/app/sc
  3. 所属分类:其它

    • 发布日期:2021-02-24
    • 文件大小:1048576
    • 提供者:weixin_38674115
  1. 从Storm和Spark学习流式实时分布式计算的设计

  2. 最近我在做流式实时分布式计算系统的架构设计,而正好又要参加CSDN博文大赛的决赛。本来想就写Spark源码分析的文章吧。但是又想毕竟是决赛,要拿出一些自己的干货出来,仅仅是源码分析貌似分量不够。因此,我将最近一直在做的系统架构的思路整理出来,形成此文。为什么要参考Storm和Spark,因为没有参照效果可能不会太好,尤其是对于Storm和Spark由了解的同学来说,可能通过对比,更能体会到每个具体实现背后的意义。本文对流式系统出现的背景,特点,数据HA,服务HA,节点间和计算逻辑间的消息传递,存
  3. 所属分类:其它

    • 发布日期:2021-02-21
    • 文件大小:357376
    • 提供者:weixin_38651468
  1. 如何实现秒级百万TPS?微博WAIC实时流计算平台架构演进

  2. 本文来自于51cto,随着新浪微博业务的不断推进,对数据处理的实时性要求越来越高。例如,大家所熟悉的微博热词,需要在很短的时间内完成数据处理以供在线系统使用。本文将按照如下四个阶段分享微博实时流计算平台的搭建历程,以及在创建过程中的一些问题和解决方案: 实时流计算平台初建 实时流计算平台发展 总结DQRA设
  3. 所属分类:其它

    • 发布日期:2021-01-27
    • 文件大小:987136
    • 提供者:weixin_38717579
  1. 腾讯基于Flink的实时流计算平台演进之路

  2. 这次分享主要包含四个议题,会首先阐述一下腾讯在实时计算中使用Flink 的历程,然后会简单介绍一下腾讯围绕Flink的产品化实践:我们打造了一个Oceanus平台,同时腾讯云也早已提供基于 Flink的实时流计算服务,接着我们会重点跟大家聊一聊我们对社区版Flink的一些扩展与改进、优化。首先,我们进入第一个议题。Flink在腾讯正式被考虑替代Storm是在2017年。17年上半年,我们主要在调研Flink替换Storm的可行性、特性、性
  3. 所属分类:其它

    • 发布日期:2021-01-27
    • 文件大小:1048576
    • 提供者:weixin_38640168
  1. Spark入门实战系列(上)-实时流计算SparkStreaming原理介绍

  2. SparkStreaming是Spark核心API的一个扩展,可以实现高吞吐量的、具备容错机制的实时流数据的处理。支持从多种数据源获取数据,包括Kafk、Flume、Twitter、ZeroMQ、Kinesis 以及TCPsockets,从数据源获取数据之后,可以使用诸如map、reduce、join和window等高级函数进行复杂算法的处理。最后还可以将处理结果存储到文件系统,数据库和现场仪表盘。在“One
  3. 所属分类:其它

    • 发布日期:2021-01-27
    • 文件大小:539648
    • 提供者:weixin_38697753
  1. Spark入门实战系列(下)--实时流计算SparkStreaming实战

  2. 本文来自博客园,由火龙果软件Anna编辑、推荐。 1.1.1流数据说明 在实例演示中模拟实际情况,需要源源不断地接入流数据,为了在演示过程中更接近真实环境将定义流数据模拟器。该模拟器主要功能:通过Socket方式监听指定的端口号,当外部程序通过该端口连接并请求数据时,模拟器将定时将指定的文件数据随机获取发送给外部程序。1.1.2模拟器代码 1.1.3生成打包文件
  3. 所属分类:其它

    • 发布日期:2021-01-27
    • 文件大小:1048576
    • 提供者:weixin_38524472
« 12 3 4 5 6 7 8 9 10 ... 28 »