您好,欢迎光临本网站![请登录][注册会员]  

搜索资源列表

  1. kafka & mafka client开发与实践

  2. 内容介绍: Kafka是一个高吞吐量分布式消息系统。linkedin开源的kafka。 Kafka就跟这个名字一样,设计非常独特。 首先,kafka的开发者们认为不需要在内存里缓存什么数据,操作系统的文件缓存已经足够完善和强大,只要你不搞随机写,顺序读写的性能是非常高效的。kafka的数据只会顺序append,数据的删除策略是累积到一定程度或者超过一定时间再删除。Kafka另一个独特的地方是将消费者信息保存在客户端而不是MQ服务器,这样服务器就不用记录消息的投递过程,每个客户端都自己知道自己下
  3. 所属分类:讲义

    • 发布日期:2016-12-19
    • 文件大小:1048576
    • 提供者:wohenkeai
  1. Kafka分布式消息系统实战(与Java+Scala+Hadoop+Storm集成)

  2. 1.课程研发环境 Kafka的版本:kafka_2.9.2-0.8.1.1.tgz和kafka_2.11-0.10.0.0.tgz 开发工具: Linux;Eclipse;Scala IDE 2.内容简介 Kafka是分布式的消息队列,作为云计算服务的基石,它广泛的应用在实时数据流方面,是实时数据处理的数据中枢,广泛应用在很多互联网企业,例如:linkedin,facebook,腾讯,百度,阿里等。实时数据流是现在互联网公司、甚至拥有大规模数据的传统企业的主要模式, 实时数据(Real-tim
  3. 所属分类:kafka

    • 发布日期:2018-02-02
    • 文件大小:55
    • 提供者:marryhe
  1. 消息队列之kafka.docx

  2. Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种场景需求:比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎,web/nginx日志、访问日志,消息服务等等,生产者往队列里写消息,消费者从队列里取消息进行业务逻辑。一般在架构设计中起到解耦、削峰、异步处理的作用。用scala语言编写,Linkedi
  3. 所属分类:群集服务

    • 发布日期:2020-05-01
    • 文件大小:1048576
    • 提供者:weixin_46389787
  1. kafka:一个分布式消息系统

  2. 所属分类:Web服务器

    • 发布日期:2016-11-14
    • 文件大小:414720
    • 提供者:u010867667
  1. 浅谈分布式消息技术:Kafka.docx

  2. Kafka的基本介绍 Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消息服务等等,Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。
  3. 所属分类:kafka

    • 发布日期:2020-08-20
    • 文件大小:1048576
    • 提供者:u011013470
  1. kafka分布式发布订阅消息系统 v2.7.0

  2. 为您提供kafka分布式发布订阅消息系统下载,kafka是一种高吞吐量的分布式发布订阅消息系统。她有如下特性:1、通过O(1)的磁盘数据结构提供消息的持久化,这种结构对于即使数以TB的消息存储也能够保持长时间的稳定性能。2、高吞吐量:即使是非常普通的硬件kafka也可以支持每秒数十万的消息。3、支持通过kafka服务器和消费机集群来分区消息。4、支持Hadoop并行数据加载。kafka的目的是提供一个发布订阅解决方案,它可以处理消费者规模的网
  3. 所属分类:其它

    • 发布日期:2020-12-28
    • 文件大小:8388608
    • 提供者:weixin_38653443
  1. 分布式发布订阅消息系统Kafka

  2. 1 目录结构 Kafka概述 Kafka架构及核心概念 Kafka单节点单broker部署及使用 单节点多Broker部署及使用(未调通) xxx(省略一部分) 整合Flume和Kafka完成实时数据采集 2 Kafka概述 官网:http://kafka.apache.org/ A distribute streaming platform. PUBLISH & SUBSCRIBE(订阅和发布): Read and write streams of data like a messa
  3. 所属分类:其它

    • 发布日期:2021-01-07
    • 文件大小:162816
    • 提供者:weixin_38739744
  1. 消息中间件Kafka:基本概念和基本使用(经典)

  2. 最近做项目时使用到了Kafka,翻自己博客居然没有相关文章,这时写点文章复习复习,顺便深入理解一下基本操作。 基本模型 Kafka是大数据常用的消息中间件,是由Apache开发的一种发布订阅消息系统,它是一个分布式的、分区的和重复的日志服务。它的模型大概就是这个样子 我们可以看到两个熟悉的角色 Producer生产者 Consumer消费者 这两个是消息中间件里面常见的两个名词 另外还有broker,它代表一台kafka服务器,多个broker组成集群。 从图中可以看到Producer负责向b
  3. 所属分类:其它

    • 发布日期:2021-01-07
    • 文件大小:717824
    • 提供者:weixin_38537777
  1. micro-message-system:基于go micro + gin + kafka + etcd的分布式消息即时通信微服务系统-源码

  2. 基于go micro的分布式即时通信系统 技术架构 1.微服务框架:go micro 基于go-plugins可插拔模式 2.服务发现:etcd 3.服务端限流:令牌桶(ratelimit) 4.熔断机制:hystrix 5.消息中间件:kafka 6.web框架:gin gorm 7.数据库:mysql 8.token认证:jwt-go 9.搜索:ES 10.链路追踪:jaeger 系统模块 1. 用户服务: 用户API服务 - 用户注册登录 用户RPC服务 - 用户鉴权 网
  3. 所属分类:其它

    • 发布日期:2021-03-11
    • 文件大小:223232
    • 提供者:weixin_42136826
  1. jafka:快速,简单的分布式发布-订阅消息系统(mq)-源码

  2. #A快速分布式消息传递系统(MQ) Jafka mq是从克隆的分布式发布-订阅消息系统。 因此它具有以下功能: 具有O(1)磁盘结构的持久消息传递即使在存储大量TB消息的情况下也能提供恒定的时间性能。 高吞吐量:即使使用非常适度的硬件,单个代理也可以每秒支持数十万条消息。 显式支持在代理服务器上对消息进行分区,并在使用方计算机的群集上分配使用量,同时保持每个分区的排序语义。 许多语言客户端的简单消息格式。 纯Java工作 如果您对感兴趣,请使用的原产kafka。 它还在有一个git
  3. 所属分类:其它

    • 发布日期:2021-03-11
    • 文件大小:1048576
    • 提供者:weixin_42144201
  1. unitalk:可用作聊天室或状态同步的分布式聊天系统-源码

  2. unitalk unitalk是一个分布式聊天系统,可以用作聊天室或状态同步。 unitalk启动时会在zookeeper上注册自己,使用redis集群将消息或状态广播到kafka,然后将永久消息或状态广播到kafka,然后保存到db。 建筑学
  3. 所属分类:其它

    • 发布日期:2021-03-04
    • 文件大小:78848
    • 提供者:weixin_42109732
  1. 微服务架构:Kafka的崛起

  2. 正如我们在以前的博客中提到的,比如说我们的Docker系列博客,我们正处于把系统迁移到微服务新世界的过程中。促成这次架构改造的一项关键的技术就是ApacheKafka消息队列。它不仅成为了我们基础架构的关键组成部分,还为我们正在创建的系统架构提供了依据。ArchSummit深圳2016将于07月15-16日在华侨城洲际大酒店举行,最新日程已上线,团购报名更多优惠!虽然这篇文章的目的不是在宣扬Kafka比其他消息队列系统更优秀,但是本文讨论的某些部分是专门针对它的。对于外行来说,Kafka是一个开
  3. 所属分类:其它

    • 发布日期:2021-02-26
    • 文件大小:293888
    • 提供者:weixin_38562329
  1. 浅谈分布式消息技术Kafka

  2. Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消息服务等等,Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。主要应用场景是:日志收集系统和消息系统。Kafka主要设计目标如下:1.以时间复杂度为O(1)的方式提供消息持久化能力,即使对TB级以上数据也能保证常数时间的访问性能。2.高吞吐率。即使在非常廉价的商用机器上也能做
  3. 所属分类:其它

    • 发布日期:2021-02-25
    • 文件大小:796672
    • 提供者:weixin_38519082
  1. 分布式消息系统:Kafka

  2. 本文来自于标点符,讲解了KafKa的特点,架构,及消息发送的流程。通过KafKa的设计更加全面的叙述。Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发,之后成为Apache项目的一部分。Kafka是一个分布式的,可划分的,冗余备份的持久性的日志服务。它主要用于处理活跃的流式数据。在大数据系统中,常常会碰到一个问题,整个大数据是由各个子系统组成,数据需要在各个子系统中高性能,低延迟的不停流转。传统的企业消息系统并不是非常适合大规模的数据处理。为了已在同时搞定在线应用(消息)和
  3. 所属分类:其它

    • 发布日期:2021-02-25
    • 文件大小:199680
    • 提供者:weixin_38514620
  1. kafka-分布式消息系统

  2. 本文来自于cnblogs,文中介绍了Kafka架构中相互之间的关系,怎么分布的。解耦且可扩展:业务复杂度的提升带来的也是耦合度的提高,消息队列在处理过程中间插入了一个隐含的、基于数据的接口层,两边的处理过程都要实现这一接口。这允许你独立的扩展或修改两边的处理过程,只要确保它们遵守同样的接口约束。冗余:有些业务在处理过程中如果失败了,数据在未进行持久化的时候就已经消失,消息队列把数据持久化直到他们被处理,避免了数据的丢失处理并发:大数据量访问的时候我们可以将消息放入队列中,然后在队列里面按照系统的
  3. 所属分类:其它

    • 发布日期:2021-02-25
    • 文件大小:653312
    • 提供者:weixin_38665046
  1. 微服务架构:Kafka的崛起

  2. 正如我们在以前的博客中提到的,比如说我们的Docker系列博客,我们正处于把系统迁移到微服务新世界的过程中。促成这次架构改造的一项关键的技术就是ApacheKafka消息队列。它不仅成为了我们基础架构的关键组成部分,还为我们正在创建的系统架构提供了依据。ArchSummit深圳2016将于07月15-16日在华侨城洲际大酒店举行,最新日程已上线,团购报名更多优惠!虽然这篇文章的目的不是在宣扬Kafka比其他消息队列系统更优秀,但是本文讨论的某些部分是专门针对它的。对于外行来说,Kafka是一个开
  3. 所属分类:其它

    • 发布日期:2021-02-02
    • 文件大小:293888
    • 提供者:weixin_38637580
  1. 浅谈分布式消息技术Kafka

  2. Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消息服务等等,Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。主要应用场景是:日志收集系统和消息系统。Kafka主要设计目标如下:1.以时间复杂度为O(1)的方式提供消息持久化能力,即使对TB级以上数据也能保证常数时间的访问性能。2.高吞吐率。即使在非常廉价的商用机器上也能做
  3. 所属分类:其它

    • 发布日期:2021-01-27
    • 文件大小:796672
    • 提供者:weixin_38675465
  1. kafka-分布式消息系统

  2. 本文来自于cnblogs ,文中介绍了Kafka架构中相互之间的关系,怎么分布的。解耦且可扩展:业务复杂度的提升带来的也是耦合度的提高,消息队列在处理过程中间插入了一个隐含的、基于数据的接口层,两边的处理过程都要实现这一接口。这允许你独立的扩展或修改两边的处理过程,只要确保它们遵守同样的接口约束。冗余:有些业务在处理过程中如果失败了,数据在未进行持久化的时候就已经消失,消息队列把数据持久化直到他们被处理,避免了数据的丢失处理并发:大数据量访问的时候我们可以将消息放入队列中,然后在队列里面按照系统
  3. 所属分类:其它

    • 发布日期:2021-01-27
    • 文件大小:653312
    • 提供者:weixin_38697328
  1. 分布式消息系统:Kafka

  2. 本文来自于标点符 ,讲解了KafKa的特点,架构,及消息发送的流程。通过KafKa的设计更加全面的叙述。Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发,之后成为Apache项目的一部分。Kafka是一个分布式的,可划分的,冗余备份的持久性的日志服务。它主要用于处理活跃的流式数据。在大数据系统中,常常会碰到一个问题,整个大数据是由各个子系统组成,数据需要在各个子系统中高性能,低延迟的不停流转。传统的企业消息系统并不是非常适合大规模的数据处理。为了已在同时搞定在线应用(消息)
  3. 所属分类:其它

    • 发布日期:2021-01-27
    • 文件大小:199680
    • 提供者:weixin_38666527
  1. 消息中间件Kafka(一)认识与安装

  2. 官方网站:http://kafka.apache.org/ 一、概述 1.简介 kafka是一个款分布式发布和订阅系统,主要用于大数据的数据流处理和作为消息中间件的使用,相比其他消息中间件他的特点是高性能高吞吐量,因为他并没有完全遵循AMQP(高级消息队列协议)。 2.应用场景 行为跟踪:kafka可以用于用于跟中用户浏览页面、搜索以及其他操作行为,通过发布订阅及时记录 到响应的topic中,通过后端大数据平台接入处理分析、实时处理以及监控。 日志收集:在实际开发中,我们应用程序的日志会输
  3. 所属分类:其它

    • 发布日期:2021-01-20
    • 文件大小:119808
    • 提供者:weixin_38635092
« 12 3 4 5 »