MySQL 开源数据传输中间件 dtle爱可生此次开源DTLE，是真诚为社区提供MySQL生态圈里一

文件名称: MySQL 开源数据传输中间件 dtle

所属分类: MySQL

开发工具:

文件大小: 1mb

下载次数: 0

上传时间: 2019-01-12

提供者: hongb*****

下载 (1mb)

不能下载？报告错误

详细说明：爱可生此次开源DTLE，是真诚为社区提供MySQL生态圈里一个可持续发展的工具，并希望与社区再次达成双赢，解决数据传输中间件的核心问题。 DTLE的设计特点分布式架构：DTLE在数据传输这个基本场景上，使用了成熟的分布式任务调度架构，可以便捷地在集群中配置大量的数据传输任务，提供断点续传/故障转移等分布式系统的重要特性灵活的网络适配能力：DTLE可适配复杂的网络架构，提供跨数据中心的数据通道功能和公有云间的数据通道功能多场景适配：DTLE通过组合多个原子任务，可适配复杂的数据传输场景关于开源 MySQL 数据传输中间件DTLE更多技术细节我们后期会持续输出，版本更新MySQL Replication 功能不足按库、表筛选 ·数据落地,开销较大灵活性较弱应用场景多为高可用核心场景场景需求异地多活实时同步,双向复制,链路压缩、加密、限速,跨网络边际,可靠性数据汇聚& 按库、表、行、简单表达式等方式筛选分发数据订阅 CDC日志解析, to Kafka 在线数据迁移异构DB间,同构DB间,全量+增量同步、数据一致性校验云间同步支持主流公有云厂商 RDS for MySQL 设计原则 ·易用性易于部署、易于使用可靠性无单点风险、故障自愈、数据一致性心DTLE DTLE(Data- Transformation-e)是上海爱可生贡献开源社区的CDC工具.具备以下特点: ·多种数据传输模式:支持链路压缩,攴持同构和舁构传输,支持跨网络边际的传输多种数据处理模式:支持库/表/行级别数据过潓多种数据通道模式:支持多对多的数据传输、支持回环传输 ·多种源/标端:支持MySαL-MySαL的数据传输,支持 MySQL- Kafka的数据传输集群模式部署提供可靠的元数据存储 ●可进行自动任务分配 ●支持自动故障转移 https:/github.com/actiontech/dtle 力口 uped and compressed nais messaging ctle agent 1 dale agent 2 src task dest task data dumper MTS manager d b2 dummy slave SQL applier where filter user client dte manager controlling Http Request failure detection vew agents add/view/remove job 集群机制 Manager Manager节点 Follower Follower 3节点Rafi主&同步元数据 Raft 分发任 Leader Agent节点任务推送心跳上报上报心跳 Worker Worker Worker 处理任务拓扑结构 1-1复制 1:1同步 Source MySQL Target MySQL n-1汇聚 Source MySOL 1 Target MySQL 1汇聚 1-n拆分部分数据 1:n拆分 Source MySQL Target Mys 其他数据 Target MySQL 2 拓扑结构跨网络边际的1-1复制同步(带压缩限速)O}-0O 跨网络边际的多个复制通道 n:n同步(带压缩限速) Source MySOL 1 Target MySoL 1 I arget My SQL 2 I Source MySQL 2 双向同步跨数据中心的双向复割 Source My SOL dte Target MySQL

(系统自动生成,下载前可以参看下载内容)