多语言展示
当前在线:392今日阅读:103今日分享:49

如何理解跨IDC数据同步

跨IDC数据同步支持关系型数据库、分布式文件系统等数据源间的数据传输。
方法/步骤
1

跨IDC数据同步是一种集数据迁移、数据实时同步于一体的数据传输服务。解决远距离、毫秒级异步数据传输难题。

2

典型管理系统架构,Manager(web管理)+Node(工作节点);基于zookeeper,允许多Node节点之间协同工作。

3

结合电信业务的具体业务场景,跨IDC数据同步组件主要包括以下应用场景:异构数据迁移,增量数据同步,异地灾备系统。

4

例如Oracle数据库到分布式数据库,分布式数据库到oracle数据库。地区、省、集团数据共享同步。系统增量数据订阅。

5

数据同步粒度由上到下支持库、表、字段,可以通过自定义映射关系,以库、表或字段为同步粒度。

6

同步类型包括——单表同步:单表跨IDC数据同步;分片合并:多个数据分片同步至一张表;多表合并:多张不同表的字段同步至一张表。

7

此外还有——字段过滤:指定需要同步的字段;字段处理:根据字段值进行处理;关联SQL:支持在映射关系中配置关联SQL。

推荐信息