九霄鸿鹄作品全集:Oracle数据库同步技术(二)

Oracle数据库同步技术(二)

2011-05-04 14:11:44| 分类： IT资源共享 | 标签：数据库 oracle goldengate shareplex 同步 |字号大中小 订阅

三、Advanced Replication数据同步技术

Advanced Replication配置管理较复杂，且对源数据库性能影响较大，预计在以后的Oracle版本中将可能逐步被Streams技术所取代，故不再对其做过多的介绍。

四、GoldenGate数据同步技术

GoldenGate原来是一家独立的软件厂商的产品，现该产品已被Oracle公司收购，Oracle将GoldenGate软件集成到到其“融合（Fusion）”中间件中，预计以后该产品将与Oracle数据库更紧密地集成。GoldenGate可以用于多种不同的操作系统平台（Unix、Linux、Windows）和多种不同数据库系统（如DB2、Oracle、Infomix、MySQL、Sybase等）之间的数据同步，是一款优秀的数据同步及数据分发产品。

GoldenGate软件需要安装在源数据库服务器和目标数据库服务器上，所需的操作系统资源在10%以下。GoldenGate数据同步的基本原理是由Extract进程读取源数据库的事物日志（Oracle中是redo log），将其中的变更操作（insert、update、delete等）按事务执行的顺序组合在一起，直接将其发送到目标服务其上，或者存放到Trails文件中，然后由Data Pump进程将Trails文件传输到目标服务其上，在目标服务器上Collector进程接收从源服务器传送过来的Trails文件，最后由Replicat进程将Trails文件中的数据装载到目标数据库中，其处理过程如下图：

由于GoldenGate将数据存储到自己的统一格式的Trail文件中，因此可以将Trail文件传送到不同的操作系统，应用在不同的数据库系统上，大大增强其灵活性。另外，由于GoldenGate只收集必要的数据到Trail文件中，且Trail文件可以压缩，因此大大减少通过网络传输的数据量，压缩后传输的数据量通常是日志量的1/4或更少。

GoldenGate有以下优点：

1） 支持异构的操作系统和数据库管理系统，便于客户在不同数据库管理系统和操作系统平台之间的数据同步，这是其核心优势所在；

2） 跟DataGuard传输整个日志文件相比，GoldenGate传输的数据量大大降低，在没有LOB等数据对象的情况下，通常是整个日志文件1/4或更少；

3） 目标数据库处于打开状态，且支持一对多、多对一，双向复制等，也可以选择部分对象进行复制，可满足数据分发和数据集成的需要，减轻源数据库压力；

4） 所占系统资源较少，通常在10%以下；

5） GoldenGate被Oracle公司收购后，预计对Oracle数据库的支持方面会做的更好；

GoldenGate的劣势体现在以下几个方面：

1） 需要支付额外的Liscense费用，通常是一笔不小的支出；

2） 需要在数据库软件外安装一套专门数据同步软件，增加了管理维护的复杂程度；

3） 不能支持某些特定的数据对象和数据类型；

4） 由于数据复制操作独立于数据库管理系统，因此不能确保数据零丢失。

由以上分析可知，GoldenGate用于数据整合，数据共享和分发方面比较合适，至于在高可用的灾难恢复环境中，如果能满足业务的RPO/RTO要求，也不失为一种理想的数据同步解决方案。

五、SharePlex数据同步技术

SharePlex是Quest公司开发的用于专门用于Oracle数据库的数据同步软件，可以运行在异构的操作系统平台上和Oracle数据库的不同版本之间。

SharePlex的数据复制原理与GoldenGate类似，需要分别在源数据库服务器和目标数据库服务器上安装SharePlex软件。具体处理过程是：Capture进程分析源数据库的日志文件，抓取所需的数据变更操作，将其存储在SharePlex自己专有的queue文件中，放入到Capture Queue，然后由Read进程对queue文件进行封装处理，将其放入到Export Queue中，由Export进程将queue文件通过网络发送到目标服务器上，目标服务器上的Import进程接收这些queue文件，将其放入到Post Queue中，最后由Post进程将这些queue文件中的变更应用到目标数据库中，其处理流程如下图：

SharePlex数据同步技术的优势有：

1） 支持异构的操作系统平台，便于数据库管理系统的版本升级及操作系统平台切换；

2） 跟DataGuard传输整个日志文件相比，SharePlex传输的数据量大大降低，这点跟GoldenGate差不多；

3） 目标数据库处于打开状态，且支持一对多、多对一，双向复制等配置，也可以选择部分对象进行复制，可满足数据分发和数据集成的需要，减轻源数据库压力，这方面也类似于GoldenGate；

4） 所占系统资源较少，通常在10%以下；

SharePlex数据同步技术的劣势体现在以下几个方面：

1） 需要支付额外的Liscense费用，通常是一笔不小的支出；

2） 需要在数据库软件外安装一套专门数据同步软件，增加了管理维护的复杂程度；

3） 由于数据复制操作独立于数据库管理系统，因此不能确保数据零丢失；

4） 由于是第三方的软件产品，在对某些特定的数据对象、数据类型和Oracle某些新特性如ASM的支持方面不如数据库厂商自己的解决方案；另外，还有一种可能就是如果Oracle对自己的日志格式做些改变或加密，SharePlex将无能为力；

从上述分析可知，SharePlex虽然专用于Oracle数据库同步，但同GoldenGate相比并无明显优势，GoldenGate对异构数据库的支持更是SharePlex所不能比。再者，现在GoldenGate已经被Oracle公司收购，成为了Oracle的嫡系部队，这对SharePlex来说确实是一件不幸的事，关乎生死。

除了上面介绍的这些数据同步技术外，在国内市场上用于Oracle数据同步的产品还有DSG 公司的RealSync软件，RealSync的实现原理及功能与SharePlex基本类似，也是只支持Oracle数据库，也可以跨越不同的操作系统平台。值得一提的是RealSync在目标数据库的数据装载方面，不是通过主键或唯一键来实现数据记录的定位，而是自己维护一个源数据库和目标数据库的数据记录的rowid mapping表，通过rowid来实现记录的定为，因此在数据装载效率方面有不小的提高。