etl engine 通过MySQL binlog 模式 实现增量同步数据到 各种数据库原创

大家好，下面我们介绍通过一条案情。如何将买SQL数据表当中的数据？复制到另一台买色扣数据表。甚至还可以将买色Q的数据。复制的work post screen。以及其他的数据库。实现master slave的主从复制效果和增量。数据的同步方案。首先我们的前置条件，我们搭了一个演示环境。买四个数据库。建立了一个DB DB two2个数据库。其中我们要同步的数据表4TRF。我们还有Oracle数据库、post green数据库。分别也都建了TR的info数据表。

首先呢，我们同步的前置条件是数据库表的名称。和自顿。它的类型必须都是一样的。我们现在看一下。买色QL数据库同步的效果。事先我们已经创建好了TR等info。它的数据表是空的。当前连接的是D数据库。我们再看一下。DB two数据库。数据表也是空的。我们事先准备好了一个脚本。它可以生成1万条记录。我们咨询一下。我们查询一下。DB当中的数据记录条数。有一问题。看一下数据库的内容。

它的字段。有资补算的。有复点的，有整形的，还有时间类型的。那么下面我们看一下my deep two。数据表当中的数据。可以看到现在正在同步。已经同步了3000多条。我们原表当中是。1万条。5000多条。6000条，我们稍等一下。那么下面呢，我们要演示一下。如何征？两条记录的数据。

修改之后。是否更新到d two的水库当中？我们再来查看一下。9000条。 ok1万条。我们先看。这两条记录。ID4和四的两条记录。它的记录内容。首先我们关注单价。价格和数量。还有一个pod。我们将事先写好的词汇句。咨询一下。

最后一句的内容呢，是将。三个字段的值做了修改。条件是IDC和一零的。你咨询一下。这事情罪挺好。你们看一下这当中的两条记录。已经发生了变化。我们再看。DB two数据库当中的两条记录。

也发生了变化。这证明了。MYSQL与MYSQL之间数据是同步的。更新插入，我们再做一次删除。把这两条记录删掉。首先我们看一下目标数据库当中它的记录总数。四一万条。我们在原密col当中删除两条记录。我们再看目标。DB two。他的记录数已经变成了9998条。我们在查这两条记录。就没了。这证明我们的删除。也生效了。那我们现在把所有记录都删除掉。

我们再查一下。记录总数。DB。方总。表里的数据已经清空了。我们看一下。DB two。表里的数据。这应该是有个过程，因为它是现在在同步。7000多条。我们可以看见它的变化。证明他一直在后台在做同步操作。稍等一下他就会。变成零。

那么下面呢？我们还可以再准备Oracle的数据库和。POS速入库。事先我们已经做好了连接。看一下数据表的内容。Post screen。Work。数据表都是零条，好，回来我们再看一下micro code。MY大五看看到底多少？还有1000条。OK，也已经清空了。那么下面。我们取两个服务。

Post。和gening overcoat服务。都启动。还是做同样的操作。我们生成模拟记录。在麦斯口上DB一下。行程模拟记录。我们查一下数据表。总共1万条记录，我们再看一下MY。

Two。它正在生成。你再看一下Oracle。5000多条二坦块。看一下post screen。7000多条。A code基本快完了。OK，疑问条二的同步完毕。你再看一下postin。1万条也通不完的。再看一下my circle to的。7000多条。再稍等一下。

我们还是做上面的操作。看一下订单，一下订单时的两条记录。订单一，订单死。我们再看一下口得。订单一订单时。可以看一下post green。订单与订单时。说明数据是同步的，好，我们看一下每次扣除的是否同步完毕。已经同步完毕，我们也看一下他的订单，一号订单时。OK，数据全部同步。那这样呢，我们接下来。还是做修改操作。

更新订单一。更新订单时。我们看一下。DB里数据。易经。更新了。我们再看mexicoso two里面的。也已经更新了。再看到外里的。已经更新。再看post。证明已经同步了。我们再做一下删除。这两条记录定单英汉订单时都删掉。

看一下原版里的数据。已经被删除。看一下DB处理的数据。Nicer DB two已经删除，再看一下。已经删除。Post。已经删除，OK。