跨Oracle实例比较和同步数据

时间:2012-08-27 15:15:47

标签: oracle compare

我有三个oracle环境。如果我在DEV环境中对数据进行了更改,我希望能够将这些更改移动到其他环境中。

挑战在于其他环境中的数据不会具有相同的主键。因此,比较必须查看表中的其他列。如果表引用了另一个表,那么它也必须包含该表中的列。

因此,例如,表A可能有4列,这些列都是其他表的ID,因此操作表A需要引用其他表。有人可以为此推荐一款产品吗?

更新的要求:可以更改现有系统的任何内容。 ID永远不会同步。只有在需要时才会进行同步(在我们的双月更新之后)。无法通过DB链接进行同步(尽管DEV系统可以跨数据库链接读取数据)。我绝对可以编写SQL来做这一切,它只是容易出错的东西(和错别字),如果有第三方应用程序可以为我处理这个,我宁愿花钱这笔钱。

根据要求进行更新:所有系统均为11g Enterprise。数据量非常小,带宽不是问题。同步每两个月发生一次。基本上,我们有规则告诉我们的UI如何表现。这些规则存储在各种表中。我们有时会改变这些规则。这可以是数千条记录,但不是数万条记录。我们不希望人们可能希望从“实时”数据中获得同步。我需要做的是指定两个数据库实例和相关表,然后生成一个SQL脚本,有效地将更改从数据库A移动到数据库B.鉴于数据的性质,我一直在考虑简单地截断目标表并将数据加载到其他环境中。这并不像听起来那么简单,因为有一个“实时”表引用了这些记录,并且可能需要一些特定的更新(我正在积极研究这种可能性,它并不像听起来)。

这里的代码将提供我的意思的例子。您会注意到ID,并且这些ID在各种环境中都不一致,这就是使这一点变得棘手的原因。

drop table mydata;
drop table MYTOWN;
drop table MYJOB;
drop table MYEMPLOYER;
drop table mystate;

create table MYJOB
(MYJOBID varchar2(1000)  NOT NULL PRIMARY KEY,
MYJOB varchar2(1000));

create table MYEMPLOYER
(MYEMPLOYERID  varchar2(1000)  NOT NULL PRIMARY KEY,
MYEMPLOYER  varchar2(1000));


create table MYSTATE
(MYSTATEID  varchar2(1000)  NOT NULL PRIMARY KEY,
MYSTATE varchar2(1000));

create table MYTOWN
(MYTOWNID varchar2(1000)  NOT NULL PRIMARY KEY,
MYTOWN varchar2(1000),
MYSTATEID varchar2(1000),
CONSTRAINT MYSTATE_FK FOREIGN KEY (MYSTATEID) REFERENCES MYSTATE (MYSTATEID) ENABLE);


create table MYDATA
(MYDATAID varchar2(1000)  NOT NULL PRIMARY KEY,
MYTOWNID varchar2(1000),
MYJOBID varchar2(1000),
MYEMPLOYERID varchar2(1000),
CONSTRAINT MYTOWN_FK FOREIGN KEY (MYTOWNID) REFERENCES MYTOWN (MYTOWNID) ENABLE,
CONSTRAINT MYJOB_FK FOREIGN KEY (MYJOBID) REFERENCES MYJOB (MYJOBID) ENABLE,
CONSTRAINT MYEMPLOYER_FK FOREIGN KEY (MYEMPLOYERID) REFERENCES MYEMPLOYER (MYEMPLOYERID) ENABLE
);


create sequence mydataid_seq;

insert into myemployer values ('937436',    'Bank Of America');
insert into myemployer values  ('43',   'Google');
insert into myemployer values  ('2',    'Toms Taxi');

insert into myjob  values ('8','Programmer');
insert into myjob  values ('10','Cook');
insert into myjob  values ('5','Driver');

insert into mystate  values ('7643','MA');
insert into mystate  values ('23','CA');
insert into mystate  values ('54','NM');

insert into mytown  values ('4743','BOSTON','7643');
insert into mytown  values ('321','SANDIEGO','23');
insert into mytown  values ('92037','SANTA FE','54');

insert into mydata  values ('78','4743','8','937436');
insert into mydata  values ('23455','321','10','43');
insert into mydata  values ('901','92037','5','2');


--to select a unique row
select mt.mytown, ms.mystate, mj.myjob, me.myemployer
from mydata md, mytown mt, mystate ms, myemployer me, myjob mj
where md.mytownid=mt.mytownid
and mt.mystateid=ms.mystateid
and md.myjobid=mj.myjobid
and md.myemployerid=me.myemployerid;

--to delete a row
delete from mydata md where md.mydataid =
(select md.mydataid 
from mydata md, mytown mt, mystate ms, myemployer me, myjob mj
where md.mytownid=mt.mytownid
and mt.mystateid=ms.mystateid
and md.myjobid=mj.myjobid
and md.myemployerid=me.myemployerid
and mt.mytown='SANDIEGO'
and ms.mystate='CA'
and mj.myjob='Cook'
and me.myemployer='Google');

--to insert a row
insert into mydata (mydataid,mytownid, myjobid, myemployerid)
(select mydataid_seq.nextval, mt.mytownid, mj.myjobid, me.myemployerid
from mytown mt, mystate ms, myemployer me, myjob mj
where mt.mytown='SANTA FE'
and mj.myjob='Programmer'
and me.myemployer='Toms Taxi'
and ms.mystate='NM'
);

1 个答案:

答案 0 :(得分:1)

看看Oracle GoldenGate。 http://www.oracle.com/technetwork/middleware/goldengate/overview/index.html 可能它就像一个沉重的枪支解决方案。

最佳解决方案取决于您的具体需求(多少数据?多长时间?必须完成多少转换?服务器之间的带宽?它们的负载?等等......)。

Oracle有许多复制选项。

<强>更新

关于GoldenGate的建议仍然是实际的,但它并不是廉价的解决方案。

但是,如果你有一些编码技巧和兴趣,那么它可能更容易:

  1. 使用db-link并使用同步逻辑编写PLSQL包。然后,您可以在需要时调用它,或者作为Job / Task定期运行它。中央数据库必须能够看到其他人,并且必须能够建立直接连接。
  2. 或者您可以编写外部应用程序并在其中放置同步逻辑。数据库可以位于单独的DMZ中。
  3. 当然,您可以使用Oracle Streams(11g企业包含它),但我无法保证在您的情况下无需额外编码即可使用。因此,这种方法可以变成第一种具有复杂性的方法。

    有时,使用严肃的复制解决方案需要更多时间来设置和维护。在您的情况下,您只需要同步。

    你可以找到一些现成的免费解决方案。但是,在大多数情况下,他们的质量很差。所以,我不推荐它们。

    PS: 您可以使用两种方法解决数据的不一致问题:

    1. 最简单:对每个数据库的键列使用具有不同起始值的oracle序列(不要忘记设置最大值,以防止重叠)
    2. 普通解决方案:重新设计您的数据模型以包含有关办公室/服务器的信息