欢迎来到Doc100.Net免费学习资源知识分享平台!
您的位置:首页 > 程序异常 >

急求etl工具及解决方案,该怎么处理

更新时间: 2014-01-05 02:29:12 责任编辑: Author_N1

 

急求etl工具及解决方案
实现以下功能
  
  源数据表 A
目标数据表 B

A 表现在5亿记录,及在每日不停的增长。

功能需求

1、从A表中抽取三个字段放入B表
2、监视A表,如果有新记录插入时同进插入B表
3、当B中已存这条记录时不再插入(A有重复数据)

请搞指定,有没有开源的,解决方案
--参考方法--
工具:informatica
可以在mapping中设置A、B两个目的表,在插入A表的时候插入B表
然后在session中分别设置2个表的不同更新方式。
--参考方法--
如果不要求实时,那可以一天更新一次。
强烈建议引入时间键,否则,很难追踪与排查。
另外,从数据质量角度分析,最好能从表A(源头)管理,重复数据按理就不应当存在。
上一篇:上一篇
下一篇:下一篇

 

随机推荐程序问答结果

 

 

如对文章有任何疑问请提交到问题反馈,或者您对内容不满意,请您反馈给我们DOC100.NET论坛发贴求解。
DOC100.NET资源网,机器学习分类整理更新日期::2014-01-05 02:29:12
如需转载,请注明文章出处和来源网址:http://www.doc100.net/bugs/t/10388/
本文WWW.DOC100.NET DOC100.NET版权所有。