咖趣阁

手机浏览器扫描二维码访问

第326章 夜宵(第3页)

Y是指每次抽取前先删除目标表

数据Y抽取时全新加载数据该方式实际上将增量抽取等同于全量

抽取对于数据量不大Y全量抽取的时间代价小于执行增量抽取的

算法和条件代价时Y可以采用该方式。

这种方式的优点是对已有系统表结构不产生影响Y不需要修改业务

操作程序Y所有抽取规则由ETL完成Y管理维护统一Y可以实现数

据的递增加载Y没有风险

缺点是ETL比对较复杂Y设计较为复杂Y速度较慢与触发器和时

间戳方式中的主动通知不同Y全表比对方式是被动的进行全表数据

的比对Y性能较差当表中没有主键或唯一列且含有重复记录时Y

全表比对方式的准确性较差。

日志比对的方式是通过获取数据库层面的日志来捕获到变化的数据Y

不需要改变源业务系统数据库相关表结构Y数据同步的效率比较高Y

同步的及时性也比较快Y最大的问题就是不同数据库的日志文件结

构存在较大的差异性Y实施分析起来难度比较大Y同时Y需要具备

访问源业务库日志表文件的权限Y存在一定的风险性Y所以这种方

式有很大的局限性。

日志比对方式中比较成熟的技术是CDC(ChangeDataCapture)技术Y

作用同样是能够捕获到上一次抽取之后产生的相关变化数据Y当

CDC对源业务表进行新增更新和删除等相关操作的时就可以捕获

到相关变化的数据Y相对于增量字段方式YCDC方式能够较好地捕

获到删除数据Y并写入相关数据库日志表Y然后再通过视图或者别

的某种可操作的方式将捕获到的变化同步到数据仓库当中去。

这种方式的优点是ETL同步效率较高Y不需要修改业务系统表结构Y

可以实现数据的递增加载缺点是业务系统数据库版本与产品不统

一Y难以统一实现Y实现过程相对复杂Y并且需深入研究方能实现

这种方式也通过第三方工具实现Y但是Y一般都是商业软件Y费用

较高。

喜欢离语请大家收藏:()离语

热门小说推荐
天降萌宝:爹地宠妻无度

天降萌宝:爹地宠妻无度

作者顾凉的经典小说天降萌宝爹地宠妻无度最新章节全文阅读服务本站更新及时无弹窗广告小说一场意外,她不仅失了身,肚子里还多了球。六年后,却突然跳出多个男人要做她孩子的爹?从小一起长大的青梅竹马我会好好照顾你们母子。A国的第一富商慕御寒老婆,小宝需要一个爸爸。孩子是我生的,跟你有什么关系?她一脸气愤。男人却微眯着眼,似笑非笑没有我的种,你如何生的出来?乖,我们再生一个...

盛宠小丫鬟

盛宠小丫鬟

小人嫉妒,仇人眼红?不要紧,看小丫鬟如何努力发家致富,赚赚赚,买买买,叫她们更眼红。小日子过得和和美美,喝着奶茶吃着火锅,hold住整个国公府!...

将神婿

将神婿

将神婿是由作者混过的小狼写的一本都市生活类小说,情节精妙绝伦,扣人心弦,值得一看。将神婿精彩章节节选你是蒋依依的父亲吗你女儿误喝了百草枯,正在我们医院的重症监护室洗胃,情况非常危急,你作为她的家长赶紧来市人民一医院将病危通知书签了。...

我的非凡人生江浩王佳妮

我的非凡人生江浩王佳妮

母亲告诉我,父亲在我很小的时候就去世了。直到有一天,我的电话响起,对方告诉我,他是我父亲helliphellip...

农家娇俏小媳妇

农家娇俏小媳妇

黄小灯完婚没圆房,遇上的王爷当了皇上。皇上要她进后宫,她偏回乡下嫁给如意郎。...

毒医悍妃逆天下

毒医悍妃逆天下

作者凤唯心的经典小说毒医悍妃逆天下最新章节全文阅读服务本站更新及时无弹窗广告小说她本是华夏鬼手神医,佣兵界的活阎王,一朝穿越,沦为人人厌弃的废材傻女。父母枉死,叔婶歹毒,姐妹算计,统统不叫事。她一手银针活死人,肉白骨,见谁不爽就扎谁!炼丹驭兽信手拈来,脚踩渣男,狂撕白莲。终于,无人不知叶家七小姐心狠手辣,避之不及。唯独某个狗男人,一言不合就往她身上扑。叶轻羽点了点他的狗头,你当真不怕我?宫墨渊邪肆一笑,答非所问,要不,你给本尊生个小狗玩吧?...

每日热搜小说推荐