小说屋

手机浏览器扫描二维码访问

第290章 牛肉河粉(第3页)

全表删除插入方式

y是指每次抽取前先删除目标表

数据y抽取时全新加载数据该方式实际上将增量抽取等同于全量

抽取对于数据量不大y全量抽取的时间代价小于执行增量抽取的

算法和条件代价时y可以采用该方式。

这种方式的优点是对已有系统表结构不产生影响y不需要修改业务

操作程序y所有抽取规则由etl完成y管理维护统一y可以实现数

据的递增加载y没有风险

缺点是etl比对较复杂y设计较为复杂y速度较慢与触发器和时

间戳方式中的主动通知不同y全表比对方式是被动的进行全表数据

的比对y性能较差当表中没有主键或唯一列且含有重复记录时y

全表比对方式的准确性较差。

日志比对的方式是通过获取数据库层面的日志来捕获到变化的数据y

不需要改变源业务系统数据库相关表结构y数据同步的效率比较高y

同步的及时性也比较快y最大的问题就是不同数据库的日志文件结

构存在较大的差异性y实施分析起来难度比较大y同时y需要具备

访问源业务库日志表文件的权限y存在一定的风险性y所以这种方

式有很大的局限性。

日志比对方式中比较成熟的技术是cdc(change

data

capture)技术y

作用同样是能够捕获到上一次抽取之后产生的相关变化数据y当

cdc对源业务表进行新增更新和删除等相关操作的时就可以捕获

到相关变化的数据y相对于增量字段方式ycdc方式能够较好地捕

获到删除数据y并写入相关数据库日志表y然后再通过视图或者别

的某种可操作的方式将捕获到的变化同步到数据仓库当中去。

这种方式的优点是etl同步效率较高y不需要修改业务系统表结构y

可以实现数据的递增加载缺点是业务系统数据库版本与产品不统

一y难以统一实现y实现过程相对复杂y并且需深入研究方能实现

这种方式也通过第三方工具实现y但是y一般都是商业软件y费用

较高。

旧世废土  梦境,我与轩辕  萝莉控的万界之旅  大A爆涨,抄底娶回女明星  从忍界开始的游戏商人  出逃五年,她带两个萌宝杀回来了  厨神:我就炒个菜,咋就飞升了?  快穿:逍遥路人甲  被贬后,我自立为王  娇妻的谎言  全能学霸的养成系女友  你一男兵,混进女兵连当教官?  全家惨死?嫡女重生后冠绝京城  我在冷宫忙种田  航天首席重生1978  满级传球,从皇马解约成全能球王  女神拼命保护我,却不知道我最强  道之初境  八零:真千金回归后,宠冠京城!  山野小仙尊  

热门小说推荐
囤货百亿穿书后,异世种田养夫郎

囤货百亿穿书后,异世种田养夫郎

囤货百亿穿书后,异世种田养夫郎作家橙核梨完结  文案  双男主主攻1V1双洁  种田空间灵泉逃荒美食经商致富基建  萧戾在末世与围剿自己的异能者同归于尽,死后穿越至历...

师妹改修无情道 ,全师门跪地挽留

师妹改修无情道 ,全师门跪地挽留

前世,姜筱是个讨好型人格,对师兄师弟无微不至,对师尊敬仰有加,为了夺得他们的视线,姜筱和白莹莹争锋相对,落得个人人喊打,声名狼藉,被至亲之人杀害后!这一次姜筱重生归来,转身离开,入无情道!谁知,前世视她如舔狗的师兄弟们却开始哭着挽留!...

将门弃妇:你马甲又掉了

将门弃妇:你马甲又掉了

新婚之夜,丈夫撇下她,远赴边关,她心甘情愿为他照顾一家老小,没成想,三年后,丈夫功成名就回来,竟带回了白月光和私生子。薇薇,玉娘这些年,跟我在边关,吃了不少苦头,此次回来,你们好好相处。玉娘心思简单,又容易满足,不会与你争抢什么,你那些后宅手段,休要用在她身上!男人低沉带着警告的声音,响在耳畔,似惊雷般,让云薇清醒了过来。她陌生地望着眼前的丈夫。婆婆小姑妯娌,更是轮番上阵,要她大度一点,接纳丈夫的女人和私生子,她却毅然决然地提出和离。令李曜廷没想到的是,被他弃若敝履的妻子,转身就成了各国争抢的神医,还与当今摄政王,暧昧不清。没多久,她还一跃成为了母仪天下的皇后,李曜廷包括他的白月光,通通只能匐伏在她的脚下!...

盗墓:阳春白雪的辉光

盗墓:阳春白雪的辉光

新作品出炉,欢迎大家前往番茄小说阅读我的作品,希望大家能够喜欢,你们的关注是我写作的动力,我会努力讲好每个故事!...

从镖局开始修真

从镖局开始修真

穿越修真世界,成为一个边荒小城镖局中的趟子手,没有功法,资质不足,怎么办?咦?我的灵魂可以穿梭到一个仙侠游戏里当Boss!叮!获得基础吐纳术!叮!获得朝阳剑诀!叮!经验1oo!叮!晋级炼气一层!...

每日热搜小说推荐