手机浏览器扫描二维码访问
一系列重要的功能Y包括过滤排序附加数据生命周期管理和审
计等表6-4给出了每个功能的解释。
变化分发机制变化分发机制负责把变化分发到变化的消费者?通
常是ETL程序?那里变化分发机制可以支持一个或多个消费者Y并且提
供了灵活的数据分发方式Y包括推(push)或拉(pull)的方式Pull方式需要
消费者周期性地发送请求Y通常采用标准接口实现Y比如ODBC或JDBC
Push方式需要消费者一直监听和等待变化的发生Y一旦捕捉到变化Y就立
刻转移变化的数据Y通常采用消息中间件来实现变化分发机制的另一个
重要功能就是提供动态返回和请求旧的变化的能力Y从而满足重复处理和
恢复处理等任务。
变化数据捕捉技术有两个典型的应用场景X面向批处理的CDC
?
pullCDC?和面向实时的CDC?
pushCDC?
1.面向批处理的CDC
在这种场景中YETL工具周期性地请求变化Y每次都接收批量数据Y
这些批量数据是在上次请求和这次请求之间所捕捉到的变化变化
分发请求可以采取不同的频度Y比如一天两次或每隔15分钟1次。
对于许多组织而言Y提供变化数据的一种比较好的方式是以数据表的记
录的形式表示这种方式可以使ETL工具通过标准接口?比如ODBC?的
方式无缝地访问变化数据CDC则需要维护上次变化分发的位置和分发
新的变化
这种应用场景和传统的ETL很相似Y不同的是YpullCDC只需要转移变化
的数据Y并不需要转移所有的数据Y这就极大地减少了资源消耗Y也消
除了传统ETL过程的宕机时间。
面向批处理的CDC技术简单Y很容易实现Y因为它和传统的ETL很相似Y
并且使用现有的技术当企业对时间延迟以分钟或小时来进行衡量时Y
采取这种方式比较可行。
这种场景满足零延迟的要求Y变化分发机制一旦探测到变化Y就把变化
push给ETL程序Y这通常是通过可靠的传输机制来实现的Y比如事件分发
机制和消息中间件?如MQSeries?
叶峰一踏上官梯就遇到两类险情一是多种危险的感情,二是各种惊险的官斗。叶峰三十六岁就被提拔为县教育局副局长,从报到那天起就被卷入这两种险情的惊涛骇浪中。他是草根出生,却有顽强的意志和搏击风浪的能力,他像一叶小舟在惊险莫测的宦海里沉浮出没,劈波斩浪,扬帆远航,步步高升。...
阴错阳差中,仕途无望的宋立海认识了神秘女子,从此一步步走上了权力巅峰...
性格嚣张的林飞扬走马上任镇委书记当天就得罪了顶头上司,让大领导颜面无存,差点被就地免职,且看这个嚣张到骨子里的家伙如何凭借孙子兵法和三十六计勇闯重重危机,智破层层陷阱,在官场上混得风生水起,扶摇直上…...
十级官路,一级一个台阶。刘项东重生归来,从乡镇城建办主任起步,把握每一次机会,选对每一次抉择,一步步高升。穷善其身,达济天下。为民谋利更是他的追求。小小城建办主任,那也是干部。且看刘项东搅动风云,在这辉煌时代里弄潮而上,踏上人生巅峰。...
草根男人赵潜龙怀揣为民之念,投身仕途。且看他如何一路横空直撞,闯出一条桃运青云路,醒掌绝对权力醉卧美人膝...
妻子背叛,对方是县里如日中天的副县长!一个离奇的梦境,让李胜平拥有了扭转局势的手段!即将被发配往全县最穷的乡镇!李胜平奋起反击!当他将对手踩在脚下的时候,这才发现,这一切不过只是冰山一角!斗争才刚刚开始!...