阅读背景:

大数据量同步方案之全量同步改为增量同步解决方案

来源:互联网 

背景描述:

  在一些大数据运用场景中,由于上游数据每天都在变化着,在需要用这些数据的下游系统需要每天刷新这些变化的数据,当数据量小时候,简单粗暴的方式就是每次全量更新数据,但随着业务的增长,数据量成几何方式增长时(达到亿级别甚至更多),每次的更新工作将是耗时耗力的,也是业务方无法忍受的。此时,就需要一种解决方案变全量同步为增量同步。  在一些大数据运用场景中,由于上游数据每天都在变化着,在需要用这些数据的下游系统需要每天




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: