阅读背景:

滴滴数据服务体系建设实践

来源:互联网 

什么是数据服务化

大数据开发的主要流程分为数据集成、数据开发、数据生产和数据回流四个阶段。数据集成打通了业务系统数据进入大数据环境的通道,通常包含周期性导入离线表、实时采集并清洗导入离线表和实时写入对应数据源三种方式,当前滴滴内部同步中心平台已经提供了MySQL、Oracle、MongoDB、Publiclog等多种数据源的数据采集能力;数据开发/生产,用户可以构建实时、离线两种数据仓库,并基于SQL、Native、Shell等多种任务方式下的数据建模;数据回流通过将离线数据导入OLAP、RDBMS等,以提升访问性能,下游服务直接访问该数据源进行数据分析、数据可视化。大数据开发的主要流程分为数据集成、数据开发、数据生产和数据回流四个阶段。数据集成打通




你的当前访问异常,请进行认证后继续阅读剩余内容。

分享到: