最近在做一个项目，其需求很普通，很常见，就是在常规业务中统计相应的数据，产生统计分析值。这个需求之所以复杂，主要是其中统计所需要的数据都是来源于较大表（单表一年数量级在4亿上）。直接使用SQL查询并完成基础数据统计，需要关联两张这样的达表查询，这样的数据量使用这种方法绝对是会被DBA提刀砍的（我们的DBA团队也是行业里算得上数的，砍人这个方面个个也都是熟手），这个已经不是通过SQL优化或是索引能完成的事情，单独看这一个SQL，IO就能达到2400，在万级以上的用户时，稍微有点并发数据请求，就能可能导致数据库高load，DB处理不过来。 最近在做一个项目，其需求很普通，很常见，就是在常规业务中统计相应的数据，产生统计分析值
阅读背景：
大数据量情况下数据统计分析思路
来源：互联网
分享到：
