当前位置:编程学习 > JAVA >>

上亿级数据量的处理!!!请高手支招

问题是这样的,有个log流水表。里面有上亿的数据量。针对这个log有一个统计功能。我试过把该表按时间戳分成年、月、周的表  列如:2011年log_2011,2011年1月log_2011_1,然后根据时间戳判断去查询某一个表,这样满足了单查一月的功能,但是跨月跨周的就没有解决掉。想请教下各位大大,你们通常都是是怎么处理这种log表的。  海量数据处理 --------------------编程问答-------------------- 分表不如分区+分区索引,性能基本一样,但是不需要程序去判断找哪个表。

统计数据量很大,结果集很小,对实时性不是100%要求就创建物化视图。
补充:Java ,  Web 开发
CopyRight © 2022 站长资源库 编程知识问答 zzzyk.com All Rights Reserved
部分文章来自网络,