MySQL社区

 找回密码
 注册

QQ登录

只需一步,快速开始

扫一扫,访问微社区

搜索
查看: 2576|回复: 1
打印 上一主题 下一主题

关于对数据量大的天表进行汇总的问题

[复制链接]
跳转到指定楼层
1#
发表于 2013-11-25 09:58:01 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
背景:
  对一个月的天表(即30张左右)进行汇总查询查询,比如:对一个用户,今天发表帖子20贴,那么今天的天表就会有20天记录!
然后对原始表进行天表汇总,大概有500W的用户数量,每个用户对应有发帖的次数。
那么要统计出每个用户每个月发送的帖子量有多少? 即对天表进行汇总。

怎么实现?不是纯SQL,可以用编程语言实现。

由于数据量太大,联表查询不合适,全部放到内存也不合适。 到底要怎么实现?求大神指教


例子:
表名: tiezi_20131101 tiezi_20131102 tiezi_20131103 tiezi_20131104 tiezi_201311**

结构: 用户名   发帖数
分享到:  QQ好友和群QQ好友和群 QQ空间QQ空间 腾讯微博腾讯微博 腾讯朋友腾讯朋友 微信微信
收藏收藏 分享淘帖 顶 踩
2#
发表于 2013-11-25 11:02:56 | 只看该作者
设计模式造就了你统计的麻烦,一个不是太好的办法,仅供你参考:
专门提供一台统计用机,或建立一个新数据库,把这些天表再合到一起(或一张表里),建立统计需要的索引,做后续统计...
或者考虑层级统计
您需要登录后才可以回帖 登录 | 注册

本版积分规则

QQ|申请友链|小黑屋|Archiver|手机版|MySQL社区 ( 京ICP备07012489号   
联系人:周生; 联系电话:13911732319

GMT+8, 2024-6-11 13:44 , Processed in 0.086876 second(s), 23 queries , Gzip On.

Powered by Discuz! X3.2

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表