可指定任意时间段查询网站流量统计数据的问题-问答-阿里云开发者社区-阿里云

开发者社区> 问答> 正文

可指定任意时间段查询网站流量统计数据的问题

2016-02-29 18:25:35 3430 1

简单需求:最近在做一个数据统计的项目,要求要统计的最小单位是分钟,类似统计网站的PV这样子,后台要求能看到某一天的某个小时或几个小时内每分钟的量的走势...等等,大家做过统计应该是知道的,我现在的设计是利用redis分布顶前端的访问记录存储,然后通过配合mysql持久记录历史数据,现在我的瓶颈在于mysql的设计上
大致的表设计是这样的:表名:test_pv 字段:id day hour minute1 ... minutes60
通过day去利用mysql分区为365个(这里大家建议一下是利用Range,list,hash中的那个比较好?)
还有就是此表的索引和分区上需要注意什么,就是希望高手给与设计上一些实际性的建议,网上的资料我已经通遍了,就是想大家给出一些指正和设计上的合理性的建议

取消 提交回答
全部回答(1)
  • 落地花开啦
    2019-07-17 18:50:46

    这是我一些个人想法,不知道是否合理。选择用哪一个,主要要结合你的统计的需要。

    1. 不一定要分为365个,分成这么多分区,访问时去扫描的分区就多了,那会增加IO开销。
    2. 如果经常进行环比,比如连续几天,或者连续的某两天进行对比,那range,list好一些,因为相你的分区相对连续,那可以减少IO.
    3. 如果是经常进行同比,比如这个月的某天与上个月的某天,那可以用hash,函数可以自己定义,可以将可能同时访问的数据放在同一分区中,减少IO.
    4. 另外,不知道统计显示是用什么来做的?...目前我也在做一个类似的监控系统,我用rrd4j 做显示。
      另外,用explain将你最常用的查寻打印出来看看,如果每个查询要涉及 的分区 少的话,那分区 有优势,否则就慢了
    0 0
相关问答

2

回答

如何用SQL查询距当前时间6个月以前的数据?

2021-10-13 22:58:12 663浏览量 回答数 2

1

回答

JAVA利用多线程实现批量插入数据时,tomcat会卡死掉:报错

2020-06-07 14:10:45 683浏览量 回答数 1

1

回答

[@徐雷frank][¥20]saas平台数据库设计

2018-11-23 15:14:00 2006浏览量 回答数 1

0

回答

关于网站流量

2018-08-29 11:07:56 393浏览量 回答数 0

1

回答

网站流量有问题

2018-02-03 17:42:25 477浏览量 回答数 1

1

回答

关于 web项目运行过程中的疑惑,服务器运行时间长就会现保存数据出现奇怪的异常 问题

2016-03-04 15:16:39 5350浏览量 回答数 1

1

回答

网站流量统计系统,如何设计数据表????

2016-02-15 10:27:25 5754浏览量 回答数 1

7

回答

阿里云的虚拟主机可以通过htaccess文件设置多个网站吗?

2015-11-17 11:30:55 14133浏览量 回答数 7

3

回答

虚拟主机怎么查看.htaccess文件

2015-11-17 09:51:33 3516浏览量 回答数 3

4

回答

备案时间广东东莞地区个人网站提交备案时间反馈求跟帖

2014-08-29 12:03:33 8260浏览量 回答数 4
+关注
落地花开啦
喜欢技术,喜欢努力的人
0
文章
7824
问答
问答排行榜
最热
最新
相关电子书
更多
低代码开发师(初级)实战教程
立即下载
阿里巴巴DevOps 最佳实践手册
立即下载
冬季实战营第三期:MySQL数据库进阶实战
立即下载