数据统计刷新越来越慢

问答 / 2 / 10 / 创建于 1年前

我现统计的数据在是定时的更新到一个统计表里面去，也可以通过手动刷新。手动刷新，是for循环进行统计，然后更新统计，因为用户越来越多，我想用队列来进行实现刷新，但是这样刷新的话，不知道哪时候能刷新好，没有及时的反馈，大佬们是咋弄的

中文

课程读者 49 声望

暂无个人描述~

0 人点赞

从零开发一个电商项目，功能包括电商后台、商品 & SKU 管理、购物车、订单管理、支付宝支付、微信支付、订单退款流程、优惠券等

从零开始带你一步步开发一个 Go 博客项目，让你在最短的时间内学会使用 Go 进行编码。项目结构很大程度上参考了 Laravel。

推荐文章：

更多推荐...

博客

Tiny RDM - 您的极简Redis数据管理利器！高效、易用、快速部署。立即体验！🚀! 欢迎各位来尝鲜. 13 / 23 |

博客

乐融沃多商户商城现已完全开源 10 / 16 |

MySQL 8.0 官方手册翻译征集 10 / 14 |

面试 POPER 的后端开发工程师的离奇经历 38 / 104 |

分享创造

探讨一下大数据量的导出Excel 方案 11 / 57 |

博客

Dcat-admin 用 alpinejs 数据双向绑定 10 / 2 |

讨论数量: 10

Adachi

252 声望

延迟一天，每天凌晨更新

1年前评论

中文（楼主）

我是想解决这手动刷新，执行的用户太多了，放队列没有反馈这个的问题😁

小猪蹄子

203 声望

刷新啥玩意？一脸懵

1年前评论

小猪蹄子（作者）

@中文这种处理的话，为啥不最开始就把数据记录的总数加到总计表呢？是不是可以这样操作，把总计表总计更新的时间记录，点击手动刷新就只取总计更新时间到点击刷新这一段时间的记录

中文（楼主）

统计数据

小猪蹄子（作者）

@中文你的意思是，有单独的记录表，然后由开了定时任务去更新到一个总计表里面？

中文（楼主）

@小猪蹄子是的，还有一个功能就是现在管理者需要手动来刷新统计数据，但是单次请求更新用户很多就很慢一直在加载

seebyyu

课程读者 113 声望

最近有遇到过类似的问题。

我们用 mongodb 做数据临存
定时汇总数据到mongodb
同步至mysql时异步通知清空mongodb 里不需要在统计的相关数据.

1年前评论

redfish

26 声望

设置一个系统刷新时间间隔的阈值（保存一个带超时的redis key），用户请求刷新先看看存不存在key，存在的话就跳过刷新，直接返回数据，不存在就执行刷新，缓存key，定时执行刷新的任务也要查询key，不存在才执行刷新。
用户端最好显示最后更新时间，把刷新时间暴露给用户，用户决定要不要刷新，也解决用户需要反馈的问题。

1年前评论

不高兴就喝水

见习助教 34 声望

可以考虑换clickhouse

1年前评论

讨论应以学习和精进为目的。请勿发布不友善或者负能量的内容，与人为善，比聪明更重要！

帮助

数据统计刷新越来越慢

推荐文章：

社区赞助商

关于 LearnKu

资源推荐

服务提供商

其他信息

数据统计刷新越来越慢

推荐文章：

社区赞助商

关于 LearnKu

资源推荐

服务提供商

其他信息

请登录