付费寻找一位精通 Mysql 的技术牛帮忙设计升级数据库,以解决时段数据生成、查询、保存的效率问题。
我们自己在做广告投放,需要统计广告消耗、成效相关的成效数据
目前我们自己是使用求差的方式来计算当前小时的数据,并且按小时保存的数据表内。
等查询时,在通过查询数据表,筛选时段数据,做求和并且展示出来
在数据量级比较小的时候,这种方式开发简单,实现效率也高,但是现在随着时间的推移,广告数量已经增加到数十万级别。
等于说每个小时要生成数十万条数据,长期累月的处理下来,绝对会出一些问题。
目前整个数据库内,每小时的广告数据生成需要13分钟左右。。。
能力有限,需要找技术牛帮忙设计升级下数据库,用来解决时段数据生成、查询、保存的效率问题。
优先使用 Mysql 来解决,但是我们也不排除使用其他数据库来解决这个问题。
目前愿意支付 5000 来解决这个问题,提供思路就行,不需要去写代码。
有兴趣的可以联系我 QQ76762
关于 LearnKu
有诚意 :+1:
PPT 大佬们快出来接活了
单日百万数据量,还在单表查?不管如何优化都没搞,当数据量庞大以后....
上Redis和mycat可以 吗?
提供了思路不给钱怎么办 :joy:
目标规模是多少?
MySQL 不适合做 OLAP,建议上 Clickhouse!楼主这 QQ 号真牛逼
es 搞起啊
kafka + ClickHouse解决吧
单点数据库肯定是不合适的,从表的设计上突破不了单点的问题。
上clickhouse吧
用阿里云套件 mns多条任务队列执行不同的查询计算,存储tablestore,区分时间段小时、天、月、年的不同存储落职,查询就可以了
我记得我们公司之前的广告业务是用kafka 存数据,消费到es(后来换成了clickhouse),广告展示的时候用的Cassandra