分库分表 - 小蔡的Java加油站

项目 项目一总结：（八）排行榜功能及海量数据存储

排行榜在我的Online学习平台项目中实现了积分功能并且也将用户的积分明细保存到了数据库积分的高低排名就是排行榜那么排行榜该如何实现呢基于数据库实现排行榜是基于积分实现的积分明细表如下uploadbadecbbfcbcdepng产生的数据如下uploadaecaafbepng要想形成排行榜我们在查询数据库时需要先对用户分组再对积分求和最终按照积分和排序Sql语句是这样sqlSELECTuseridSUMpointsFROMpointsrecordGROUPBYuseridORDERBYSUMpoints查询结果如下uploadbbbefeadcaapng面对的问题每个用户都可能会有数十甚至上百

2024-01-24 15:21 1130 0 Redis Redis优化分库分表定时任务

项目 项目一总结：关于分库分表（海量数据如何存储）

海量数据存储策略对于数据库的海量数据存储方案有很多常见的有uploadfdedaafbeeadbfpng分区表分区Partition是一种数据存储方案可以解决单表数据较多的问题MySQL开始支持表分区功能数据库的表最终肯定是保存在磁盘中对于InoDB引擎一张表的数据在磁盘上对应一个ibd文件如图我们的积分榜单表对应的文件uploadffdabcbcadbcecpng如果表数据过多就会导致文件体积非常大文件就会跨越多个磁盘分区数据检索时的速度就会非常慢为了解决这个问题MySQL在版本引入表分区功能简单来说就是按照某种规则把表数据对应的ibd文件拆分成多个文件来存储从物理上来看一张表的数据被拆到多

2024-01-02 16:10 1162 0 分库分表