MySQL分割数据
引言一般来说讲,提到数据拆分,可以归结为两个层面:一是垂直拆分,二是水平拆分。这里我们来讨论下垂直拆分。垂直拆分是以数据库、表、列等为单位进行拆分的方法。正文MySQL里垂直拆分可以细分为:垂直拆库(...
2024.11.15“分组查询”可以说是相当常见的SQL查询语句,对于MySQL数据库而言,其实现分组查询的关键字为GROUP BY,而在使用GROUP BY期间一般还会有其他的聚合函数配合使用,比如计数用的COUNT(*),统计数值和用的SUM(*),而本文要介绍的是另一种类型的“分组查询”,即分组查询出来后再查询出每一组的前N条数据。
为了方便诸位理解,还是直接举一个实际的案例吧:存在两个数据库表,一个叫课程表course,另一个叫课程类型表course_type,这两个数据库表的DDL(数据库表字段定义)如下所示:
(1)课程类型表:
CREATE TABLE `course_type` (`id` int(11) NOT NULL AUTO_INCREMENT,`name` varchar(255) CHARACTER SET utf8mb4 NOT NULL COMMENT ‘类型名‘,PRIMARY KEY (`id`)) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT=‘课程类型‘;(2)课程信息表:
CREATE TABLE `course` (`id` int(11) NOT NULL AUTO_INCREMENT,`type_id` int(11) NOT NULL COMMENT ‘类型id‘,`name` varchar(255) CHARACTER SET utf8mb4 DEFAULT NULL COMMENT ‘课程名称‘,`scan_total` int(255) DEFAULT NULL COMMENT ‘课程浏览量‘,PRIMARY KEY (`id`)) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT=‘课程信息表‘;现在的需求为:找出每种课程类型中课程浏览量排名前3的课程记录 ,而这种场景经常可以在一些在线教育平台中见到,如下图所示为某个在线教育平台中“后端开发”这一大类型里面每种小分类的课程销量排行榜:
接下来,我们将找寻各种方式去实现这一功能需求!
(1)传统的实现方式一般是采用Java代码的方式先查询出每种课程类型数据,然后再遍历每一种课程类型,在课程表中根据课程类型匹配查询出浏览量前3的课程数据,即 type_id=xx order by scan_total desclimit 3;
其代码实现方式在这里就不贴出来了,感兴趣的小伙伴可以自己动手撸一撸!
此种实现方式最终固然可以实现功能需求,但是,有一个不好的地方在于需要在遍历每一种课程类型时不断发出查询课程数据列表的SQL,如果课程类型有10几种,而每一种需要取几十、甚至几百条数据,那将耗费很大的资源(建立数据库链接是需要耗资源的:内存、CPU、网络、磁盘…)
(2)因此,我们转而求其次,采用SQL查询一次性来搞定!在进行实操之前,debug建议诸位先打开Navicat尝试撸一撸,然后再回过头来看看debug提供的实现方式.
为了实现这种功能,我们需要转换下思考的角度:仔细阅读需求,可以得知它是需要我们查找出每种课程类型下课程浏览量前3的课程列表,其实就是找出每个课程在同种课程类型下的浏览量排名,最后再找出每种课程类型下排名前3的课程!
如下图所示为课程信息表,其中,最后一列为debug自己计算出的每个课程在同种课程类型下课程列表中的排名,即top值:
朝着上图这个方向努力了,我们撸出了相应的SQL,如下所示:
SELECTa.id,a.type_id,c.`name` AS typeName,a.scan_total,a.`name`,(SELECTCOUNT(b.id) FROMcourse AS bWHEREb.type_id = a.type_idAND b.scan_total > a.scan_total) AS topFROMcourse AS aLEFT JOIN course_type AS c ON c.id = a.type_idORDER BYa.type_id ASC,a.scan_total DESC;执行上述SQL后得到的结果如下图所示:
(3)到这里我们已经将每种类型下每个课程的排名top计算出来了,需要注意的是,在上图得到的结果中,因为Count(b.id) 得到的值可能为 0 ,因此0代表的就是第 1 名;
可能有些小伙伴还有些疑惑,为什么加个子查询就可以得到上图中的结果呢?其执行过程是怎么样的呢?OK,一图以蔽之,直接看下图相信就可以解答你心中的疑惑了:
(4)最后是直接在外层嵌一个大的查询,然后取排名值 top < 3 的数据列表,即可以得到实现功能需求,其完整的SQL如下所示:
SELECTt.*FROM(SELECTa.id,a.type_id,c.`name` AS typeName,a.scan_total,a.`name`,(SELECTCOUNT(b.id)FROMcourse AS bWHEREb.type_id = a.type_idAND b.scan_total > a.scan_total) AS topFROMcourse AS aLEFT JOIN course_type AS c ON c.id = a.type_idORDER BYa.type_id ASC,a.scan_total DESC) AS tWHEREt.top < 3执行上述SQL后即可以得到相应的结果,如下图所示:
至此,我们已经完成了本文开头提出来的功能需求;那……还有没有其他的实现方式呢?当然有,只不过其实现起来虽然不同,但是其本质思想跟本文开头debug提到的那样“计算出排名top值”是差不多的;
诺,这就是另外的实现方式,从SQL语句就可以看出来,它是上述第一种实现方式的变形:
SELECTt.*FROMcourse AS tWHERE(SELECTCOUNT(*)FROMcourse AS cWHEREc.type_id = t.type_idAND c.scan_total > t.scan_total) < 3ORDER BYt.type_id ASC,t.scan_total DESCOK,本文讲解到此介绍,打完收工,咱们下期再见!
总结
代码/数据库下载:本文涉及到的数据库建表语句DDL以及对应的测试数据案例 可私信暗号:1001
我是debug,一个相信技术改变生活、技术成就梦想 的攻城狮;如果本文对你有帮助,请三连哟~
引言一般来说讲,提到数据拆分,可以归结为两个层面:一是垂直拆分,二是水平拆分。这里我们来讨论下垂直拆分。垂直拆分是以数据库、表、列等为单位进行拆分的方法。正文MySQL里垂直拆分可以细分为:垂直拆库(...
2024.11.15如何查找重复行如何删除重复行如何查找多列上的重复行错误的查询语句几种正确的方法如何查找重复行第一步是定义什么样的行才是重复行。多数情况下很简单:它们某一列具有相同的值。本文采用这一定义,或许你对“重复...
2024.11.15大家好,今天我来分享一项MySQL数据库的高级技巧,即如何去除重复记录,让你的数据库变得清爽如新。重复记录不仅占用存储空间,还可能导致数据混乱和查询结果的错误。下面我将详细介绍如何使用MySQL语句去...
2024.11.121、如果id是自增的数字select*FROM表名WHEREid >= (selectFLOOR(MAX(id) * RAND())FROM表名)ORDER BYidLIMIT 10;2、如果id是随...
2024.11.151. MySQL查询慢是什么体验?大多数互联网应用场景都是读多写少,业务逻辑更多分布在写上。对读的要求大概就是要快。那么都有什么原因会导致我们完成一次出色的慢查询呢?1.1 索引在数据量不是很大时,大...
2024.11.12