百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术分类 > 正文

经常使用的order by 和 group by你了解吗?filesort你了解吗?

ztj100 2024-10-28 21:12 24 浏览 0 评论

1. 案例

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' AND position = 'dev' ORDER BY age

最左前缀法则:中间字段不能断,因此查询只用到了name索引,从key_len也能看出

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' ORDER BY position

从key_len看出,只用到了name索引,由于用了position排序,跳过了age,出现了Using filesort

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' ORDER BY age,position

查看只用到索引name,age和position用于排序

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' ORDER BY position,age

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' AND age = 18 ORDER BY position,age

Extra中未出现Using filesort,因为age是常量,排序中被优化了,所以索引未颠倒,不会出现Using filesort

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' ORDER BY age ASC, position DESC

虽然排序字段列和索引顺序一致,且order by默认升序,这里position desc变成了降序,导致索引的排序方式不同,从而产生Using filesort,MySQL8以上支持这种

2. 总结

  • MySQL支持两种方式排序filesort和index,Using index只MySQL扫描索引本身完成排序,index效率高,filesort效率低
  • order by满足两种情况会使用Using index
  • order by语句使用索引最左前缀列
  • 使用where子句与order by子句条件列组合满足最左前缀列
  • 尽量在索引列上完成排序,遵循索引建立的顺序
  • 如果order by的条件不在索引列上,会产生Using filesort
  • 能用覆盖索引就用覆盖索引
  • group by 和 order by类似,就是先排序后分组遵循最左前缀法则

3. Using filesort

filesort文件排序方式

  • 单路排序:一次性取出满足条件行的所有字段,然后在sort buffer中进行排序;用trace工具可以看到sort_mode信息里显示< sort_key, additional_fields >或者< sort_key,packed_additional_fields >
  • 双路排序(回表排序模式):根据相应条件取出相应的排序字段可以直接定位行数据的行ID,在sort buffer中排序,排完序后再次取回需要的字段,用trace工具可以在sort_mode中看到< sort_key, rowid >

MySQL通过比较默认系统值max_length_for_sort_data(默认1024字节)的大小和需要查询的字段总大小来判断使用那种模式

  • max_length_for_sort_data > 查询字段总长度 , 使用单路排序模式
  • max_length_for_sort_data < 查询字段总长度, 使用双路排序模式

单路排序详细过程:

  1. 从索引name找到第一个满足 name = ‘zhuge’ 条件的主键 id
  1. 根据主键 id 取出整行,取出所有字段的值,存入 sort_buffer 中
  1. 从索引name找到下一个满足 name = ‘zhuge’ 条件的主键 id
  1. 重复步骤 2、3 直到不满足 name = ‘zhuge’
  1. 对 sort_buffer 中的数据按照字段 position 进行排序
  1. 返回结果给客户端

双路排序详细过程:

  1. 从索引 name 找到第一个满足 name = ‘zhuge’ 的主键id
  1. 根据主键 id 取出整行,把排序字段 position 和主键 id 这两个字段放到 sort buffer 中
  1. 从索引 name 取下一个满足 name = ‘zhuge’ 记录的主键 id
  1. 重复 3、4 直到不满足 name = ‘zhuge’
  1. 对 sort_buffer 中的字段 position 和主键 id 按照字段 position 进行排序
  1. 遍历排序好的 id 和字段 position,按照 id 的值回到原表中取出 所有字段的值返回给客户端

单路排序会把查询到的字段信息全部放到sort buffer中,而双路排序只会把主键和需要排序的字段放到sort buffer中,然后通过主键回表查询

如果MySQL内存配置小且无法增加,可以把max_length_for_sort_data 调小,去选择双路排序,sort buffer一次可以放更多排序值

单路排序是从内存sort buffer去拿数据,要快于从磁盘中拿数据

相关推荐

这个 JavaScript Api 已被废弃!请慎用!

在开发过程中,我们可能会不自觉地使用一些已经被标记为废弃的JavaScriptAPI。这些...

JavaScript中10个“过时”的API,你的代码里还在用吗?

JavaScript作为一门不断发展的语言,其API也在持续进化。新的、更安全、更高效的API不断涌现,而一些旧的API则因为各种原因(如安全问题、性能瓶颈、设计缺陷或有了更好的替代品)被标记为“废...

几大开源免费的 JavaScript 富文本编辑器测评

MarkDown编辑器用的时间长了,发现发现富文本编辑器用起来是真的舒服。...

比较好的网页里面的 html 编辑器 推荐

如果您正在寻找嵌入到网页中的HTML编辑器,以便用户可以直接在网页上编辑HTML内容,以下是几个备受推荐的:CKEditor:CKEditor是一个功能强大的、开源的富文本编辑器,可以嵌入到...

Luckysheet 实现excel多人在线协同编辑

前言前些天看到Luckysheet支持协同编辑Excel,正符合我们协同项目的一部分,故而想进一步完善协同文章,但是遇到了一下困难,特此做声明哈,若侵权,请联系我删除文章!若侵犯版权、个人隐私,请联系...

从 Element UI 源码的构建流程来看前端 UI 库设计

作者:前端森林转发链接:https://mp.weixin.qq.com/s/ziDMLDJcvx07aM6xoEyWHQ引言...

手把手教你如何用 Decorator 装饰你的 Typescript?「实践」

作者:Nealyang转发连接:https://mp.weixin.qq.com/s/PFgc8xD7gT40-9qXNTpk7A...

推荐五个优秀的富文本编辑器

富文本编辑器是一种可嵌入浏览器网页中,所见即所得的文本编辑器。对于许多从事前端开发的小伙伴来说并不算陌生,它的应用场景非常广泛,平时发个评论、写篇博客文章等都能见到它的身影。...

基于vue + element的后台管理系统解决方案

作者:林鑫转发链接:https://github.com/lin-xin前言该方案作为一套多功能的后台框架模板,适用于绝大部分的后台管理系统(WebManagementSystem)开发。基于v...

开源富文本编辑器Quill 2.0重磅发布

开源富文本编辑器Quill正式发布2.0版本。官方TypeScript声明...

Python之Web开发框架学习 Django-表单处理

在Django中创建表单实际上类似于创建模型。同样,我们只需要从Django类继承,则类属性将是表单字段。让我们在myapp文件夹中添加一个forms.py文件以包含我们的应用程序表单。我们将创建一个...

Django测试入门:打造坚实代码基础的钥匙

这一篇说一下django框架的自动化测试,...

Django ORM vs SQLAlchemy:到底谁更香?从入门到上头的选择指南

阅读文章前辛苦您点下“关注”,方便讨论和分享,为了回馈您的支持,我将每日更新优质内容。...

超详细的Django 框架介绍,它来了!

时光荏苒,一晃小编的Tornado框架系列也结束了。这个框架虽然没有之前的FastAPI高流量,但是,它也是小编的心血呀。总共16篇博文,从入门到进阶,包含了框架的方方面面。虽然小编有些方面介绍得不是...

20《Nginx 入门教程》使用 Nginx 部署 Python 项目

今天的目标是完成一个PythonWeb项目的线上部署,我们使用最新的Django项目搭建一个简易的Web工程,然后基于Nginx服务部署该PythonWeb项目。1.前期准备...

取消回复欢迎 发表评论: