当前位置:首页 > 科技数码

orderby 教你一招:orderBy排序优化

排序的方式index(索引排序,性能最佳)

尽可能使用索引字段来排序filesort(文件排序)2.1 双路排序

MySQL4.1 之前的版本,通过两次扫描磁盘,最终得到数据。先从磁盘中读取行指针和 order by 列,并对它们进行排序,然后扫描已经排好序的列表,按照列表中的值重新从列表中读出(再一次从磁盘中读),要对磁盘进行两次扫描,IO是很耗时的。2.2 单路排序

MySQL4.1 之后,增加的更优排序算法,从磁盘读取查询需要的所有列,按照order by列在buffer(缓冲区)对它们进行序,然后扫描排序后的列表进行输出,它的效率要更快一些,避免了第二次读取数据(从磁盘读)并且把随机IO变成了顺序IO,但是它会使用过多空间,因为它把每一行都保存在内存中了。不足:

在sort_buffer中,单路算法比双路算法要多占用很多空间,因为单路算法是把所有字段都取出,所以有可能取出的数据总大小超出了,sort_buffer(MySQL会给每个线程分配一块内存用于排序) 的容量,导致每次只能取 sort_buffer 容量大小的数据,进行排序(创建tmp文件,多路合并),排完再取出。sort_buffer容量太小,再排......从而多次IO操作,本想着省一次IO操作,反而导致了大量的IO操作,反而得不偿失。使用单路排序满足的条件:

1. 查询语句所取出的字段类型大小总和要小于max_length_for_sort_data2. 排序字段中不包含text和blob类型优化策略3.1 只query需要的字段

1. 当query的字段大小总和小于max_length_for_sort_data,而且排序字段不是TEXT|BLOB类型,会使用单路排序算法,否则使用多路排序算法。2. 两种算法的数据都有可能超出sort_buffer的容量,超出之后,创建tmp文件进行合并排序,导致多次的IO,但是使用单路排序的风险更大,所以要提高sort_buffer_size。3.2 尝试提高sortbuffersize

不管使用哪种算法,提高这个参数都会提高效率,要根据系统的自身能力去提高,因为这个参数是针对每个进程的。3.3 尝试提高maxlengthforsortdata

提高这个参数,会增加用改进算法的概率。但如果设置得太高,数据总容量超出sort_buffer_size的概率会增大,明显症状是高的磁盘IO活动和低的处理器使用率。实例数据表

*************************** *************************** Table: userCreate Table: CREATE TABLE `user` ( `id` int(10) unsigned NOT NULL AUTO_INCREMENT, `name` varchar(20) NOT NULL, `age` int(10) NOT NULL DEFAULT "0", `city` varchar(20) NOT NULL, `addr` varchar(50) DEFAULT NULL, PRIMARY KEY (`id`), KEY `idx_name_age_city` (`name`,`age`,`city`)) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4 COLLATE=utf8mb4_0900_ai_ciorder by能使用索引最左前缀

* select id,name,age,city from user order by name;* select id,name,age,city from user order by name,age,city;* explain select id,name,age,city from user order by name desc,age desc,city desc;如果where使用索引的最左前缀定义为常量,则order by 能使用索引

* select * from user where name = "zhangsan" order by age,city;* select * from user where name = "zhangsan" and age = 20 order by city;* select * from user where name = "zhangsan" and age > 20 order by age,city;不能使用索引进行排序

select * from user order by name,age,city;//query*字段select * from user order by addr;//非索引字段排序select * from user order by name,addr;//含有非索引字段select * from user where age = 20 order by city;//跳过了name字段,违反最左前缀法则select * from user where name = "zhangsan" order by city;//跳过了age字段,违反最左前缀法则select * from user where name = "zhangsan" order by age,addr;//含有非索引字段

1.《orderby 教你一招:orderBy排序优化》援引自互联网,旨在传递更多网络信息知识,仅代表作者本人观点,与本网站无关,侵删请联系页脚下方联系方式。

2.《orderby 教你一招:orderBy排序优化》仅供读者参考,本网站未对该内容进行证实,对其原创性、真实性、完整性、及时性不作任何保证。

3.文章转载时请保留本站内容来源地址,https://www.lu-xu.com/keji/486896.html

上一篇

jdx是什么快递 京东成立JDX事业部 智慧物流开放平台亮相

下一篇

赛门铁克招聘 赛门铁克宣布裁员和关闭一些设施

视图索引 怎么优化你的SQL查询?以PostgreSQL为例

  • 视图索引 怎么优化你的SQL查询?以PostgreSQL为例
  • 视图索引 怎么优化你的SQL查询?以PostgreSQL为例
  • 视图索引 怎么优化你的SQL查询?以PostgreSQL为例

GParted 开源磁盘分区工具 GParted

  • GParted 开源磁盘分区工具 GParted
  • GParted 开源磁盘分区工具 GParted
  • GParted 开源磁盘分区工具 GParted
信用卡盗用 为了防止信用卡盗刷 机器学习算法认出你是谁

信用卡盗用 为了防止信用卡盗刷 机器学习算法认出你是谁

(                                                            盗刷信用卡风险已经成为困扰全球银行信用卡部门的难题之一。仅以美国为例,美联储的支付调查报道显示,2012年全美信用卡支付总金额达到260亿美元,这其中未经授权的信用卡支付,也就是盗刷信用卡的金额高达61亿美元。对银行而言,衡量...

季逸超 做完浏览器和输入法,季逸超这次带来了一款搜索引擎Magi

季逸超 做完浏览器和输入法,季逸超这次带来了一款搜索引擎Magi

如果有一个初创团队告诉你,他们的创业项目是做一个搜索引擎,你会是什么反应?上周我就接到了这么一个项目,这款名叫Magi的搜索引擎背后的团队,是之前做猛犸浏览器和Rasgueadol的季逸超和他创立的Peak Labs。那么,Magi相比普通的搜索引擎有什么特别之处呢?简单点说,Magi是一个全新的自然语言搜索引擎+知识图谱服务。普通的搜索引擎,不...

谷歌查鸽 Google更新“鸽子”算法,离你最近的搜索对象将获得最高的排位

谷歌查鸽 Google更新“鸽子”算法,离你最近的搜索对象将获得最高的排位

这是谷歌继去年的“蜂鸟”之后又一次更新搜索引擎的算法,“鸽子”这个代号并非是谷歌官方的称谓,而是搜索引擎博客SEL自己起的代号。因为从2012年的“企鹅”开始,谷歌喜欢用一种鸟类来冠名自己的的搜索引擎算法更新。就像苹果之前用猫科动物来命名Mac OS版本一样。如果说“蜂鸟”是谷歌对搜索进行的一次外科手术。那么“鸽子”就是涂上了LBS药剂的贴膏。它...

安贷客 安贷客:贷款搜索引擎

  • 安贷客 安贷客:贷款搜索引擎
  • 安贷客 安贷客:贷款搜索引擎
  • 安贷客 安贷客:贷款搜索引擎
数据挖掘算法 腾讯孙国政:大数据挖掘和推荐算法最新进展

数据挖掘算法 腾讯孙国政:大数据挖掘和推荐算法最新进展

本站讯 9月8日消息,由CSDN主办的2012中国软件开发者大会今天在北京国家会议中心举行,本站作为合作门户在现场直播报道。腾讯首席科学家孙国政做了主题为“超大规模用户数据挖掘和推荐算法最新进展”的主题演讲。主持人:刚才蒋总PPT里有很多图,有一个共同特点都是指数系,这意味着速度越来越快,数据的增长不仅是多而且是越来越多,怎么样才能应对这样的问题...

社会化搜索引擎 Volunia:社会化搜索引擎

社会化搜索引擎 Volunia:社会化搜索引擎

Volunia搜索首页截屏Volunia搜索结果界面截屏。页面上方会列出搜索过该关键词的用户网站名称:Volunia(http://www.volunia.com)上线日期:2012年6月14日产品类型:社会化搜索引擎公司及创始团队:公司在意大利,其创始人兼CEO Mariano Pireddu曾在电信领域有丰富经验。国内竞品:云云网本站讯 6月...