首页
题库
公司真题
专项练习
面试题库
在线编程
面试
面试经验
AI 模拟面试
简历
求职
学习
基础学习课
实战项目课
求职辅导课
专栏&文章
竞赛
我要招人
发布职位
发布职位、邀约牛人
更多企业解决方案
AI面试、笔试、校招、雇品
HR免费试用AI面试
最新面试提效必备
登录
/
注册
在看机会的候选人很痴心
郑州轻工业大学 Java
发布于河南
关注
已关注
取消关注
@Error小志Exception:
SQL优化 硬控面试官半小时
烫
SQL优化可以串联 MySQL 90%的知识点,讲的好的话,可以让面试官眼前一亮,是很加分的,特别是对于那些本身就很懂MySQL的面试官,基本这次面试就稳了。这里我总结了一些SQL优化的思路,供大家参考,基本覆盖99%的场景了。PS: 如果对你有用的话,请不要吝啬你的花花,这是我分享的动力[羞涩] 如何定位慢SQL(场景)业务场景执行时间非常久,触发网关超时使用以下命令分析慢SQL日志:`mysqldumpslow /path/to/your/slow-query.log`优化思路增删查改对于插入可以把多个语句合并成一个语句批量处理。对于删除,因为删除是假删除(减少B+树合并访问磁盘的开销),如果有太多地方没有使用,B+树层数虚高,增加了访问磁盘的速度,并且全表扫描也会扫描到很多无用数据,可以在数据库空闲的时候通过alter table来重建表使数据排列更紧凑对于频繁修改的数据利用最左匹配原则减少索引数量如果有唯一索引可以考虑改成普通索引,避免修改时为了维护唯一性导致change buffer失效。对于查询: 使用缓存, 早期mysql开启查询缓存,mysql8.0没有查询缓存,业务层可以使用缓存例如redis;或者可以把一些特殊的语句定期执行然后保存,后面查保存的数据,不用执行sql,比如我之前做的一个预测成本的功能,每月只需要预测一次,那就可以写一个定时任务每个月定时预测一次保存到另一张表,后续查询直接查这张表就可以了,就不用执行复杂SQL了。对于大数据量的场景,可以读写分离,分库分表分析执行计划EXPLAIN分析SQL语句的执行计划,主要关注以下几个字段如果type为ALL,说明进行了全表扫描,考虑是否可以通过增加索引来优化。分析possible_keys (可能使用到的索引)和key(实际使用的索引),确保相关的列上建立适当的索引并且正确选取索引。使用覆盖索引来避免回表使用复合索引来提高多条件查询的性能(索引下推)。利用最左匹配原则尽可能的建立更少的索引分析有没有没有正确选取索引:可能会错误的使用全表扫描的场景:对字段使用了函数:将函数写在判断条件上面,避免对字段使用函数。字段隐式类型转换( str->int, 字段使用了utf8但是字符是utf8mb4),需要保证查询目标与字段类型一致如果没有出现上述问题,还有一种解决思路:使用force index强制使用索引 | order by .. limit 1。因为选取索引是优化器的工作,优化器会分析选取索引的扫描行数加上回表的代价是否比主键全表扫描少,这里采用采样分析,因为全表分析代价太大,在多个事务的时候,因为是假删除而且多个事务的时候MVCC多版本数据在undo-log里面,这个时候采样分析会把已经删除的数据也考虑到总量里面去,比如实际上总量是1000行,考虑成了2000行导致考虑的扫描行数翻倍。所以采样分析针对高并发和大数量的场景是非常不准的MySQL临时表, CTE会破坏索引结构(例如group后使用了临时表):想办法优化掉临时表,或者减少临时表的查询、JOIN操作rows字段,表示查询的结果集行数。我们要尽可能的减少rows的数量,以下是一些思路确保查询条件尽可能具体, 例如在WHERE子句中使用更严格的条件。对于确定的数量(例如只需要查询一个结果)使用limit in 替换成 exists,in 是 双重匹配,exists匹配到了一个后就会提前返回count字段看可不可以替换成count( * ), count(1)Extra字段,记录一些额外信息如果有Using filesort,表示使用了文件排序。可以考虑给需要排序的字段加上索引,因为索引使用的B+树本来就是排序好的,可以减少排序时间。 或者可以把单次排序的内存sort_buffer_size设置大一点,因为排序是取磁盘里的部分数据到内存进行排序最后合并, 把单次排序内存设置大一点这样减少IO次数如果有Using Join Buffer, 说明Join没有使用索引。没有索引join会用到Block Nested-Loop Join算法,时间复杂度很高,可以看作两层遍历,实际上更复杂一点,考虑到数据很多不能全读到内存里,mysql使用了join_buffer来存一部分数据,可能会因为 join_buffer 不够大,需要对被驱动表做多次全表扫描。在需要Join的字段加上索引其它思路对于某些语句正常执行的时候很快,偶尔执行时间会很长,很难复现。这是因为触发了flush操作,我们应该尽可能的去减少flush操作触发的次数。如果频繁触发flush操作,可能是脏页比例过高,可以查看脏页比例,脏页比率控制策略主要与redo-log大小和写盘速度(innodb_io_capacity)有关,我们需要设置合理的redo_log大小以及符合实际的预期写盘速度(可以通过 fio 这个工具来测试)。我们也可以想办法减小单次flush操作的时间,InnoDB有个策略是刷某一页时发现这一页旁边的页也是脏页也会去刷旁边的页,这样连带着一片都刷进去,导致一次flush操作可能会耗费很长的时间,我们可以通过innodb_flush_neighbors来控制这个行为,值为 1 的时候会有上述的“连坐”机制,值为 0 时表示不找邻居,自己刷自己的。设计表的时候, 使索引的长度尽可能小,页的大小是固定的,根据索引长度计算B+树阶数,阶数越小,每页的节点数越多,B+数深度越小,访问磁盘次数越少;对于事务,使修改的顺序尽可能靠后,因为修改会持有行锁,会等事务提交后再释放锁,这样可能会阻塞其他事务,修改靠后就可以更晚的持有这些锁,这样就可以减少阻塞,也可以减少死锁发生的概率。大数据量分页查询的优化,改成使用id:分页的原理是查询到第一个满足条件的数据行后往后一页一页遍历,如果改成id的话,就可以使用索引进行优化,直接定位到需要查询的那一页CTE物化问题,部分数据库(如MySQL)将CTE处理为临时表时不会保留原表索引, 解决方法:修改逻辑避免使用CTE/使用临时表替换CTE, 并在临时表上加索引(空间换时间)CTE(Common Table Expression 公共表表达式) 是一种在 SQL 查询中定义临时结果集的方法。它通过 WITH 子句创建,可以:简化复杂查询的可读性支持递归查询多次引用同一结果集基础语法WITH cte_name (column1, column2, ...) AS ( -- 子查询 SELECT ...)SELECT * FROM cte_name;我的面试思路一般结合一两个点来讲比如 Join 没有使用索引,耗时很长,但是后续分析发现Join字段上建立了索引,为什么Join没有选取索引呢?最终分析发现了以下原因:临时表破坏了原表的索引结构CTE物化问题破坏了原表的索引结构再针对上述问题讲解一些优化思路。PS: 此文章适合有一定SQL优化基础的人进阶使用,对于小白可能不是很友好,如果你有什么疑问的话,可以在评论区我们相互交流一下。(因为每个知识点都要展开讲的话基本覆盖了90%MySQL知识点了,篇幅太长)最后,如果对你有用的话,一定不要忘记送个花花呀[羞涩],这么高质量又免费的帖子很少了[赞]
点赞 304
评论 51
全部评论
推荐
最新
楼层
暂无评论,快来抢首评~
相关推荐
不愿透露姓名的神秘牛友
昨天 17:45
mentor人太严格了,堪比军训
没想到碰到了这么棘手的mentor,每天他那么忙还能抽空监视👀我的行为,搞得我跟做贼一样!说说他平时啥样工位在mentor旁边,mentor会时不时歪头过来看我的屏幕是什么,或者看我在不在低头玩手机,工作进度逼的很近,上午布置的活下午就会问进度,如果做完了会直接给我➕新的工作内容下午1点半上班,1:40没醒,mentor会过来敲我桌子唤醒我基本没有landing时间,对我批评的内容,包括但不限于:我对你的期待很高,你看别的实习生xxx,一开始来上的需求比你还大,他怎么xxx,你怎么xxx。下班早点走(比如8点半)会问我这么早走干嘛去,我说工作做完了,他就会再给我找活做,让我加班到10点走怎么...
工作中哪个瞬间让你想离职
点赞
评论
收藏
分享
不愿透露姓名的神秘牛友
07-23 14:13
人机hr
这是聊岔撇了吗,相同的话问了两遍
吴offer选手:
上下文切换这一块
点赞
评论
收藏
分享
06-30 20:48
天津财经大学 算法工程师
投java实习简历被拒麻了
各位大佬帮我看下我简历的问题,投出去要么不回要么通过不了
点赞
评论
收藏
分享
07-08 01:01
重庆大学 嵌入式软件开发
怎么提前批全挂啊?兄弟们帮我看下简历该怎么修改
实习经历没有,这个没办法,导师不放实习,兄弟们看看我这简历问题出在哪,投的是嵌入式软开岗位。
码农索隆:
你是块金子,但是不好意思,敢参加提前批的人,谁不是快金子
点赞
评论
收藏
分享
07-23 11:26
门头沟学院 Java
百度提前批
18号投递的今天接到面感觉好紧张先给大家试试水
点赞
评论
收藏
分享
评论
点赞成功,聊一聊 >
点赞
收藏
分享
评论
提到的真题
返回内容
全站热榜
更多
1
...
大模型应用开发面经 (5年经验)
4.8W
2
...
都是 dirty work,为什么别人的简历上就能言之有物🤔
6990
3
...
滴滴提前批
6556
4
...
实习都是CRUD怎么包装
6319
5
...
百度提前批一面(秋招第一场也估计是压力最大的)
4299
6
...
秋招首凉-腾讯TEG 云架构平台提前批
4003
7
...
【07.29更新】能救一个是一个!26届毁意向毁约裁员黑名单
3984
8
...
团孝子启动ing!
3217
9
...
干活最少的实习生因为长得漂亮转正了
2988
10
...
字节懂车帝 后端实习一面
2331
创作者周榜
更多
正在热议
更多
#
26届的你,投了哪些公司?
#
13962次浏览
170人参与
#
我对___祛魅了
#
24568次浏览
251人参与
#
中兴秋招
#
192139次浏览
2154人参与
#
你最讨厌面试问你什么?
#
9793次浏览
157人参与
#
你跟室友的关系怎么样?
#
2615次浏览
57人参与
#
工作中哪个瞬间让你想离职
#
43518次浏览
379人参与
#
简历上的经历如何包装
#
9540次浏览
292人参与
#
通信/硬件求职避坑tips
#
85899次浏览
868人参与
#
如何快速融入团队?
#
8892次浏览
108人参与
#
和同事相处最忌讳的是__
#
12049次浏览
128人参与
#
你遇到最难的面试题目是_
#
3439次浏览
73人参与
#
毕业后不工作的日子里我在做什么
#
190022次浏览
1633人参与
#
什么样的背景能拿SSP?
#
13985次浏览
116人参与
#
应届生应该先就业还是先择业
#
124622次浏览
695人参与
#
字节跳动工作体验
#
458033次浏览
4624人参与
#
我和mentor的爱恨情仇
#
61628次浏览
377人参与
#
多益网络求职进展汇总
#
30838次浏览
137人参与
#
元戎启行求职进展汇总
#
35838次浏览
276人参与
#
如何排解工作中的焦虑
#
190294次浏览
1957人参与
#
总结:哪家公司面试体验感最差
#
63044次浏览
286人参与
#
应届生进小公司有什么影响吗
#
85373次浏览
1053人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务