首页
题库
公司真题
专项练习
面试题库
在线编程
面试
面试经验
AI 模拟面试
简历
求职
学习
基础学习课
实战项目课
求职辅导课
专栏&文章
竞赛
我要招人
发布职位
发布职位、邀约牛人
更多企业解决方案
AI面试、笔试、校招、雇品
HR免费试用AI面试
最新面试提效必备
登录
/
注册
奥利奥可乐
门头沟学院 Java
发布于广东
关注
已关注
取消关注
@Error小志Exception:
SQL优化 硬控面试官半小时
烫
SQL优化可以串联 MySQL 90%的知识点,讲的好的话,可以让面试官眼前一亮,是很加分的,特别是对于那些本身就很懂MySQL的面试官,基本这次面试就稳了。这里我总结了一些SQL优化的思路,供大家参考,基本覆盖99%的场景了。PS: 如果对你有用的话,请不要吝啬你的花花,这是我分享的动力[羞涩] 如何定位慢SQL(场景)业务场景执行时间非常久,触发网关超时使用以下命令分析慢SQL日志:`mysqldumpslow /path/to/your/slow-query.log`优化思路增删查改对于插入可以把多个语句合并成一个语句批量处理。对于删除,因为删除是假删除(减少B+树合并访问磁盘的开销),如果有太多地方没有使用,B+树层数虚高,增加了访问磁盘的速度,并且全表扫描也会扫描到很多无用数据,可以在数据库空闲的时候通过alter table来重建表使数据排列更紧凑对于频繁修改的数据利用最左匹配原则减少索引数量如果有唯一索引可以考虑改成普通索引,避免修改时为了维护唯一性导致change buffer失效。对于查询: 使用缓存, 早期mysql开启查询缓存,mysql8.0没有查询缓存,业务层可以使用缓存例如redis;或者可以把一些特殊的语句定期执行然后保存,后面查保存的数据,不用执行sql,比如我之前做的一个预测成本的功能,每月只需要预测一次,那就可以写一个定时任务每个月定时预测一次保存到另一张表,后续查询直接查这张表就可以了,就不用执行复杂SQL了。对于大数据量的场景,可以读写分离,分库分表分析执行计划EXPLAIN分析SQL语句的执行计划,主要关注以下几个字段如果type为ALL,说明进行了全表扫描,考虑是否可以通过增加索引来优化。分析possible_keys (可能使用到的索引)和key(实际使用的索引),确保相关的列上建立适当的索引并且正确选取索引。使用覆盖索引来避免回表使用复合索引来提高多条件查询的性能(索引下推)。利用最左匹配原则尽可能的建立更少的索引分析有没有没有正确选取索引:可能会错误的使用全表扫描的场景:对字段使用了函数:将函数写在判断条件上面,避免对字段使用函数。字段隐式类型转换( str->int, 字段使用了utf8但是字符是utf8mb4),需要保证查询目标与字段类型一致如果没有出现上述问题,还有一种解决思路:使用force index强制使用索引 | order by .. limit 1。因为选取索引是优化器的工作,优化器会分析选取索引的扫描行数加上回表的代价是否比主键全表扫描少,这里采用采样分析,因为全表分析代价太大,在多个事务的时候,因为是假删除而且多个事务的时候MVCC多版本数据在undo-log里面,这个时候采样分析会把已经删除的数据也考虑到总量里面去,比如实际上总量是1000行,考虑成了2000行导致考虑的扫描行数翻倍。所以采样分析针对高并发和大数量的场景是非常不准的MySQL临时表, CTE会破坏索引结构(例如group后使用了临时表):想办法优化掉临时表,或者减少临时表的查询、JOIN操作rows字段,表示查询的结果集行数。我们要尽可能的减少rows的数量,以下是一些思路确保查询条件尽可能具体, 例如在WHERE子句中使用更严格的条件。对于确定的数量(例如只需要查询一个结果)使用limit in 替换成 exists,in 是 双重匹配,exists匹配到了一个后就会提前返回count字段看可不可以替换成count( * ), count(1)Extra字段,记录一些额外信息如果有Using filesort,表示使用了文件排序。可以考虑给需要排序的字段加上索引,因为索引使用的B+树本来就是排序好的,可以减少排序时间。 或者可以把单次排序的内存sort_buffer_size设置大一点,因为排序是取磁盘里的部分数据到内存进行排序最后合并, 把单次排序内存设置大一点这样减少IO次数如果有Using Join Buffer, 说明Join没有使用索引。没有索引join会用到Block Nested-Loop Join算法,时间复杂度很高,可以看作两层遍历,实际上更复杂一点,考虑到数据很多不能全读到内存里,mysql使用了join_buffer来存一部分数据,可能会因为 join_buffer 不够大,需要对被驱动表做多次全表扫描。在需要Join的字段加上索引其它思路对于某些语句正常执行的时候很快,偶尔执行时间会很长,很难复现。这是因为触发了flush操作,我们应该尽可能的去减少flush操作触发的次数。如果频繁触发flush操作,可能是脏页比例过高,可以查看脏页比例,脏页比率控制策略主要与redo-log大小和写盘速度(innodb_io_capacity)有关,我们需要设置合理的redo_log大小以及符合实际的预期写盘速度(可以通过 fio 这个工具来测试)。我们也可以想办法减小单次flush操作的时间,InnoDB有个策略是刷某一页时发现这一页旁边的页也是脏页也会去刷旁边的页,这样连带着一片都刷进去,导致一次flush操作可能会耗费很长的时间,我们可以通过innodb_flush_neighbors来控制这个行为,值为 1 的时候会有上述的“连坐”机制,值为 0 时表示不找邻居,自己刷自己的。设计表的时候, 使索引的长度尽可能小,页的大小是固定的,根据索引长度计算B+树阶数,阶数越小,每页的节点数越多,B+数深度越小,访问磁盘次数越少;对于事务,使修改的顺序尽可能靠后,因为修改会持有行锁,会等事务提交后再释放锁,这样可能会阻塞其他事务,修改靠后就可以更晚的持有这些锁,这样就可以减少阻塞,也可以减少死锁发生的概率。大数据量分页查询的优化,改成使用id:分页的原理是查询到第一个满足条件的数据行后往后一页一页遍历,如果改成id的话,就可以使用索引进行优化,直接定位到需要查询的那一页CTE物化问题,部分数据库(如MySQL)将CTE处理为临时表时不会保留原表索引, 解决方法:修改逻辑避免使用CTE/使用临时表替换CTE, 并在临时表上加索引(空间换时间)CTE(Common Table Expression 公共表表达式) 是一种在 SQL 查询中定义临时结果集的方法。它通过 WITH 子句创建,可以:简化复杂查询的可读性支持递归查询多次引用同一结果集基础语法WITH cte_name (column1, column2, ...) AS ( -- 子查询 SELECT ...)SELECT * FROM cte_name;我的面试思路一般结合一两个点来讲比如 Join 没有使用索引,耗时很长,但是后续分析发现Join字段上建立了索引,为什么Join没有选取索引呢?最终分析发现了以下原因:临时表破坏了原表的索引结构CTE物化问题破坏了原表的索引结构再针对上述问题讲解一些优化思路。PS: 此文章适合有一定SQL优化基础的人进阶使用,对于小白可能不是很友好,如果你有什么疑问的话,可以在评论区我们相互交流一下。(因为每个知识点都要展开讲的话基本覆盖了90%MySQL知识点了,篇幅太长)最后,如果对你有用的话,一定不要忘记送个花花呀[羞涩],这么高质量又免费的帖子很少了[赞]
点赞 304
评论 51
全部评论
推荐
最新
楼层
暂无评论,快来抢首评~
相关推荐
07-23 14:26
门头沟学院 运营
快招我,我是长期暑假工
点赞
评论
收藏
分享
不愿透露姓名的神秘牛友
07-23 18:38
美团一面后emo了
7月23一面,被反馈对业务的理解不够深入,很多都是围绕利用AI提效问的;后续要面的友友们 可以好好捋一下实习项目:如何用AI解决业务问题、AI如何赋能新业务.... 对美团的所有业务场景要比较了解
面试问题记录
点赞
评论
收藏
分享
06-20 17:09
腾讯音乐娱乐集团_算法实习生(实习员工)
秋招第一个offer,拿下~
普联提前批,不过薪资感觉刚刚到及格线,不是非常满意~
牛客37592471...:
tp学历厂,只能说你学历到位了
Tplink求职进展汇总
点赞
评论
收藏
分享
06-25 20:44
乐山师范学院 Java
完了完了
二本计科投了900份简历,面试寥寥无几,简历都是已读不回,怎么办
程序员小白条:
你是沟通了900个,不是投了900份简历,你能投900份,意味着对面都要回复你900次,你早就找到实习了,没亮点就是这样的,别局限地区,时间投的也要早,现在都要7月了
点赞
评论
收藏
分享
昨天 16:48
蓝禾技术_电商事业部_电商运营管培生(准入职员工)
蓝禾科技内推
面经:蓝禾的流程推得很快,基本上投完两天就接到了hr的初试电话,直接进行了初试。初试全程大概三十分钟,hr小哥态度很和善。主要问了实践经历获奖的情况最有成就感的事情对电商运营的理解选择公司的标准等,都是比较常规的问题。禾你一起,做不可能的事 | 蓝禾26届实习!开放申请【图拉斯Torras】新增3大国内电商运营实习生岗位开放招聘:不限专业!不限院校!不限地区!不限经验(可接受小白)!实习薪酬5k(含1K住宿补贴),有转正机会,Base深圳!欢迎可实习三个月及以上,能接受早晚班的小伙伴投递:福利待遇:有竞争力的薪资、经营分红、项目奖金、提前发工资、员工内购、健身房、自助餐厅、每月生日主题part...
点赞
评论
收藏
分享
评论
点赞成功,聊一聊 >
点赞
收藏
分享
评论
提到的真题
返回内容
全站热榜
更多
1
...
实习包装不是吹牛皮,要怎么包装看这里
5.0W
2
...
百度提前批一面 7.24
6476
3
...
字节复活赛
6312
4
...
百度一二面凉经
5479
5
...
入我滴滴!早十晚六 !
3156
6
...
百度一面面经7.14
3116
7
...
再再再再强调一遍!秋招不要装逼
2817
8
...
滴滴提前批面经
2671
9
...
百度提前批一面:面试官居然让我手撕两数之和???最奇幻的一轮面试,结束还说.......
2350
10
...
字节实习第三天10点下班,哭了
2176
创作者周榜
更多
正在热议
更多
#
哪些公司开提前批了?
#
24537次浏览
255人参与
#
你今年的平均薪资是多少?
#
133878次浏览
685人参与
#
风评不好的公司,你会去吗?
#
57772次浏览
418人参与
#
实习如何「偷」产出?
#
48627次浏览
1270人参与
#
正在春招的你,也参与了去年秋招吗?
#
312628次浏览
2528人参与
#
除了主业以外,你还有哪些其他收入?
#
11434次浏览
196人参与
#
互联网公司评价
#
401119次浏览
3836人参与
#
你最满意的offer薪资是哪家公司?
#
32983次浏览
176人参与
#
节后第一天上班,我的精神状态
#
13388次浏览
117人参与
#
不卡学历的大厂有哪些?
#
27238次浏览
217人参与
#
校招阶段,学历VS技术哪个更重要?
#
16703次浏览
182人参与
#
职场新人体验
#
23982次浏览
231人参与
#
签约/解约注意事项
#
696851次浏览
4068人参与
#
应届生初入职场,求建议
#
229686次浏览
2642人参与
#
你投递的公司有几家约面了?
#
108780次浏览
778人参与
#
腾讯音乐求职进展汇总
#
97997次浏览
570人参与
#
校园里的破防时刻
#
10678次浏览
122人参与
#
硬件人求职现状
#
434469次浏览
4539人参与
#
正在实习的碎碎念
#
1454303次浏览
13469人参与
#
宁德时代求职进展汇总
#
122702次浏览
650人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务