首页
题库
公司真题
专项练习
面试题库
在线编程
面试
面试经验
AI 模拟面试
简历
求职
学习
基础学习课
实战项目课
求职辅导课
专栏&文章
竞赛
搜索
我要招人
发布职位
发布职位、邀约牛人
更多企业解决方案
AI面试、笔试、校招、雇品
HR免费试用AI面试
最新面试提效必备
登录
/
注册
要暴富的打工人很高大
北京现代职业技术学院 数据分析师
发布于北京
关注
已关注
取消关注
🐎
@Error小志Exception:
SQL优化 硬控面试官半小时
烫
SQL优化可以串联 MySQL 90%的知识点,讲的好的话,可以让面试官眼前一亮,是很加分的,特别是对于那些本身就很懂MySQL的面试官,基本这次面试就稳了。这里我总结了一些SQL优化的思路,供大家参考,基本覆盖99%的场景了。PS: 如果对你有用的话,请不要吝啬你的花花,这是我分享的动力[羞涩] 如何定位慢SQL(场景)业务场景执行时间非常久,触发网关超时使用以下命令分析慢SQL日志:`mysqldumpslow /path/to/your/slow-query.log`优化思路增删查改对于插入可以把多个语句合并成一个语句批量处理。对于删除,因为删除是假删除(减少B+树合并访问磁盘的开销),如果有太多地方没有使用,B+树层数虚高,增加了访问磁盘的速度,并且全表扫描也会扫描到很多无用数据,可以在数据库空闲的时候通过alter table来重建表使数据排列更紧凑对于频繁修改的数据利用最左匹配原则减少索引数量如果有唯一索引可以考虑改成普通索引,避免修改时为了维护唯一性导致change buffer失效。对于查询: 使用缓存, 早期mysql开启查询缓存,mysql8.0没有查询缓存,业务层可以使用缓存例如redis;或者可以把一些特殊的语句定期执行然后保存,后面查保存的数据,不用执行sql,比如我之前做的一个预测成本的功能,每月只需要预测一次,那就可以写一个定时任务每个月定时预测一次保存到另一张表,后续查询直接查这张表就可以了,就不用执行复杂SQL了。对于大数据量的场景,可以读写分离,分库分表分析执行计划EXPLAIN分析SQL语句的执行计划,主要关注以下几个字段如果type为ALL,说明进行了全表扫描,考虑是否可以通过增加索引来优化。分析possible_keys (可能使用到的索引)和key(实际使用的索引),确保相关的列上建立适当的索引并且正确选取索引。使用覆盖索引来避免回表使用复合索引来提高多条件查询的性能(索引下推)。利用最左匹配原则尽可能的建立更少的索引分析有没有没有正确选取索引:可能会错误的使用全表扫描的场景:对字段使用了函数:将函数写在判断条件上面,避免对字段使用函数。字段隐式类型转换( str->int, 字段使用了utf8但是字符是utf8mb4),需要保证查询目标与字段类型一致如果没有出现上述问题,还有一种解决思路:使用force index强制使用索引 | order by .. limit 1。因为选取索引是优化器的工作,优化器会分析选取索引的扫描行数加上回表的代价是否比主键全表扫描少,这里采用采样分析,因为全表分析代价太大,在多个事务的时候,因为是假删除而且多个事务的时候MVCC多版本数据在undo-log里面,这个时候采样分析会把已经删除的数据也考虑到总量里面去,比如实际上总量是1000行,考虑成了2000行导致考虑的扫描行数翻倍。所以采样分析针对高并发和大数量的场景是非常不准的MySQL临时表, CTE会破坏索引结构(例如group后使用了临时表):想办法优化掉临时表,或者减少临时表的查询、JOIN操作rows字段,表示查询的结果集行数。我们要尽可能的减少rows的数量,以下是一些思路确保查询条件尽可能具体, 例如在WHERE子句中使用更严格的条件。对于确定的数量(例如只需要查询一个结果)使用limit in 替换成 exists,in 是 双重匹配,exists匹配到了一个后就会提前返回count字段看可不可以替换成count( * ), count(1)Extra字段,记录一些额外信息如果有Using filesort,表示使用了文件排序。可以考虑给需要排序的字段加上索引,因为索引使用的B+树本来就是排序好的,可以减少排序时间。 或者可以把单次排序的内存sort_buffer_size设置大一点,因为排序是取磁盘里的部分数据到内存进行排序最后合并, 把单次排序内存设置大一点这样减少IO次数如果有Using Join Buffer, 说明Join没有使用索引。没有索引join会用到Block Nested-Loop Join算法,时间复杂度很高,可以看作两层遍历,实际上更复杂一点,考虑到数据很多不能全读到内存里,mysql使用了join_buffer来存一部分数据,可能会因为 join_buffer 不够大,需要对被驱动表做多次全表扫描。在需要Join的字段加上索引其它思路对于某些语句正常执行的时候很快,偶尔执行时间会很长,很难复现。这是因为触发了flush操作,我们应该尽可能的去减少flush操作触发的次数。如果频繁触发flush操作,可能是脏页比例过高,可以查看脏页比例,脏页比率控制策略主要与redo-log大小和写盘速度(innodb_io_capacity)有关,我们需要设置合理的redo_log大小以及符合实际的预期写盘速度(可以通过 fio 这个工具来测试)。我们也可以想办法减小单次flush操作的时间,InnoDB有个策略是刷某一页时发现这一页旁边的页也是脏页也会去刷旁边的页,这样连带着一片都刷进去,导致一次flush操作可能会耗费很长的时间,我们可以通过innodb_flush_neighbors来控制这个行为,值为 1 的时候会有上述的“连坐”机制,值为 0 时表示不找邻居,自己刷自己的。设计表的时候, 使索引的长度尽可能小,页的大小是固定的,根据索引长度计算B+树阶数,阶数越小,每页的节点数越多,B+数深度越小,访问磁盘次数越少;对于事务,使修改的顺序尽可能靠后,因为修改会持有行锁,会等事务提交后再释放锁,这样可能会阻塞其他事务,修改靠后就可以更晚的持有这些锁,这样就可以减少阻塞,也可以减少死锁发生的概率。大数据量分页查询的优化,改成使用id:分页的原理是查询到第一个满足条件的数据行后往后一页一页遍历,如果改成id的话,就可以使用索引进行优化,直接定位到需要查询的那一页CTE物化问题,部分数据库(如MySQL)将CTE处理为临时表时不会保留原表索引, 解决方法:修改逻辑避免使用CTE/使用临时表替换CTE, 并在临时表上加索引(空间换时间)CTE(Common Table Expression 公共表表达式) 是一种在 SQL 查询中定义临时结果集的方法。它通过 WITH 子句创建,可以:简化复杂查询的可读性支持递归查询多次引用同一结果集基础语法WITH cte_name (column1, column2, ...) AS ( -- 子查询 SELECT ...)SELECT * FROM cte_name;我的面试思路一般结合一两个点来讲比如 Join 没有使用索引,耗时很长,但是后续分析发现Join字段上建立了索引,为什么Join没有选取索引呢?最终分析发现了以下原因:临时表破坏了原表的索引结构CTE物化问题破坏了原表的索引结构再针对上述问题讲解一些优化思路。PS: 此文章适合有一定SQL优化基础的人进阶使用,对于小白可能不是很友好,如果你有什么疑问的话,可以在评论区我们相互交流一下。(因为每个知识点都要展开讲的话基本覆盖了90%MySQL知识点了,篇幅太长)最后,如果对你有用的话,一定不要忘记送个花花呀[羞涩],这么高质量又免费的帖子很少了[赞]
点赞 309
评论 52
全部评论
推荐
最新
楼层
暂无评论,快来抢首评~
相关推荐
04-22 18:38
山东交通学院 自动化
谁能解答一下这个问题
站在一个辅导员的角度上,一个想要为自己的未来拼一把但是大学前1年挂过科,在学生干部岗位干的不顺心,辞职不干直接跟辅导员闹掰,对于自己未来的职业规划以及学习路径有了一定的了解和尝试,已经有了准备未来实习和入职想法的同学.和一个每天除了上课时间都待在宿舍,每天都在打三角洲和王者荣耀的没有挂过科,积极当学生干部,志愿服务积极准备并参加学校举办的下乡活动并参加大创和挑杯,以及一些直接从导师那里拿项目直接报上去就可以拿到奖项的比赛3-4个.你喜欢哪一个?如果站在未来求职者回望往昔你又想当哪一个
你找实习最大的坎坷是什么
点赞
评论
收藏
分享
04-24 15:02
门头沟学院 后端工程师
转码选手的寻找暑期实习之路 - 闲聊没有面试的日子
从3月份到现在,真的感觉这段时间度日如年 首先当然是猛猛的刷力扣、在牛客看面经、背八股,复盘;然后就是学习一些agent开发的相关知识,感觉传统后端之后的发展不是很好啊( 害,其实更多的还是有点焦虑,Codex、CC、Cursor那么厉害,以后还要我做什么? 不知道大家怎么看!投了那么多,面了那么多,感觉自己的面试能力确实有点进步,也拿到了第一个携程的oc 接下来就看看自己能否再冲击一下BAT了也希望各位牛友们能拿到适合自己的offer! 想到哪里写到哪里,hhhh,毫无逻辑(#牛客AI配图神器#
没有面试的日子里,你在做...
点赞
评论
收藏
分享
03-27 01:58
已编辑
西北工业大学 Java
简历求锐评
211本985硕,暑期快手已经用人部门筛挂两次了😡😡实习已经改了一版了,需要写的更详细点吗😭😭😭
在平静中度过当下:
如果这个bg也简历挂的话可能他们现在不缺人了吧,我也是这两天投的,阿里和快手投的岗都是简历秒挂
点赞
评论
收藏
分享
04-15 10:55
郑州大学 Java
大二第一段实习投哪个平台机会多,求大佬们帮我看看简历
为啥都没人鸟我哇各位大佬帮忙看看简历
点赞
评论
收藏
分享
04-22 15:31
牛客运营
四月底了,27届暑期实习还来得及吗
最近很多27届同学问我们:暑期实习现在投,还来得及吗?来得及,但要快。【当前时间线判断(4月底)】一线大厂(字节/腾讯/阿里/美团/京东):多数部门HC接近尾声,但仍有部分在招,内推渠道比直投快,有学长学姐资源的赶紧要。快手/网易/百度/小红书:还有名额,预计截止5月上中旬,现在投还能赶上。中厂(滴滴/B站/哔哩哔哩/SHEIN等):HC相对充足,5月底前都有机会。外企(微软/谷歌/亚马逊/字节国际):部分岗位仍在正常流程,时间线比国内略宽松。【现在应该怎么投】广撒网,不要精投了。这个阶段没时间慢慢筛JD,有合适的全投,投30家起步。填表效率很关键。我们的网申助手(Chrome插件)支持字节/...
点赞
评论
收藏
分享
评论
点赞成功,聊一聊 >
点赞
收藏
分享
评论
提到的真题
返回内容
全站热榜
更多
1
...
求问:有没有真的能上手做大模型/Agent的实战项目?
2.0W
2
...
巨人网络游戏开发一面面经
7888
3
...
游戏客户端的碎碎念
3537
4
...
最近在做Agent面试,我发现了很多共性的问题...
3222
5
...
#网易游戏雷火笔试#题量好大,个人能力原因吧,现想现写好多没有写完...
1834
6
...
tme暑期前端二面 4.27
1766
7
...
我的前途全被学校毁了!!!
1450
8
...
三道手撕?字节后端三面你别太离谱!
1124
9
...
腾讯云智二面挂
1070
10
...
4.26 拼多多笔试
1058
创作者周榜
更多
正在热议
更多
#
你和你的mentor相处模式是__
#
3151次浏览
19人参与
#
如果公司降薪,你会跳槽吗?
#
160131次浏览
938人参与
#
联宝杯大学生创新大赛,你的技术值得产业级答案
#
25970次浏览
320人参与
#
实习第一天,你在干什么
#
2125次浏览
14人参与
#
华为工作体验
#
322057次浏览
1409人参与
#
你会因为行情,降低找工作标准吗?
#
2361次浏览
19人参与
#
非技术2024笔面经
#
501882次浏览
5038人参与
#
机械人与华为的爱恨情仇
#
158475次浏览
1055人参与
#
0offer互助地
#
772984次浏览
4756人参与
#
你是怎么和mt相处的?
#
103004次浏览
507人参与
#
联想求职进展汇总
#
356369次浏览
2262人参与
#
运营人求职交流聚集地
#
247164次浏览
1124人参与
#
实习/项目/竞赛奖项,哪个对找工作更重要?
#
113540次浏览
1196人参与
#
我的成功项目解析
#
531886次浏览
8611人参与
#
打工人的工作餐日常
#
96992次浏览
558人参与
#
26年哪些行业会变好/更差
#
66176次浏览
534人参与
#
蚂蚁求职进展汇总
#
170957次浏览
1291人参与
#
今年秋招还有金九银十吗
#
82763次浏览
514人参与
#
工作两年想退休了
#
271589次浏览
2048人参与
#
你总挂在第__面?
#
14695次浏览
162人参与
#
简历上如何体现你的“AI”能力?
#
20035次浏览
405人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务