首页
题库
公司真题
专项练习
面试题库
在线编程
面试
面试经验
AI 模拟面试
简历
求职
学习
基础学习课
实战项目课
求职辅导课
专栏&文章
竞赛
我要招人
发布职位
发布职位、邀约牛人
更多企业解决方案
AI面试、笔试、校招、雇品
HR免费试用AI面试
最新面试提效必备
登录
/
注册
要暴富的打工人很高大
北京现代职业技术学院 数据分析师
发布于北京
关注
已关注
取消关注
🐎
@Error小志Exception:
SQL优化 硬控面试官半小时
烫
SQL优化可以串联 MySQL 90%的知识点,讲的好的话,可以让面试官眼前一亮,是很加分的,特别是对于那些本身就很懂MySQL的面试官,基本这次面试就稳了。这里我总结了一些SQL优化的思路,供大家参考,基本覆盖99%的场景了。PS: 如果对你有用的话,请不要吝啬你的花花,这是我分享的动力[羞涩] 如何定位慢SQL(场景)业务场景执行时间非常久,触发网关超时使用以下命令分析慢SQL日志:`mysqldumpslow /path/to/your/slow-query.log`优化思路增删查改对于插入可以把多个语句合并成一个语句批量处理。对于删除,因为删除是假删除(减少B+树合并访问磁盘的开销),如果有太多地方没有使用,B+树层数虚高,增加了访问磁盘的速度,并且全表扫描也会扫描到很多无用数据,可以在数据库空闲的时候通过alter table来重建表使数据排列更紧凑对于频繁修改的数据利用最左匹配原则减少索引数量如果有唯一索引可以考虑改成普通索引,避免修改时为了维护唯一性导致change buffer失效。对于查询: 使用缓存, 早期mysql开启查询缓存,mysql8.0没有查询缓存,业务层可以使用缓存例如redis;或者可以把一些特殊的语句定期执行然后保存,后面查保存的数据,不用执行sql,比如我之前做的一个预测成本的功能,每月只需要预测一次,那就可以写一个定时任务每个月定时预测一次保存到另一张表,后续查询直接查这张表就可以了,就不用执行复杂SQL了。对于大数据量的场景,可以读写分离,分库分表分析执行计划EXPLAIN分析SQL语句的执行计划,主要关注以下几个字段如果type为ALL,说明进行了全表扫描,考虑是否可以通过增加索引来优化。分析possible_keys (可能使用到的索引)和key(实际使用的索引),确保相关的列上建立适当的索引并且正确选取索引。使用覆盖索引来避免回表使用复合索引来提高多条件查询的性能(索引下推)。利用最左匹配原则尽可能的建立更少的索引分析有没有没有正确选取索引:可能会错误的使用全表扫描的场景:对字段使用了函数:将函数写在判断条件上面,避免对字段使用函数。字段隐式类型转换( str->int, 字段使用了utf8但是字符是utf8mb4),需要保证查询目标与字段类型一致如果没有出现上述问题,还有一种解决思路:使用force index强制使用索引 | order by .. limit 1。因为选取索引是优化器的工作,优化器会分析选取索引的扫描行数加上回表的代价是否比主键全表扫描少,这里采用采样分析,因为全表分析代价太大,在多个事务的时候,因为是假删除而且多个事务的时候MVCC多版本数据在undo-log里面,这个时候采样分析会把已经删除的数据也考虑到总量里面去,比如实际上总量是1000行,考虑成了2000行导致考虑的扫描行数翻倍。所以采样分析针对高并发和大数量的场景是非常不准的MySQL临时表, CTE会破坏索引结构(例如group后使用了临时表):想办法优化掉临时表,或者减少临时表的查询、JOIN操作rows字段,表示查询的结果集行数。我们要尽可能的减少rows的数量,以下是一些思路确保查询条件尽可能具体, 例如在WHERE子句中使用更严格的条件。对于确定的数量(例如只需要查询一个结果)使用limit in 替换成 exists,in 是 双重匹配,exists匹配到了一个后就会提前返回count字段看可不可以替换成count( * ), count(1)Extra字段,记录一些额外信息如果有Using filesort,表示使用了文件排序。可以考虑给需要排序的字段加上索引,因为索引使用的B+树本来就是排序好的,可以减少排序时间。 或者可以把单次排序的内存sort_buffer_size设置大一点,因为排序是取磁盘里的部分数据到内存进行排序最后合并, 把单次排序内存设置大一点这样减少IO次数如果有Using Join Buffer, 说明Join没有使用索引。没有索引join会用到Block Nested-Loop Join算法,时间复杂度很高,可以看作两层遍历,实际上更复杂一点,考虑到数据很多不能全读到内存里,mysql使用了join_buffer来存一部分数据,可能会因为 join_buffer 不够大,需要对被驱动表做多次全表扫描。在需要Join的字段加上索引其它思路对于某些语句正常执行的时候很快,偶尔执行时间会很长,很难复现。这是因为触发了flush操作,我们应该尽可能的去减少flush操作触发的次数。如果频繁触发flush操作,可能是脏页比例过高,可以查看脏页比例,脏页比率控制策略主要与redo-log大小和写盘速度(innodb_io_capacity)有关,我们需要设置合理的redo_log大小以及符合实际的预期写盘速度(可以通过 fio 这个工具来测试)。我们也可以想办法减小单次flush操作的时间,InnoDB有个策略是刷某一页时发现这一页旁边的页也是脏页也会去刷旁边的页,这样连带着一片都刷进去,导致一次flush操作可能会耗费很长的时间,我们可以通过innodb_flush_neighbors来控制这个行为,值为 1 的时候会有上述的“连坐”机制,值为 0 时表示不找邻居,自己刷自己的。设计表的时候, 使索引的长度尽可能小,页的大小是固定的,根据索引长度计算B+树阶数,阶数越小,每页的节点数越多,B+数深度越小,访问磁盘次数越少;对于事务,使修改的顺序尽可能靠后,因为修改会持有行锁,会等事务提交后再释放锁,这样可能会阻塞其他事务,修改靠后就可以更晚的持有这些锁,这样就可以减少阻塞,也可以减少死锁发生的概率。大数据量分页查询的优化,改成使用id:分页的原理是查询到第一个满足条件的数据行后往后一页一页遍历,如果改成id的话,就可以使用索引进行优化,直接定位到需要查询的那一页CTE物化问题,部分数据库(如MySQL)将CTE处理为临时表时不会保留原表索引, 解决方法:修改逻辑避免使用CTE/使用临时表替换CTE, 并在临时表上加索引(空间换时间)CTE(Common Table Expression 公共表表达式) 是一种在 SQL 查询中定义临时结果集的方法。它通过 WITH 子句创建,可以:简化复杂查询的可读性支持递归查询多次引用同一结果集基础语法WITH cte_name (column1, column2, ...) AS ( -- 子查询 SELECT ...)SELECT * FROM cte_name;我的面试思路一般结合一两个点来讲比如 Join 没有使用索引,耗时很长,但是后续分析发现Join字段上建立了索引,为什么Join没有选取索引呢?最终分析发现了以下原因:临时表破坏了原表的索引结构CTE物化问题破坏了原表的索引结构再针对上述问题讲解一些优化思路。PS: 此文章适合有一定SQL优化基础的人进阶使用,对于小白可能不是很友好,如果你有什么疑问的话,可以在评论区我们相互交流一下。(因为每个知识点都要展开讲的话基本覆盖了90%MySQL知识点了,篇幅太长)最后,如果对你有用的话,一定不要忘记送个花花呀[羞涩],这么高质量又免费的帖子很少了[赞]
点赞 304
评论 51
全部评论
推荐
最新
楼层
暂无评论,快来抢首评~
相关推荐
07-15 14:14
门头沟学院 Java
地平线26秋招已挂
7.10投递7.15感谢信
投递地平线等公司7个岗位
点赞
评论
收藏
分享
昨天 13:54
华南理工大学 机械工程师
终于拿到offer了
纪念一下人生的第一个offer,感谢小米收留我,我将成为最忠诚的米粉
点赞
评论
收藏
分享
05-31 21:06
门头沟学院 Java
27届找实习
这个简历有问题吗,求建议。
点赞
评论
收藏
分享
06-01 21:50
已编辑
天津理工大学 Java
我该怎么准备呢
双非一本,大一,海投简历好不容易遇上个好点的回我,约好的面试延了两次了,最终定在下周二,简历是找人优化的,有很多技术八股太多了背不下,我该怎么准备啊,帅哥美女,哥哥姐姐们😫😫😫
Java抽象小篮子:
大一真别急,再玩一年吧,找后端开发的话直接把第三个项目删了,建立怎么写可以看看我之前发的帖子
点赞
评论
收藏
分享
07-16 22:26
广电运通_大数据事业部_算法研究员(准入职员工)
广电运通内推
🏢 广电运通:上市国企,国内领先的人工智能行业应用领军企,主营城市智能和金融科技。💰 薪资福利:公司的实习工资非常有诚意哈哈;公司还有免费早午餐,免费上下班班车接送;运动达人更不要错过健身房,还有羽毛球篮球等各种活动。👫 组内氛围:我们部门真的都是俊男靓女,领导和同事都非常亲切,依稀记得刚开始来的时候还做错了一些事,Mentor脾气超好,非常耐心;此外!在这里我还认识了很多一起实习的小伙伴们,大家都是很好的朋友🧑🤝🧑周末经常一起去了顺德、香港等地,秒变旅游搭子,超级幸福。👋 广电运通,入股不亏!广电运通集团2025校园招聘+26届实习启动啦【四大类别,60+岗位】技术类、营销...
广电运通公司福利 305人发布
点赞
评论
收藏
分享
评论
点赞成功,聊一聊 >
点赞
收藏
分享
评论
提到的真题
返回内容
全站热榜
更多
1
...
百度提前批一面
1.0W
2
...
我曾经以为自己熬过了三阶段已经无敌,但现在却见证了逆天的第四阶段
6837
3
...
滴滴提前批面经
5470
4
...
回忆录:后端鼠鼠苦苦哀求日常实习
5115
5
...
实习,你就这么偷
4819
6
...
从中山大学到中兴 SSP:我的秋招打怪升级之路
3614
7
...
如何平衡暑期实习与秋招
3378
8
...
天呐,公司怎么这样对我!!!
3260
9
...
不偷师 不出师!!
2725
10
...
大三双非水产专业上岸阿里后端(一)
2500
创作者周榜
更多
正在热议
更多
#
实习如何「偷」产出?
#
7749次浏览
105人参与
#
除了主业以外,你还有哪些其他收入?
#
1495次浏览
36人参与
#
风评不好的公司,你会去吗?
#
39053次浏览
252人参与
#
实习打杂,要跑路吗
#
4794次浏览
73人参与
#
职场新人体验
#
6599次浏览
79人参与
#
校园里的破防时刻
#
2471次浏览
39人参与
#
为什么那么多公司毁约
#
180558次浏览
1338人参与
#
第一份工作应该选高薪还是热爱?
#
74790次浏览
726人参与
#
设计人如何选offer
#
126710次浏览
746人参与
#
学历贬值真的很严重吗?
#
27018次浏览
185人参与
#
一人推荐一个值得去的通信/硬件公司
#
187568次浏览
1864人参与
#
你觉得早上几点上班合适?
#
73970次浏览
308人参与
#
你觉得现在还能进互联网吗?
#
15910次浏览
178人参与
#
秋招签约后的心态变化
#
84438次浏览
824人参与
#
双非能在秋招上岸吗?
#
223687次浏览
1182人参与
#
打工人的工作餐日常
#
55480次浏览
439人参与
#
外包能不能当跳板?
#
38253次浏览
229人参与
#
不考虑薪资和职业,你最想做什么工作呢?
#
93884次浏览
696人参与
#
校招求职有谈薪空间吗
#
153887次浏览
2042人参与
#
考研对你找工作产生了哪些影响?
#
34239次浏览
213人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务