39.进阶-SQL优化-小结

最新推荐文章于 2025-08-23 16:56:09 发布
原创 最新推荐文章于 2025-08-23 16:56:09 发布 · 423 阅读 · 9 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#sql #java #数据库

39.进阶-SQL优化-小结

（1）总结

1、插入数据

insert：批量插入，手动控制事务、主键顺序插入

大批量插入：load data local infile

2、主键优化

主键长度尽可能短、顺序插入 AUTO_INCREMENT UUID（×）

3、order by

using index：直接通过索引返回数据，性能高

using filesort：需要将返回的结果在排序缓冲区排序

4、group by优化

索引，多字段分组满足最左前缀法则

5、limit优化

覆盖索引 + 子查询

6、count优化

性能：count(*) ≈ count(1) > count(主键id) > count(字段)

7、update优化

尽量根据主键 / 索引字段进行数据更新

[Spark进阶]-- spark-1.6.x-小结
欢迎来到我的博客，一起探索代码里的世界！
08-07 2009
官方定义：spark是一个基于内存的分布式计算框架 它会使得计算速度以及开发速度快！特点：One stack rule them all ! 一站解决所有问题 热查询(Hive) 批处理(MapReduce) 实时流计算(Storm) 回顾MapReduce 的 Shuffle过程 见图     hadoop慢的原因：DISK IO 输入输出DISK IO，Shuffle阶段也是DI...
java进阶篇--MySQL 的优化方案有哪些？
爱分享的淘金达人
06-23 313
性能优化（Optimize）指的是在保证系统正确性的前提下，能够更快速响应请求的一种手段。而且有些性能问题，比如慢查询等，如果积累到一定的程度或者是遇到急速上升的并发请求之后，会导致严重的后果，轻则造成服务繁忙，重则导致应用不可用。它对我们来说就像一颗即将被引爆的定时炸弹一样，时刻威胁着我们。因此在上线项目之前需要严格的把关，以确保 MySQL 能够以最优的状态进行运行。同时，在实际工作中还有面试中关于 MySQL 优化的知识点，都是面试官考察的重点内容。 我们本课时的面试题是，MySQL 的优化方案有哪
MySQL进阶- SQL优化和视图
qq_72343101的博客
05-30 1782
limit一个常见的问题就是，在大数据量的情况下，越往后查询数据，limit的效率月底，例如limit 2000000，10，此时需要mysql排序前2000010记录，但是仅仅返回2000000和2000010之间的记录，其他的记录丢弃，查询排序的代价非常大。页可以为空，也可以填充一半，也可以全部填满，但是一个页中最少包含2行数据，如果某行的数据较大，超出了页的阈值之后，就会出现行溢出的现象，如果顺序插入，就不会出现页分裂，乱序插入就会出现页分裂的现象，导致插入时要多操作页，自然插入的时间就会变长。
MySQL进阶---SQL优化
MADAO的博客
03-26 1256
插入数据 insert：批量插入、手动控制事务、主键顺序插入、 大批量插入：load data local infile 主键优化 主键长度尽量短，顺序插入 AUTO_INCREMENT UUID order by优化 using index：直接通过索引返回数据，性能高 using filesort：需要将返回的结果在排序缓冲区排序 gourp by 索引，多字段分组满足最左前缀法则 limit优化 覆盖索引 + 子查询 count优化 count(*) =count(1) > count(主
32.进阶-SQL优化-插入数据、、主键优化、、排序优化、、分组优化、、分页优化、、计数优化、、修改优化、、小结、、
qq_41577703的博客
12-26 776
UUID 作为主键虽然在一些特定的场景下（如分布式系统）有其优势，但在大多数 MySQL 应用中，由于性能、存储和索引等方面的考虑，通常不建议将 UUID 用作主键。可以考虑使用或其他基于时间的生成算法来解决分布式唯一性的需求，同时保持较好的性能。34.进阶-SQL优化-排序优化这个很好理解，就是有索引的话，sql 查询 会走索引， 然后索引是按照 字段 排序 的，直接查询出来返回 就行了，如果没有索引，那么 查询出来后，还要加一步 排序操作， 自然 这个查询就慢了，因为多了一步排序操作。
【三十四、MySql】进阶篇--SQL优化--update优化&章节小结
qq_49121643的博客
02-01 454
update优化+小结
23.进阶-索引-使用规则-最左前缀法则、、索引失效的情况、、覆盖索引、、回表查询、、
qq_41577703的博客
12-26 986
企业ID字段作为第一个字段：在联合索引中，企业ID通常是最合适的第一个字段，因为它能够高效地缩小查询范围。选择性高的字段优先：选择性高的字段放在前面能够更好地发挥索引的性能，尤其是当查询条件经常以这个字段为筛选条件时。注意索引的适用性：索引的顺序必须考虑到常见的查询模式，以确保索引能够被有效利用。如果查询条件常常涉及多个字段，你可以根据查询频率调整索引的字段顺序。简而言之，把企业ID字段放在联合索引的第一位是合理的，并且符合数据库查询优化的原则。mysql如何根据数据分布判断是否走索引。
MySQL进阶-排序优化&分组优化
weixin_64133130的博客
03-14 948
在MySQL中，支持两种排序方式，分别是FileSort和Index排序。Index 排序中，索引可以保证数据的有序性，不需要再进行排序，效率更高。FileSort 排序则一般在内存中进行排序，占用CPU较多。如果待排结果较大，会产生临时文件 I/O 到磁盘进行排序的情况，效率较低。SQL 中，可以在 WHERE 子句和 ORDER BY 子句中使用索引，避免全表扫描，在 ORDER BY 子句。当然，某些情况下全表扫描，或者 FileSort 排序不一定比索引慢。但总的来说，尽量使用。
17.进阶-索引、慢查询日志、
qq_41577703的博客
12-25 1062
在联合索引中，字段的顺序是有讲究的在联合索引中，字段的顺序是有讲究的在数据库中的联合索引（也叫复合索引）中，字段的顺序确实非常重要，因为它直接影响索引的效率和查询性能。正确的字段顺序能够显著提高查询的速度，而错误的顺序则可能导致查询无法利用索引，或者索引的效率大打折扣。
05 SQL进阶 -- 复杂查询方法 -- 视图与子查询
在科技的浪潮中，我们寻找着创新的火种，在代码的海洋里，我们编织着智慧的网。腾飞开源，就是这样一个由技术精英汇聚而成的博客平台，我们致力于分享在Java、Python、IoT和人工智能等领域的最新研究成果和实战经验。 在腾飞开源的博客上，你会看到紧跟技术前
04-13 1025
视图是一个虚拟的表，不同于直接操作数据表，视图是依据SELECT语句来创建的（会在下面具体介绍），所以操作视图时会根据创建视图的SELECT语句生成一张虚拟表，然后在这张虚拟表上做SQL操作。子查询指一个查询语句嵌套在另一个查询语句内部的查询，这个特性从 MySQL 4.1 开始引入，在 SELECT 子句中先计算子查询，子查询结果作为外层另一个查询的过滤条件，查询可以基于一个表或者多个表。
进阶-存储引擎、索引、SQL优化、视图
qq_53931116的博客
04-13 194
不指定时，默认为InnoDB引擎 https://blog.csdn.net/lzb348110175/article/details/106575270注：此阶段可以参考https://blog.csdn.net/weixin_45410366/article/details/127147107二叉树和红黑树的弊端： ！中间值向上分裂B+ 树非叶子节点上是不存储数据的，仅存储键值，而 B 树节点中不仅存储键值，也会存储数据因为 B+ 树索引的所有数据均存储在叶子节点，而且数据是按照顺序排列的它的向上裂变是
linux进阶-MySQL日志小结
Nanjing_bokebi的博客
11-26 542
MySQL日志小结 文章目录MySQL日志小结事务日志 transaction log错误日志通用日志慢查询日志中继日志二进制日志二进制日志记录格式二进制日志相关的服务器变量mysqlbinlog : 二进制日志的客户端命令工具二进制日志时间的格式清除指定二进制日志 大家好，我们又见面了！ 事务日志 transaction log 事务日志的写入类型为"追加"，因此其操作为"顺序I...
SQL进阶技巧：如何用倍数小表优化数据倾斜？
石榴姐yyds
03-05 950
本文给出了一种利用倍数小表优化数据倾斜的一种通用方法，该方法适用场景为数据倾斜时不能用mapjoin的时候，也就是集群资源不足时候，通过该方法能够有效缓解数据倾斜，但不能根除数据倾斜。处理数据倾斜最好的方法还是采用分治思想，利用mapjoin一分为二的处理，倾斜key单独走mapjoin，非倾斜key走reduce join，最终将数据union all起来，采用mapjoin的方法切断了shuffle过程，也就没有数据倾斜这一说，缺点耗资源，前提是集群资源足够条件下，且满足mapjoin的条件。
Shell脚本源码安装Redis、MySQL、Mongodb、PostgreSQL（无报错版）
2401_86247463的博客
08-22 195
本文提供了四个数据库的自动化安装脚本，包括Redis 7.4.2、MySQL 8.0、MongoDB 6.0.20和PostgreSQL 17.4。这些脚本均采用Bash编写，具有以下特点： 标准化安装流程：自动检测依赖、创建专用用户/组、配置目录权限、设置环境变量 安全配置：默认开放必要端口，并提供安全提示（如Redis无密码警告） 服务管理：自动创建systemd服务单元，支持开机自启 日志记录：详细的安装过程记录和状态检查 配置优化：针对生产环境进行基础参数调优 每个脚本均包含颜色输出、错误处理和安装
PL/SQL增删查改
i2784300313的博客
08-20 714
PL/SQL是Oracle数据库的过程化扩展，通过执行DDL语句修改数据库结构，可以直接在PL/SQL块中创建表、修改字段、添加索引等。
12 SQL进阶-锁（8.20）
最新发布
m0_56327159的博客
08-23 585
全局锁、表级锁、行级锁
高级SQL优化 | 告别 Hive 中 GROUP BY 的大 KEY 数据倾斜！PawSQL 自适应优化算法详解
PawSQL的博客
08-22 664
摘要：PawSQL的GroupSkewedOptimization算法通过两阶段聚合解决Hive数据倾斜问题。该算法对热点数据先加盐分流（随机分成256组），再合并聚合，有效避免单Reducer处理大分组导致的性能瓶颈。支持COUNT/SUM/AVG等标准聚合函数的智能重写，如将AVG拆解为SUM/COUNT计算。适用于电商、金融等存在严重数据倾斜的分组统计场景，自动优化无需人工干预，显著提升查询效率。
MyBatis 动态查询语句详解：让 SQL 更灵活可控
Java是世界上最好的语言
08-20 1159
在日常的数据库操作中，我们经常会遇到需要根据不同条件拼接 SQL 语句的场景。比如查询用户时，可能需要根据姓名、年龄、性别等多个条件进行筛选，而这些条件往往是动态变化的 —— 有时需要按姓名查，有时需要按年龄查，有时又需要组合多个条件。如果手动拼接 SQL，不仅容易出错，还会让代码变得臃肿难维护。MyBatis 的动态查询语句正是为解决这一问题而生，它能根据参数的不同自动拼接 SQL 片段，让 SQL 编写更加灵活高效。
SQL184 近三个月未完成试卷数为0的用户完成情况
weixin_68458989的博客
08-22 798
技术点说明应用场景提取年月，用于时间维度聚合按月分析用户行为将数据从“记录级”升到“用户+月级”汇总每月指标统计非空值数量 → 完成数过滤未完成记录标记并统计特定状态（如未完成）状态检测对时间倒序排名，取最近N期最近N个月分析CTE 公共表表达式分步处理复杂逻辑uid NOT IN (子查询)排除满足条件的用户黑名单过滤。
2025-06-07 11:33:28.426 INFO 20556 --- [ main] com.SpringbootSchemaApplication : Starting SpringbootSchemaApplication on DESKTOP-SRNE882 with PID 20556 (started by zhaobingchao in C:\Graduation Design\3817基于SpringBoot Vue单位考勤管理系统\项目源码\springbootmqwbe) 2025-06-07 11:33:28.431 INFO 20556 --- [ main] com.SpringbootSchemaApplication : No active profile set, falling back to default profiles: default 2025-06-07 11:33:34.054 INFO 20556 --- [ main] o.s.b.w.embedded.tomcat.TomcatWebServer : Tomcat initialized with port(s): 8080 (http) 2025-06-07 11:33:34.072 INFO 20556 --- [ main] o.apache.catalina.core.StandardService : Starting service [Tomcat] 2025-06-07 11:33:34.073 INFO 20556 --- [ main] org.apache.catalina.core.StandardEngine : Starting Servlet engine: [Apache Tomcat/9.0.29] 2025-06-07 11:33:34.076 INFO 20556 --- [ main] o.a.catalina.core.AprLifecycleListener : Loaded APR based Apache Tomcat Native library [1.3.0] using APR version [1.7.4]. 2025-06-07 11:33:34.076 INFO 20556 --- [ main] o.a.catalina.core.AprLifecycleListener : APR capabilities: IPv6 [true], sendfile [true], accept filters [false], random [true]. 2025-06-07 11:33:34.077 INFO 20556 --- [ main] o.a.catalina.core.AprLifecycleListener : APR/OpenSSL configuration: useAprConnector [false], useOpenSSL [true] 2025-06-07 11:33:34.104 INFO 20556 --- [ main] o.a.catalina.core.AprLifecycleListener : OpenSSL successfully initialized [OpenSSL 3.0.13 30 Jan 2024] 2025-06-07 11:33:34.445 INFO 20556 --- [ main] o.a.c.c.C.[.[.[/springbootmqwbe] : Initializing Spring embedded WebApplicationContext 2025-06-07 11:33:34.446 INFO 20556 --- [ main] o.s.web.context.ContextLoader : Root WebApplicationContext: initialization completed in 5861 ms 2025-06-07 11:33:34.850 INFO 20556 --- [ main] com.zaxxer.hikari.HikariDataSource : HikariPool-1 - Sta
06-08
### **小结** 1. **核心关注点**：Tomcat端口/线程池状态 + HikariCP连接数/URL配置 2. **调试技巧**：`-Ddebug=true`输出Spring Boot内部决策链 3. **性能调优依据**：通过日志中的时间消耗定位瓶颈（如数据库...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值