当前位置：首页 > news >正文

sql优化进阶

news 2025/10/12 10:12:47

一、基本概念：

1、分区：是将一个大表按照物理维度分割成多个更小、更易管理的部分过程；

2、举例：你有一个包含了数年销售记录的大表sales表，随着时间推移，表的数据量会非常的大，查询和维护成本会非常高，分区相当于给这个表安装了多个抽屉；

逻辑上：你仍然只有一个sales表，你可以像以前一样SELECT * FROM sales ...。
物理上：数据库将数据存储在不同的物理分区中。例如，2023年的数据在一个分区（一个抽屉），2024年的数据在另一个分区。

这样做的好处当你查询2024年某个分区的数据时，数据库可以智能的扫描2024分区的数据，无需对整个表进行扫描，极大的增加了查询性能。

二、分区的主要类型：

2.1、范围分区：

按照某个列的值的范围进行数据划分，一般按照时间和数值进行分区

示例：按sale_date字段分区。
- 分区 p2023： sale_date < '2024-01-01'
- 分区 p2024： sale_date >= '2024-01-01' AND sale_date < '2025-01-01'
- 分区 p2025： sale_date >= '2025-01-01'

2.2、列表分区：

按照某个列具体的值来划分数据，适用于离散和可枚举的值，如地区、状态

示例：按region字段分区。
- 分区 p_east： region IN ('Shanghai', 'Jiangsu', 'Zhejiang')
- 分区 p_west： region IN ('Sichuan', 'Chongqing')
- 分区 p_north： region IN ('Beijing', 'Tianjin')

2.3、HASH分区：

根据数据库对分区键的哈希值来随机分配数据。目的是将数据均匀分布到指定数量的分区中。

示例：按user_id字段哈希分区。
- 你指定分成4个分区，数据库会自动计算HASH(user_id) % 4，将数据均匀分配到4个分区中。

2.4、复合分区：

结合上述两种或多种分区策略。例如，先按范围分区，再在每个范围内按列表或哈希分区。

三、实际落地操作：

3.1、范围分区：

-- 1. 创建分区表
CREATE TABLE sales (sale_id INT NOT NULL,product_id INT,sale_date DATE,amount DECIMAL(10, 2)
)
PARTITION BY RANGE (YEAR(sale_date)) ( -- 使用YEAR函数提取年份作为分区键PARTITION p2020 VALUES LESS THAN (2021),PARTITION p2021 VALUES LESS THAN (2022),PARTITION p2022 VALUES LESS THAN (2023),PARTITION p2023 VALUES LESS THAN (2024),PARTITION p_future VALUES LESS THAN MAXVALUE -- 用于存储超出定义范围的数据
);

执行计划分析：

使用 SELECT * FROM sales PARTITION (p2023) 或者 SELECT * FROM sales WHERE sale_date = '2023-10-20'

EXPLAIN SELECT * FROM sales WHERE sale_date = '2023-10-20';

在执行计划中只扫描了`partitions： p2023`，表示它只扫描了p2023分区。

3.2、管理分区：

-- 添加新分区（例如为2024年）
ALTER TABLE sales ADD PARTITION (PARTITION p2024 VALUES LESS THAN (2025)
);-- 删除旧分区（这会删除整个分区的数据！请谨慎操作）
ALTER TABLE sales DROP PARTITION p2020;

四、分区的优缺点：