OceanBase数据库
OceanBase数据库
1 默认表和分区表
建立表时默认不是分区表,需要在建表语句中通过特定语法设置才能创建分区表 ,以下是创建不同类型分区表的方式:
分区表是一种将大表的数据按照一定规则划分成多个更小、更容易管理的数据子集(即分区)的技术。
1.1 分区的目的和优势
- 提高查询性能:
当查询只涉及表中的部分数据时,通过分区可以快速定位到相关分区,避免扫描整个大表。例如,一张存储了多年销售记录的表,按年份进行分区后,查询某一年的销售数据,数据库只需访问对应年份的分区,减少了数据扫描范围,提升了查询速度。 - 增强可管理性:
大表的数据维护操作(如备份、恢复、删除历史数据等)可能会耗时较长。通过分区,可针对特定分区进行操作,提高管理效率。比如,定期删除不再需要的历史数据分区,而不影响其他分区的正常使用。 - 数据归档和存储优化:
可以将不同访问频率的数据存储在不同类型的存储介质上。例如,将近期频繁访问的数据放在高性能存储上,将历史低频访问的数据迁移到低成本存储上,在满足业务需求的同时,降低存储成本。
1.2 常见的分区类型
- (1)范围分区:
这是最常用的分区方式,按照某个列或表达式的取值范围来划分分区。例如,在订单表中,按照订单日期列进行范围分区,将每个月的数据划分到一个单独的分区中 ,创建语句示例如下:
范围分区是依据某列或表达式的值域范围来划分分区,常见于按时间(如日期、月份)等有序数据进行分区。
CREATE TABLE orders (order_id INT,order_date DATE,customer_id INT,amount DECIMAL(10, 2)
)
PARTITION BY RANGE (order_date) (PARTITION p202401 VALUES LESS THAN ('2024-02-01'),PARTITION p202402 VALUES LESS THAN ('2024-03-01'),-- 可继续添加更多分区
);
上述语句中,PARTITION BY RANGE 指明按范围分区,后面括号内是具体的分区定义,每个 PARTITION 子句表示一个分区。
- (2)创建列表分区表
列表分区根据某列的具体取值来划分分区,适合数据取值较为固定、明确的场景,比如根据地区、部门等。
例如,在员工表中,根据员工所在部门进行列表分区,假设公司有销售部、研发部、财务部等,创建语句示例如下:
CREATE TABLE employees (employee_id INT,employee_name VARCHAR(100),department VARCHAR(50)
)
PARTITION BY LIST (department) (PARTITION sales VALUES IN ('销售部'),PARTITION rnd VALUES IN ('研发部'),PARTITION finance VALUES IN ('财务部')
);
这里 PARTITION BY LIST 表明是列表分区,每个 PARTITION 子句里的 VALUES IN 指定了该分区对应的取值。
- (3)创建哈希分区表
哈希分区通过对某列或表达式计算哈希值,依据哈希值均匀地分布数据到各个分区,适用于数据分布需要均匀且无明显分区规则的情况,示例如下:
-- 创建一个按用户ID进行哈希分区的用户表
CREATE TABLE users (user_id INT,user_name VARCHAR(100),email VARCHAR(200)
)
-- 使用PARTITION BY HASH指定按哈希分区,分区键为user_id
PARTITION BY HASH (user_id)
-- PARTITIONS子句指定分区数量为4
PARTITIONS 4;
PARTITION BY HASH 说明是哈希分区方式,PARTITIONS 后面跟的数字表示创建的分区数量。
1.3 索引类型
(1)支持的索引类型
- B-Tree 索引:这是最常用的索引类型,适用于等值查询和范围查询。例如,在一个包含用户信息的表中,对 user_id 列创建 B-Tree 索引,能加速根据 user_id 进行的查询操作。
- 位图索引:适合于低基数列(即列中唯一值较少的情况),比如性别列(通常只有 “男”“女” 两个取值 )。位图索引可以提高涉及该列的多条件组合查询的效率。
- 函数索引:基于函数或表达式创建的索引。当查询中经常使用某个函数或表达式对列进行计算时,创建函数索引可以避免每次查询都重复计算,提升查询性能。例如,在一个存储商品价格的表中,若经常需要查询打八折后的价格,可创建基于价格列乘以 0.8 这个表达式的函数索引。
-- 创建普通的B-Tree索引
CREATE INDEX idx_user_name ON users (user_name); -- 创建唯一索引
CREATE UNIQUE INDEX idx_unique_email ON users (email); -- 创建位图索引
CREATE BITMAP INDEX idx_gender ON users (gender);
(2)本地索引和全局索引
- 本地索引:
每个分区都有自己独立的索引副本,与分区紧密关联。创建本地索引时,只需要在创建索引语句中正常指定表和列,OceanBase 会自动根据分区表结构为每个分区创建对应的索引副本。
语法:
-- 假设orders表是分区表,按order_date进行范围分区
-- 创建基于order_date列的本地索引(名字:idx_order_date_local)
CREATE INDEX idx_order_date_local ON orders (order_date);
OceanBase 会为 orders 表的每个分区都创建一个关于 order_date 列的索引
- 删除某个分区索引
DROP INDEX idx_order_date_local ON orders;
- 全局索引:
独立于分区存在,跨所有分区维护索引信息。创建全局索引时,需要使用 GLOBAL 关键字来明确指定。
-- 假设orders表是分区表,按order_date进行范围分区
-- 创建基于customer_id列的全局索引
CREATE INDEX idx_customer_id_global ON orders (customer_id) GLOBAL;
(3)已有普通表转换为分区表
如果已经存在普通表,也可以通过 ALTER TABLE 语句将其转换为分区表,但这要求表中数据符合转换后的分区规则。例如,要将已有的 orders 表转换为按 order_date 范围分区的表,可以这样操作:
-- 假设orders表已有数据且包含order_date列
ALTER TABLE orders
-- 重新定义表结构,转换为范围分区表
PARTITION BY RANGE (order_date) (PARTITION p2023 VALUES LESS THAN ('2024-01-01'), PARTITION p2024 VALUES LESS THAN ('2025-01-01')
);
1.4 删除索引
(1)删除分区后,分区表上的索引也会删除
(2)删除分区后,建立在分区表上的全局索引会失效,不会删除
- 删除全局索引并重新创建索引
-- 1. 删除全局索引,假设全局索引名为 idx_global_prp_claimgather_info(需替换为实际索引名)
DROP INDEX idx_global_prp_claimgather_info ON prp_claimgather_info;-- 2. 删除分区
ALTER TABLE prp_claimgather_info DROP PARTITION p202412;-- 3. 重新创建全局索引
CREATE INDEX idx_global_prp_claimgather_info ON prp_claimgather_info (column1, column2,...) -- 替换为实际索引列
GLOBAL;
- 重建失效索引
若无需修改索引定义,更高效的方式是直接重建失效的全局索引,而非删除后重建。语法如下:
ALTER INDEX index_name REBUILD GLOBAL;
可通过以下语句确认索引状态(是否失效):
SELECT index_name, status FROM user_indexes WHERE table_name = 'TABLE_NAME';
1.5 单节点、集群部署、租户
- OceanBase 是蚂蚁集团自主研发的分布式关系型数据库,支持高可用、强一致性,可部署为单节点(测试 / 开发环境常用)或多节点集群(生产环境常用,保证高可用)
- 一个节点可有多个租户
含义:在 OceanBase 的单节点部署中,一个物理节点(服务器)可以创建多个 “租户”。:
租户是 OceanBase 的核心概念,类似传统数据库中的 “实例”,是资源隔离的基本单位。每个租户有独立的用户、数据库、表空间等,可分配不同的 CPU、内存、存储资源。
多租户设计让 OceanBase 能在单一物理节点或集群上为多个业务(或环境)提供隔离的数据库服务,提高资源利用率。
1.6 数据库版本
社区版和企业版(企业版一般会有 Enterprise 字眼)
通过
select version()
命令查询到数据库版本为5.7.25-OceanBase-v4.2.1.6,且版本中不含 “Enterprise”(企业版标识),因此判断为社区版;同时说明该 OceanBase 实例兼容 MySQL 5.7.25 协议;
ps -ef|grep observer
是用于查看 OceanBase 核心进程 “observer” 是否运行的命令
- 协议兼容:
OceanBase 支持兼容 MySQL、Oracle 等主流数据库协议,这里兼容 MySQL 5.7.25 协议意味着可以使用 MySQL 的客户端、JDBC 驱动等工具连接和操作 OceanBase,降低迁移成本。
1.7 java连接oceanbase
java使用mysql jdbc连接OceanBase数据库 用户名:用户名@租户名#集群名
java使用mysql jdbc连接OceanBase数据库 用户名:用户名@租户名#集群名datasource:type: com.alibaba.druid.pool.DruidDataSourcedriver-class-name: com.mysql.cj.jdbc.Driverurl: jdbc:mysql://10.36.0.85:2883/picc_xwlp?useUnicode=true&characterEncoding=UTF-8&useSSL=falseusername: xwlp_claim@*****6_zh#ob_test_btx_20240416password: f7^Kd4%$L
用户名:xwlp_claim