当前位置: 首页 > news >正文

如何设计一个会员码表!唯一索引的使用,字段区分度不高如何处理

1.会员码表的设计

设计实现奖励下发业务中爱奇艺会员兑换码表,为相应字段添加合适索引提升表查询效率,保证业务高效运行。

  1. 索引设计分析:

  • uniq_code: 唯一索引确保兑换码不会重复使用

  • idx_has_rewrd: 普通索引用于快速查询未使用的兑换码

  • id,createTime,updateTime等使用bigInt 是否使用使用tinInt 参考其他设计

完成奖励任务中爱奇艺兑换码表的设计与创建

CREATE TABLE reward_iqy (id BIGINT UNSIGNED NOT NULL PRIMARY KEY AUTO_INCREMENT COMMENT '主键id',code VARCHAR(100) NOT NULL COMMENT '爱奇艺的码',country VARCHAR(100) NOT NULL COMMENT '奖励所属国家',has_reward TINYINT UNSIGNED NOT NULL COMMENT '是否已发奖',//参考其他表的设计使用TINYINTreward_uid BIGINT UNSIGNED NOT NULL COMMENT 'uid记录使用该兑换码的用户ID',createat BIGINT UNSIGNED NOT NULL COMMENT '创建时间',updateat BIGINT UNSIGNED NOT NULL COMMENT '更新时间'
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT '爱奇艺码表';
​
ALTER TABLE reward_iqy ADD UNIQUE uniq_code(code);
ALTER TABLE reward_iqy ADD INDEX idx_has_rewrd(has_reward);

这个表的主要作用是:

  1. 兑换码管理

  • 存储爱奇艺会员的兑换码库存

  • 每个code是唯一的(通过uniq_code索引保证)

  • 按国家区分不同的兑换码

  1. 兑换状态追踪

  • has_reward字段标记码是否已被使用

  • reward_uid记录使用该兑换码的用户ID

  • 添加了idx_has_rewrd索引以便快速查询可用的兑换码

  1. 业务流程

  • 当任务系统需要发放爱奇艺会员奖励时,会从这个表中获取未使用的兑换码

  • 发放时会更新has_reward和reward_uid,记录兑换码的使用情况

  • 可以追踪每个兑换码的发放时间和使用用户

  1. 与任务系统的关联

  • 当task_config_storage中配置的奖励类型是爱奇艺会员时

  • 系统会从该表中获取对应国家的未使用兑换码

  • 通过task_reward表记录发放的兑换码信息

这个表本质上是一个奖品库存管理表,专门用于管理和追踪爱奇艺会员兑换码的使用情况,是任务奖励系统的一个重要组成部分。

字段区分度不高,将区分度高的字段放在前区分度不高的字段放在后面组成复合索引

将是否发奖字段(hasreward)和会员码字段(code)添加为**复合索引是可行的,并且可能有几个好处:**

好处:

  1. 提高查询效率

    1. 如果您的查询经常同时涉及这两个字段,比如查询某个会员码是否已经发奖,复合索引可以显著提高查询效率。

  2. 减少索引数量

    1. 相比于为每个字段单独创建索引,复合索引可以减少索引的数量,从而减少存储空间的使用和维护成本。

  3. 覆盖查询

    1. 如果查询只需要这两个字段的数据,复合索引可以作为覆盖索引,直接从索引中获取数据,而不需要回表查询,进一步提高查询效率。

考虑因素:

  1. 查询模式

    1. 确保您的查询模式与复合索引匹配。复合索引的最左前缀原则意味着查询时必须首先使用索引的第一个字段(在本例中为hasreward)。

  2. 数据分布

    1. 考虑hasreward字段的数据分布。如果大部分记录都是同一状态(如大部分未发奖),则索引可能不会特别有效。

  3. 写操作性能

    1. 添加索引会稍微影响插入、更新和删除操作的性能,因为索引需要维护。

实现示例:

sql

复制

CREATE INDEX idx_hasreward_code ON rewardiqy (hasreward, code);

注意事项:

  • 索引顺序:在复合索引中,字段的顺序很重要。根据您的查询模式,确定哪个字段应该放在前面。如果大部分查询都是基于会员码来查询是否发奖,那么将code字段放在前面可能更合适。

  • 索引维护:定期监控和维护索引,确保它们对性能的积极影响。

结论:

添加hasreward和code的复合索引是一个合理的选择,特别是如果您的查询模式经常同时涉及这两个字段。然而,最终的决定应该基于实际的应用场景、数据分布和性能测试结果。

这个方案的目的是优化查询性能,尤其是针对 has_reward 的低区分度问题。通过添加复合索引来加速查询操作,特别是在 has_rewardcode 一起查询时,可以提高查询效率。

方案分析:

  1. 复合索引:由于 has_reward 的区分度不高,单独为 has_reward 创建索引可能不会带来显著的性能提升。但是,将 codehas_reward 这两个字段组合成复合索引,可以帮助加速基于这两个字段的查询。查询的高效性依赖于这两个字段一起进行查询时的组合索引。

  2. 查询未使用的会员码:我们需要从表中查找未使用的会员码(has_reward = 0)并且随机选择一个兑换码。这种场景下,复合索引对于 has_rewardcode 的组合有助于提高查询速度,尤其是在数据量较大时。

方案可行性:

  • 在查询 has_reward = 0 的记录时,添加 code 字段作为索引的一部分会提高检索效率,尤其在要随机挑选某个未使用的会员码时,能更快速地检索到所需的数据。

  • 通过复合索引,不仅能提高查询速度,还能通过扫描更少的记录来得到未使用的兑换码,从而减少 I/O 操作。

复合索引设计:

我们可以为 codehas_reward 字段创建复合索引:

ALTER TABLE reward_iqy ADD INDEX idx_code_has_reward (has_reward, code);

这样,在查询时,MySQL 会优先使用复合索引,提升查询性能。

查询 SQL 示例:

假设我们需要从未使用的会员码中随机选择一个(has_reward = 0)。我们可以使用以下 SQL:

SELECT code 
FROM reward_iqy
WHERE has_reward = 0
ORDER BY RAND()
LIMIT 1;

解释:

  • WHERE has_reward = 0:查询未使用的兑换码(即 has_reward 为 0)。

  • ORDER BY RAND():随机排序,确保查询到的兑换码是随机的。

  • LIMIT 1:只返回一条记录。

为什么使用复合索引 idx_code_has_reward

  • 使用复合索引 idx_code_has_reward (has_reward, code) 可以提高查询速度,尤其是在大数据量的情况下。

  • 当执行 WHERE has_reward = 0 时,数据库会利用 has_reward 字段加速查询。然后,code 字段会作为排序的额外条件,进一步提高效率,尤其是在查询的时候会涉及到随机排序。

可能的改进:

  • 避免 ORDER BY RAND() 的性能问题ORDER BY RAND() 在大数据量时可能会导致性能瓶颈,因为 MySQL 需要为每条记录生成一个随机值,并进行排序。一个替代方案是使用 LIMIT 来限制返回的记录数,再随机选取。

    另一种随机查询的优化方法

    • 如果表中的记录量非常大,直接使用 ORDER BY RAND() 会很慢。一个优化方式是先从未使用的会员码中随机选择一个 ID,然后再查询该 ID 对应的 code

      例如,可以先通过以下 SQL 随机获取一个 id

      SELECT id
      FROM reward_iqy
      WHERE has_reward = 0
      ORDER BY RAND()
      LIMIT 1;
      

      然后再用这个 id 获取对应的 code

      SELECT code
      FROM reward_iqy
      WHERE id = <random_id>;
      

总结:

  • 可行性:复合索引 idx_code_has_reward (has_reward, code) 是一种有效的优化方案,可以加速基于 has_rewardcode 的查询,尤其是在有大量数据时。

  • 查询优化:使用复合索引能显著提高查询效率,避免了对低区分度字段(has_reward)的单独索引过度依赖,提高了检索未使用兑换码的性能。

这两个查询的效率差异主要来源于 ORDER BY RAND() 的使用与否。在查询中,ORDER BY RAND() 会增加额外的计算负担,因为它会为每一行生成一个随机值,然后按这些值对结果进行排序。以下是两者的详细比较:

1. SELECT code FROM reward_iqy WHERE has_reward = 0 ORDER BY RAND() LIMIT 1;

  • ORDER BY RAND():每行都会生成一个随机值,并且数据库需要对所有符合条件的记录进行排序。对于大数据量的表,排序的计算量会很大。

  • 执行成本RAND() 需要为每行记录生成一个随机数并进行排序,导致查询需要更多的 CPU 和 I/O 资源,尤其是在数据量较大时。ORDER BY RAND() 在这种情况下性能会明显降低。

性能瓶颈:
  • 随机数的生成和排序:即使我们只查询一条记录,整个 WHERE has_reward = 0 的条件查询都会先筛选出所有未使用的兑换码,然后将它们进行排序。排序操作的复杂度是 O(n log n),对于数据量大的表,这会非常耗时。

2. SELECT code FROM reward_iqy WHERE has_reward = 0 LIMIT 1;

  • 没有 ORDER BY RAND():查询直接通过 WHERE 条件来筛选数据,且仅返回一条记录 (LIMIT 1)。

  • 执行成本:不进行排序,查询只需要找到第一个符合条件的记录。这个查询的效率会比第一个查询高很多,因为它只涉及扫描符合条件的记录并返回第一条,无需做额外的排序。

性能优点:
  • 查询速度:查询直接通过索引扫描获取第一条符合条件的记录,避免了排序操作。查询的复杂度是 O(n) 或 O(log n)(取决于是否有合适的索引),对于大数据集来说,效率要高得多。

总结:

  • ORDER BY RAND() 会显著降低查询效率,尤其在数据量较大时,因为它需要为每一行生成随机数并进行排序。

  • LIMIT 1 只返回一条记录,并且不进行排序,因此在大多数情况下,这种查询方式的效率会远高于 ORDER BY RAND()

结论:

SELECT code FROM reward_iqy WHERE has_reward = 0 LIMIT 1; 的查询效率 更高,因为它避免了不必要的排序操作。如果只需要获取一条记录,并且不要求随机选取某个特定记录,推荐使用不带 ORDER BY RAND() 的查询。

如果需要随机挑选一条记录,且数据量较大,考虑优化 ORDER BY RAND() 的使用方式(例如,通过先随机选择 ID,再查询对应的记录)。

相关文章:

  • 【AI面试准备】深度学习、大模型原理,算法项目经验
  • jthread是否可以完全取代thread?
  • Java高频面试之并发编程-11
  • Git 操作命令
  • 1.PowerBi保姆级安装教程
  • 驱动开发硬核特训 · Day 24(下篇):深入理解 Linux 内核时钟子系统结构
  • PSO详解变体上新!新型混合蛾焰粒子群优化(MFPSO)算法
  • 如何搭建一个简单的文件服务器的方法
  • 使用 DBeaver 将数据从 PostgreSQL 导出到 SQLite
  • Kotlin 常见问题
  • 深度解析 MyBatis`@TableField(typeHandler = JacksonTypeHandler.class)`:优雅处理复杂数据存储
  • 从 BERT 到 GPT:Encoder 的 “全局视野” 如何喂饱 Decoder 的 “逐词纠结”
  • 【语法】C++继承中遇到的问题及解决方法
  • E2E 测试
  • JavaScript 相关知识点整理
  • C++ 红黑树
  • 【Vagrant+VirtualBox创建自动化虚拟环境】Ansible测试Playbook
  • git fetch和git pull的区别
  • ​【空间数据分析】缓冲区分析--泰森多边形(Voronoi Diagram)-arcgis操作
  • Vue使用Sortablejs拖拽排序 视图显示与数据不一致、拖拽结束后回跳问题
  • 启程回家!神十九轨道舱与返回舱成功分离
  • 国家能源局通报上月投诉情况:赤峰有群众反映电费异常增高,已退费
  • 中国科学院院士张泽民已任重庆医科大学校长
  • 软硬件企业集中发布未成年人模式使用手册
  • 青海西宁市城西区副区长于媛媛主动投案,接受审查调查
  • 83岁连丽如每周登台说书,还上了15堂连派评书课