广告
返回顶部
首页 > 资讯 > 数据库 >MySQL怎么给字符串字段加索引
  • 422
分享到

MySQL怎么给字符串字段加索引

2024-04-02 19:04:59 422人浏览 安东尼
摘要

假设,你现在维护一个支持邮箱登录的系统,用户表是这么定义的: create table SUser(  ID bigint unsigned primary key,  email

假设,你现在维护一个支持邮箱登录的系统,用户表是这么定义的:

create table SUser(
 ID bigint unsigned primary key,
 email varchar(64), 
 ... 
 )engine=innodb;

由于要使用邮箱登录,所以业务代码中一定会出现类似于这样的语句:

select f1, f2 from SUser where email='xxx';

如果 email 这个字段上没有索引,那么这个语句就只能做全表扫描。

1)那我可以在邮箱地址这个字段上面建索引吗?

  • Mysql 是支持前缀索引的,可以定义字符串的一部分作为索引

2)如果创建索引的语句不指定前缀长度,那么会怎么样?

  • 索引就会包含整个字符串

3)能举例来说明一下吗?

alter table SUser add index index1(email);
 或
 alter table SUser add index index2(email(6));
  • index1 索引里面,包含了每个记录的整个字符串

  • index2 索引里面,对于每个记录都是只取前 6 个字节

4)这两种不同的定义在数据结构和存储上有什么区别呢?

明显看出email(6) 这个索引结构占用的空间会更小

5)email(6) 这个索引结构有什么缺点吗?

  • 可能会增加额外的记录扫描次数

6)下面这个语句,在这两个索引定义下分别是怎么执行的?

select id,name,email from SUser where email='zhangssxyz@xxx.com';

index1(即 email 整个字符串的索引结构),执行顺序

  • 从 index1 索引树找到满足索引值是’zhangssxyz@xxx.com’的这条记录,取得 ID2 的值;

  • 回表查到主键值是 ID2 的行,判断 email 的值是正确的,将这行记录加入结果集;

  • 继续在index索引树的下一条记录,发现已经不满足 email='zhangssxyz@xxx.com’的条件了,循环结束。

这个过程中,只需要回主键索引取一次数据,所以系统认为只扫描了一行。

index2(即 email(6) 索引结构),执行顺序

  • 从 index2 索引树找到满足索引值是’zhangs’的记录,找到的第一个是 ID1;

  • 到主键上查到主键值是 ID1 的行,判断出 email 的值不是’zhangssxyz@xxx.com’,这行记录丢弃;

  • 取 index2 上刚刚查到的位置的下一条记录,发现仍然是’zhangs’,取出 ID2,再到 ID 索引上取整行然后判断,这次值对了,将这行记录加入结果集;

  • 重复上一步,直到在 idxe2 上取到的值不是’zhangs’时,循环结束。

在这个过程中,要回主键索引取 4 次数据,也就是扫描了 4 行。

7)通过上面的对比,能得出什么结论?

  • 使用前缀索引后,可能会导致查询语句读数据的次数变多。

8)前缀索引真的一无是处吗?

  • 如果我们定义的 index2 不是 email(6) 而是 email(7),那满足前缀’zhangss’的记录只有一个,直接就查到 ID2了,只扫描一行就结束了。

9)那么使用前缀索引有哪些注意事项?

  • 长度选择合理

10)当要给字符串创建前缀索引时,我咋知道我该用多长的前缀索引呢?

  • 统计索引上有多少个不同的值来判断要使用多长的前缀。

11)怎样统计索引上有多少个不同的值?

select count(distinct email) as L from SUser;

12)拿到了索引对应的有多少个不同的值之后下一步该做什么?

  • 依次选取不同长度的前缀来看这个值

    select 
       count(distinct left(email,4))as L4,
       count(distinct left(email,5))as L5,
       count(distinct left(email,6))as L6,
       count(distinct left(email,7))as L7,
     from SUser;
  • 然后,在 L4~L7 中,找出第一个不小于 L * 95% 的值,说明通过这个索引可以找出百分之95以上的数据。

13)前缀索引对覆盖索引的影响是什么?

下面这个 sql 语句:

select id,email from SUser where email='zhangssxyz@xxx.com';

与前面例子中的 SQL 语句

select id,name,email from SUser where email='zhangssxyz@xxx.com';

相比,第一个语句只要求返回 id 和 email 字段。

  • 如果使用 index1(即 email 整个字符串的索引结构)的话,查email的话就能得到ID,那就不用回表了,这个就是覆盖索引。

  • 用 index2(即 email(6) 索引结构)的话,就不得不回到 ID 索引再去判断 email 字段的值。

14)那我把index2 的定义修改为 email(18) 的前缀索引不就行了?

  • 这个18是你自己定义的,系统不知道18这个长度是否已经大于我的email长度,所以它还是会回表去查一下验证。

总而言之:使用前缀索引就用不上覆盖索引对查询性能的优化了

15)对于类似于邮箱这样的字段来说,使用前缀索引的效果可能还不错。但是,遇到身份证这种前缀的区分度不够好的情况时,我们要怎么办呢?

  • 索引选取的要更长一些。

    • 但是所以越长的话,占的磁盘空间更大,相同的一页能放下的索引值就变少了,反而会影响查询效率。

16)如果我们能够确定业务需求里面只有按照身份证进行等值查询的需求,还有没有别的处理方法呢?

  • 既然正过来相同的多,那我就把它倒过来存。查询时候这样查

    select field_list from t where id_card = reverse('input_id_card_string');

    使用 的时候用count(distinct) 方法去做个验证

  • 使用 hash 字段。在表上再创建一个整数字段,来保存身份证的校验码,同时在这个字段上创建索引。

    alter table t add id_card_crc int unsigned, add index(id_card_crc);

    每次插入新记录的时候,都同时用 crc32() 这个函数得到校验码填到这个新字段。由于校验码可能存在冲突,也就是说两个不同的身份证号通过 crc32() 函数得到的结果可能是相同的,所以你的查询语句 where 部分要判断 id_card 的值是否精确相同。

    select field_list from t where id_card_crc=crc32('input_id_card_string') and id_card='input_id_card_string'

    这样,索引的长度变成了 4 个字节(int类型),比原来小了很多

17)使用倒序存储和使用 hash 字段这两种方法有什么异同点?

  • 相同点:都不支持范围查询

    • 倒序存储的字段上创建的索引是按照倒序字符串的方式排序的,已经没有办法利用索引方式查出身份证号码在[ID_X, ID_Y]的所有市民了。同样地,hash 字段的方式也只能支持等值查询。

  • 区别

    • 从占用的额外空间来看,倒序存储方式在主键索引上,不会消耗额外的存储空间,而 hash 字段方法需要增加一个字段。当然,倒序存储方式使用 4 个字节的前缀长度应该是不够的,如果再长一点,这个消耗跟额外这个 hash 字段也差不多抵消了。

    • 在 CPU 消耗方面,倒序方式每次写和读的时候,都需要额外调用一次 reverse 函数,而 hash 字段的方式需要额外调用一次 crc32() 函数。如果只从这两个函数的计算复杂度来看的话,reverse 函数额外消耗的 CPU 资源会更小些。

    • 从查询效率上看,使用 hash 字段方式的查询性能相对更稳定一些。因为 crc32 算出来的值虽然有冲突的概率,但是概率非常小,可以认为每次查询的平均扫描行数接近 1。而倒序存储方式毕竟还是用的前缀索引的方式,也就是说还是会增加扫描行数。

案例:如果你在维护一个学校的学生信息数据库,学生登录名的统一格式是”学号 @gmail.com", 而学号的规则是:十五位的数字,其中前三位是所在城市编号、第四到第六位是学校编号、第七位到第十位是入学年份、最后五位是顺序编号。

18)系统登录的时候都需要学生输入登录名和密码,验证正确后才能继续使用系统。就只考虑登录验证这个行为的话,你会怎么设计这个登录名的索引呢?

  • 一个学校每年预估2万新生,50年才100万记录,能节省多少空间,直接全字段索引。省去了开发转换及局限性风险,碰到超大量迫不得已再用后两种办法

  • 实际操作上直接全字段索引就行了,一个学校数据库的数据量和查询压力都不会大到哪儿去。 如果单从优化数据表的角度: \1. 后缀@gmail可以单独一个字段来存,或者用业务代码来保证, \2. 城市编号和学校编号估计也不会变,也可以用业务代码来配置 \3. 然后直接存年份和顺序编号就行了,这个字段可以全字段索引

 到此这篇关于mysql怎么给字符串字段加索引的文章就介绍到这了,更多相关MySQL字符串字段加索引内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

您可能感兴趣的文档:

--结束END--

本文标题: MySQL怎么给字符串字段加索引

本文链接: https://www.lsjlt.com/news/141434.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • MySQL怎么给字符串字段加索引
    假设,你现在维护一个支持邮箱登录的系统,用户表是这么定义的: create table SUser(  ID bigint unsigned primary key,  email ...
    99+
    2022-11-13
  • MySQL如何给字符串字段加索引
    这篇文章给大家分享的是有关MySQL如何给字符串字段加索引的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。假设,你现在维护一个支持邮箱登录的系统,用户表是这么定义的:create table S...
    99+
    2023-06-29
  • MySQL怎么给字符串加一个高效索引
    这篇文章主要介绍了MySQL怎么给字符串加一个高效索引的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇MySQL怎么给字符串加一个高效索引文章都会有所收获,下面我们一起来看看吧。需求在日常需求中,用户使用手机号或...
    99+
    2023-07-05
  • Mysql性能优化:如何给字符串加索引?
    导读 现代大部分的登录系统都支持邮箱、手机号码登录两种方式,那么如何在邮箱或者手机号码这个字符串上建立索引才能保证性能最佳呢? 今天这篇文章就来探讨一下在Mysql中如何给一个字符串加索引才能达到性能最佳。 本文首发于作...
    99+
    2018-08-13
    Mysql性能优化:如何给字符串加索引?
  • oracle怎么给表字段添加索引
    要给表字段添加索引,可以使用Oracle的CREATE INDEX语句。语法如下:```CREATE INDEX index_nam...
    99+
    2023-08-28
    oracle
  • MySQL给字符串加一个高效索引的实现
    目录需求前缀索引倒序+前缀索引总结需求 在日常需求中,用户使用手机号或者邮箱登录某一个系统,是一个很常见的操作,那如何在类似手机号或者邮箱这样的字段上建立一个合理的索引呢? 前缀索引 前缀索引,就是以一个字段值的一部分作...
    99+
    2023-03-20
    MySQL字符串高效索引 MySQL字符串索引
  • MySQL中怎么利用字符串做索引
    今天就跟大家聊聊有关MySQL中怎么利用字符串做索引,可能很多人都不太了解,为了让大家更加了解,小编给大家总结了以下内容,希望大家根据这篇文章可以有所收获。在PC互联网时代,我们的很多账户都需要绑定电子邮箱...
    99+
    2022-10-18
  • MySQL字符串前缀索引使用
    目录1. 前缀索引与全部索引概念2. 前缀索引与全部索引数据结构3. 前缀索引与全部索引引执行流程4. 前缀索引长度如何取舍5. 前缀索引对覆盖索引的影响6. 其他解决方案7. 梳理...
    99+
    2023-02-03
    MySQL字符串前缀索引 MySQL 前缀索引
  • python字符串索引怎么使用
    本文小编为大家详细介绍“python字符串索引怎么使用”,内容详细,步骤清晰,细节处理妥当,希望这篇“python字符串索引怎么使用”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。1、从形式上不难看出,字符串中的字...
    99+
    2023-06-30
  • php数组字符串怎么做索引
    在PHP中,可以使用字符串作为索引来创建和访问数组。以下是一些示例:1. 创建一个具有字符串索引的数组:php$array = ar...
    99+
    2023-10-18
    php
  • python字符串怎么增加字符
    要增加字符到Python字符串中,可以使用字符串的连接操作符(+)或字符串的复制操作符(*)来实现。以下是几种常见的方法: 使用...
    99+
    2023-10-26
    python
  • java字符串怎么添加字符
    在Java中,我们可以使用"+"操作符或者StringBuilder类来添加字符到字符串中。 使用"+"操作符: 可以通过在字符...
    99+
    2023-10-26
    java
  • MySQL中怎么批量替换指定字段字符串
    这期内容当中小编将会给大家带来有关MySQL中怎么批量替换指定字段字符串,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。    MySQL批量...
    99+
    2022-10-18
  • mysql加密字符串怎么破解
    mysql字符串加密的方法有TO_BASE64、 ENCODE、AES_ENCRYPT三种,使用方法如下:SET @str0 = 'abcdefg';SET @str1 = TO_BASE64(@str0);SET @str2 = ENCO...
    99+
    2022-10-19
  • mysql位图索引的字段怎么修改
    要修改MySQL位图索引的字段,需要执行以下步骤:1. 确定要修改的位图索引所在的表和字段。2. 确定要修改的位图索引的名称。3. ...
    99+
    2023-09-14
    mysql
  • mysql中适合加索引的字段有哪些
    这篇文章将为大家详细讲解有关mysql中适合加索引的字段有哪些,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。数据库中字段适合添加索引的有表中某个字段值离散度越高越适合,占...
    99+
    2022-10-18
  • SQL怎么按某字段合并字符串
    本文小编为大家详细介绍“SQL怎么按某字段合并字符串”,内容详细,步骤清晰,细节处理妥当,希望这篇“SQL怎么按某字段合并字符串”文章能帮助大家解决疑惑,下面跟着小编的思路慢慢深入,一起来学习新知识吧。标题...
    99+
    2022-10-19
  • 记一次MySQL字符串索引优化方案
    本文已收录GitHub,更有互联网大厂面试真题,面试攻略,高效学习资料等 字符串建立索引的优化 1. 建立前缀索引 假设建立一个支持邮箱登录的用户表,对于邮件字段来说,可以有以下几种建立索引的方式: ①. 直接对整个字符串建立索引 alt...
    99+
    2017-06-13
    记一次MySQL字符串索引优化方案 数据库入门 数据库基础教程 数据库 mysql
  • mysql怎么在字符里找字符串
    mysql在字符里找字符串的示例:例如:user表设id为主键,phone为字段。该表为用户电话表。想查看以电话号码138开头的电话,代码如:select id, phonefrom userwher...
    99+
    2022-10-20
  • MySQL 如何对text类型字段添加索引呢
    对于 MySQL 中的 text 类型字段,可以通过以下步骤向其添加索引: 创建辅助字段:由于 MySQL 在 InnoDB 存储引擎中不支持直接为 text 类型字段添加索引,所以首先需要创建一个辅助字段,将该字段的一部分数据转移到辅助...
    99+
    2023-10-01
    mysql 数据库
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作