0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

对 B+ 树与索引在 MySQL 中的认识

数据分析与开发 来源:博客园 作者:AnnsShadoW 2021-11-08 11:11 次阅读

概述

本质:数据库维护某种数据结构以某种方式引用(指向)数据

索引取舍原则:索引的结构组织要尽量减少查找过程中磁盘I/O的存取次数

B树

满足的条件

d为大于1的一个正整数,称为B-Tree的度

h为一个正整数,称为B-Tree的高度

每个非叶子节点由n-1个key和n个指针组成,其中d《=n《=2d

每个叶子节点最少包含一个key和两个指针,最多包含2d-1个key和2d个指针,叶节点的指针均为null

所有叶节点具有相同的深度,等于树高h

key和指针互相间隔,节点两端是指针

一个节点中的key从左到右非递减排列

所有节点组成树结构

每个指针要么为null,要么指向另外一个节点

一个度为d的B-Tree,设其索引N个key,则其树高h的上限为logd((N+1)/2),检索一个key查找节点的个数的渐进复杂度为logd(N)

更新后的操作

插入删除新的数据记录会破坏B-Tree的性质,因此在插入删除时,需要对树进行一个分裂、合并、转移等操作以保持B-Tree性质

B+树

bb7b4ebc-3fc2-11ec-9195-dac502259ad0.jpg

每个节点的指针上限为2d而不是2d+1

内节点不存储data,只存储key

叶子节点不存储指针

在经典B+树的基础上,增加了顺序访问指针--》提高区间访问的性能

为什么使用B/B+树?

主存读取

当系统需要读取主存时,则将地址信号放到地址总线上传给主存

主存读到地址信号后,解析信号并定位到指定存储单元,然后将此存储单元数据放到数据总线上,供其它部件读取

主存存取的时间仅与存取次数呈线性关系,因为不存在机械操作,两次存取的数据的“距离”不会对时间有任何影响

磁盘存取原理

磁盘转动,每个磁头不动,负责读取内容

不过已经有了多磁头独立技术

局部性原理

磁盘预读:长度一般以页的整数倍为单位

MyISAM索引实现

使用B+树作为索引结构,data存放数据记录的地址

索引文件与数据文件分离

主索引和辅助索引(Secondary key)在结构上没有任何区别,只是主索引要求key是唯一的,而辅助索引的key可以重复

非聚集:MyISAM中索引检索的算法为首先按照B+Tree搜索算法搜索索引,如果指定的Key存在,则取出其data域的值,然后以data域的值为地址,读取相应数据记录

.MYI文件的组成

整个索引文件的基本信息state

各索引的限制信息base

各索引的定义信息keydef

各索引记录的概要信息recinfo

读取索引的流程

query请求,直接读取key cache中的cache block,有就返回

没有就到.MYI文件中以file block方式读取数据

再以相同的格式存取key cache

再将key cache中的数据返回

InnoDB索引实现

也是使用B+树

第一个与MyISAM的不同点

第一个重大区别是InnoDB的数据文件本身就是索引文件,表数据文件本身就是按B+Tree组织的一个索引结构

InnoDB的数据文件本身要按主键聚集

所以InnoDB要求表必须有主键(MyISAM可以没有)

没有显式指定,自动选择唯一标识列

不存在的话,生成6个字节长整型的隐含字段

第二个与MyISAM的不同点

InnoDB的辅助索引data域存储相应记录主键的值而不是地址

换句话说,InnoDB的所有辅助索引都引用主键作为data域

辅助索引搜索需要检索两遍索引:首先检索辅助索引获得主键,然后用主键到主索引中检索获得记录

得出的优化点

不建议使用过长的字段作为主键,因为所有辅助索引都引用主索引,过长的主索引会令辅助索引变得过大

用非单调的字段作为主键在InnoDB中也不好,因为InnoDB数据文件本身是一颗B+Tree,非单调的主键会造成在插入新记录时数据文件为了维持B+Tree的特性而频繁的分裂调整,十分低效,而使用自增字段作为主键就很不错了

聚簇索引键被更新造成的成本除了索引数据可能会移动,相关的所有记录数据也要移动

索引使用策略及优化

全列匹配

按照索引中所有列进行精确匹配(这里精确匹配指“=”或“IN”匹配)时,索引可以被用到

理论上索引对顺序是敏感的,但是由于MySQL的查询优化器会自动调整where子句的条件顺序以使用适合的索引

最左前缀匹配

当查询条件精确匹配索引的左边连续一个或几个列时,索引可以被用到

查询条件用到了索引中列的精确匹配,但是中间某个条件未提供

只能用到索引中,从中间断开前的列

应对

可以增加辅助索引

当中间条件选项较少时,用隔离列的方式,使用IN包含

看情况,比较建立

查询条件没有指定索引第一列

不满足使用索引的条件

匹配某列的前缀字符串

可以使用索引

如果通配符%不出现在开头,则可以用到索引,但根据具体情况不同可能只会用其中一个前缀

范围查询

范围列可以用到索引(必须是最左前缀),但是范围列后面的列无法用到索引

同时,索引最多用于一个范围列,因此如果查询条件中有两个范围列则无法全用到索引

仅用explain可能无法区分范围索引和多值匹配

查询条件中含有函数/表达式

一般不使用哦

手工算好再代入

索引选择性与前缀索引

MyISAM与InnoDB基数统计方式

MyisAM索引的基数值(Cardinality,show index 命令可以看见)是精确的,InnoDB则是估计值

MyisAM统计信息是保存磁盘中,在alter表或Analyze table操作更新此信息

而InnoDB则是在表第一次打开的时候估计值保存在缓存区内

不建议建立索引的情况

表记录比较少

索引的选择性低:不重复的索引值(也叫基数,Cardinality)与表记录数(#T)的比值

前缀索引

用列的前缀代替整个列作为索引key,当前缀长度合适时,可以做到既使得前缀索引的选择性接近全列索引,同时因为索引key变短而减少了索引文件的大小和维护开销

缺点

不能用于ORDER BY和GROUP BY操作

也不能用于Covering index(即当索引本身包含查询所需全部数据时,不再访问数据文件本身)

InnoDB主键选择与插入优化

如果没有特别的需要,请永远使用一个与业务无关的自增字段作为主键

InnoDB使用聚集索引,数据记录本身被存于主索引(一颗B+Tree)的叶子节点上

这就要求同一个叶子节点内(大小为一个内存页或磁盘页)的各条数据记录按主键顺序存放,因此每当有一条新的记录插入时,MySQL会根据其主键将其插入适当的节点和位置,如果页面达到装载因子(InnoDB默认为15/16),则开辟一个新的页(节点)

如果使用非自增主键,每次插入近似随机,容易引起数据的移动,重新读目标页面,碎片也多了,虽然也可以用OPTIMIZE TABLE重建优化,但麻烦啊

参考资料

图片来源网络

《高性能MySQL》

作者:AnnsShadoW

https://www.cnblogs.com/annsshadow/p/5355090.html

编辑:jq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 磁盘
    +关注

    关注

    1

    文章

    365

    浏览量

    25174
  • 数据库
    +关注

    关注

    7

    文章

    3759

    浏览量

    64265
  • MySQL
    +关注

    关注

    1

    文章

    801

    浏览量

    26433

原文标题:对 B+ 树与索引在 MySQL 中的认识

文章出处:【微信号:DBDevs,微信公众号:数据分析与开发】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    阿里国际推出全球首个B2B AI搜索引擎Accio

    近日,欧洲科技峰会Web Summit上,阿里国际正式推出了全球首个B2B领域的AI搜索引擎——Accio。这一创新产品面向全球商家开放,标志着阿里国际正式入局当前备受瞩目的AI Search赛道。
    的头像 发表于 11-15 16:53 577次阅读

    MATLAB的矩阵索引

    对矩阵进行索引是从矩阵中选择或修改部分元素的一种方式。MATLAB 有几种索引样式,它们不仅功能强大、灵活,而且可读性强、表现力强。矩阵是 MATLAB 用来组织和分析数据的一个核心组件,索引是以可理解的方式有效操作矩阵的关键。
    的头像 发表于 09-05 09:28 377次阅读
    MATLAB<b class='flag-5'>中</b>的矩阵<b class='flag-5'>索引</b>

    地芯科技完成近亿元B+轮融,加速高端模拟射频芯片发展

    近日,国内领先的高端模拟射频芯片研发企业——地芯科技,宣布成功完成近亿元的B+轮融资。本轮融资由鸿富资产、九智资本及鸿鹄致远投资共同注资,标志着地芯科技资本市场上的强劲势头和广泛认可。
    的头像 发表于 08-01 17:15 684次阅读

    一文了解MySQL索引机制

    的呢?一起静下心来,耐心看完这篇文章吧,干货不啰嗦,相信你一定会有所收获。 一、索引模型 模型也就是数据结构,常见的三种模型分别是哈希表、有序数组和搜索。 了解MySQL的朋友已经知道,现在
    的头像 发表于 07-25 14:05 234次阅读
    一文了解<b class='flag-5'>MySQL</b><b class='flag-5'>索引</b>机制

    步进电机A+ A-有波形输出,B+ B-没有波形是什么原因?

    B+B-没有,会是什么原因。 A+ ---》AOUT1 A- ---》AOUT2 B+ ---》BOUT1 B- ---》BOUT1
    发表于 04-18 07:30

    labview 创建mysql 表时 设置时间 怎么mysql是格式是date 而不是datetime?

    选择 时间日期 但是mysql是date而不是datetime类型 ,除了sql语句创建表 ,怎么能实现创建表数据为datetime类型
    发表于 02-04 09:46

    查询SQLmysql内部是如何执行?

    我们知道mySQL客户端,输入一条查询SQL,然后看到返回查询的结果。这条查询语句 MySQL 内部到底是如何执行的呢?本文跟大家探讨一下哈,我们先来看下
    的头像 发表于 01-22 14:53 531次阅读
    查询SQL<b class='flag-5'>在</b><b class='flag-5'>mysql</b>内部是如何执行?

    瓦特曼AI视觉企业先后完成数亿元B轮和B+轮融资

    2023年12月,北京瓦特曼智能科技有限公司(以下简称“瓦特曼”或“WATTMAN“)先后完成数亿元B轮和B+轮融资,由中国移动旗下北京移数字新经济产业基金、国投证券相继领投。
    的头像 发表于 01-13 14:21 1569次阅读

    导致MySQL索引失效的情况以及相应的解决方法

    导致MySQL索引失效的情况以及相应的解决方法  MySQL索引的目的是提高查询效率,但有些情况下索引可能会失效,导致查询变慢或效果不如预期
    的头像 发表于 12-28 10:01 728次阅读

    mysql密码忘了怎么重置

    2. 打开MySQL的配置文件my.cnf或my.ini。Windows上,该文件通常位于MySQL的安装目录下的bin文件夹;而在Linux上,该文件通常位
    的头像 发表于 12-27 16:51 6297次阅读

    Mysql索引是什么东西?索引有哪些特性?索引是如何工作的?

    作为开发人员,碰到了执行时间较长的 sql 时,基本上大家都会说” 加个索引吧”。但是索引是什么东西,索引有哪些特性,下面和大家简单讨论一下。
    的头像 发表于 12-24 16:20 1194次阅读
    <b class='flag-5'>Mysql</b><b class='flag-5'>索引</b>是什么东西?<b class='flag-5'>索引</b>有哪些特性?<b class='flag-5'>索引</b>是如何工作的?

    MySQL执行过程:如何进行sql 优化

    (1)客户端发送一条查询语句到服务器; (2)服务器先查询缓存,如果命中缓存,则立即返回存储缓存的数据; (3)未命中缓存后,MySQL 通过关键字将 SQL 语句进行解析,并生成一颗对应的解析
    的头像 发表于 12-12 10:19 378次阅读
    <b class='flag-5'>MySQL</b>执行过程:如何进行sql 优化

    mysqldecimal的用法

    MySQL的DECIMAL是用于存储精确数值的数据类型。DECIMAL可以存储固定精度和小数位数的值。MySQL,DECIMAL数据类
    的头像 发表于 11-30 10:45 1021次阅读

    与二叉的定义

    表示。型结构计算机领域中也得到了广泛应用。 Part1 1.1 的定义 (Tree) 是n(n>=0)n(n>=0) n ( n
    的头像 发表于 11-24 15:57 1269次阅读
    <b class='flag-5'>树</b>与二叉<b class='flag-5'>树</b>的定义

    mysql的数据大于千万怎么办

    MySQL的数据量达到千万级别时,为了保证数据库的性能和稳定性,需要采取一系列优化措施和架构设计。本文中,我将详细介绍如何应对大规模数据的挑战,包括硬件、数据库设计、索引优化、分
    的头像 发表于 11-23 14:41 1522次阅读