`
liu86th
  • 浏览: 113367 次
  • 性别: Icon_minigender_1
社区版块
存档分类
最新评论

[转] Mysql索引的问答

阅读更多

相信很多人对于MySQL的索引都不陌生,索引(Index)是帮助MySQL高效获取数据的数据结构。

 

因为索引是MySQL中比较重点的知识,相信很多人都有一定的了解,尤其是在面试中出现的频率特别高。楼主自认为自己对MySQL的索引相关知识有很多了解,而且因为最近在找工作面试,所以单独复习了很多关于索引的知识。

 

但是,我还是图样图森破,直到我被阿里的面试官虐过之后我才知道,自己在索引方面的知识,只是个小学生水平。

 

以下,是我总结的一次阿里面试中关于索引有关的问题以及知识点。

 

1.索引概念、索引模型

 

我们是怎么聊到索引的呢,是因为我提到我们的业务量比较大,每天大概有几百万的新数据生成,于是有了以下对话:

 

Q:你们每天这么大的数据量,都是保存在关系型数据库中吗?

 

A:是的,我们线上使用的是MySQL数据库

 

Q:每天几百万数据,一个月就是几千万了,那你们有没有对于查询做一些优化呢?

 

A:我们在数据库中创建了一些索引(我现在非常后悔我当时说了这句话)

 

这里可以看到,阿里的面试官并不会像有一些公司一样拿着题库一道一道的问,而是会根据面试者做过的事情以及面试过程中的一些内容进行展开。

 

Q:那你能说说什么是索引吗?

 

A:(这道题肯定难不住我啊)索引其实是一种数据结构,能够帮助我们快速的检索数据库中的数据

 

Q:那么索引具体采用的哪种数据结构呢?

 

A:(这道题我也背过)常见的MySQL主要有两种结构:Hash索引和B+ Tree索引,我们使用的是InnoDB引擎,默认的是B+树

 

这里我耍了一个小心机,特意说了一下索引和存储引擎有关。希望面试官可以问我一些关于存储引擎的问题。然而面试官并没有被我带跑...

 

Q:既然你提到InnoDB使用的B+ 树的索引模型,那么你知道为什么采用B+ 树吗?这和Hash索引比较起来有什么优缺点吗?

 

A:(突然觉得这道题有点难,但是我还是凭借着自己的知识储备简单的回答上一些)因为Hash索引底层是哈希表,哈希表是一种以key-value存储数据的结构,所以多个数据在存储关系上是完全没有任何顺序关系的,所以,对于区间查询是无法直接通过索引查询的,就需要全表扫描。所以,哈希索引只适用于等值查询的场景。而B+ 树是一种多路平衡查询树,所以他的节点是天然有序的(左子节点小于父节点、父节点小于右子节点),所以对于范围查询的时候不需要做全表扫描

 

Q:除了上面这个范围查询的,你还能说出其他的一些区别吗?

 

A:(这个题我回答的不好,事后百度了一下)

 

B+Tree索引和Hash索引区别?

 

哈希索引适合等值查询,但是无法进行范围查询

 

哈希索引没办法利用索引完成排序

 

哈希索引不支持多列联合索引的最左匹配规则

 

如果有大量重复键值的情况下,哈希索引的效率会很低,因为存在哈希碰撞问题

 

2.聚簇索引、覆盖索引

Q:刚刚我们聊到B+ Tree ,那你知道B+ Tree的叶子节点都可以存哪些东西吗?

 

A:InnoDB的B+ Tree可能存储的是整行数据,也有可能是主键的值

 

Q:那这两者有什么区别吗?

 

A:(当他问我叶子节点的时候,其实我就猜到他可能要问我聚簇索引和非聚簇索引了)在 InnoDB 里,索引B+ Tree的叶子节点存储了整行数据的是主键索引,也被称之为聚簇索引。而索引B+ Tree的叶子节点存储了主键的值的是非主键索引,也被称之为非聚簇索引

 

Q:那么,聚簇索引和非聚簇索引,在查询数据的时候有区别吗?

 

A:聚簇索引查询会更快?

 

Q:为什么呢?

 

A:因为主键索引树的叶子节点直接就是我们要查询的整行数据了。而非主键索引的叶子节点是主键的值,查到主键的值以后,还需要再通过主键的值再进行一次查询

 

Q:刚刚你提到主键索引查询只会查一次,而非主键索引需要回表查询多次。(后来我才知道,原来这个过程叫做回表)是所有情况都是这样的吗?非主键索引一定会查询多次吗?

 

A:(额、这个问题我回答的不好,后来我自己查资料才知道,通过覆盖索引也可以只查询一次)

 

覆盖索引?

 

覆盖索引(covering index)指一个查询语句的执行只用从索引中就能够取得,不必从数据表中读取。也可以称之为实现了索引覆盖。

 

当一条查询语句符合覆盖索引条件时,MySQL只需要通过索引就可以返回查询所需要的数据,这样避免了查到索引后再返回表操作,减少I/O提高效率。

 

如,表covering_index_sample中有一个普通索引 idx_key1_key2(key1,key2)。

 

当我们通过SQL语句:select key2 from covering_index_sample where key1 = 'keytest';的时候,就可以通过覆盖索引查询,无需回表。

 

3.联合索引、最左前缀匹配

 

Q:不知道的话没关系,想问一下,你们在创建索引的时候都会考虑哪些因素呢?

 

A:我们一般对于查询概率比较高,经常作为where条件的字段设置索引

 

Q: 那你们有用过联合索引吗?

 

A:用过呀,我们有对一些表中创建过联合索引

 

Q:那你们在创建联合索引的时候,需要做联合索引多个字段之间顺序你们是如何选择的呢?

 

A:我们把识别度最高的字段放到最前面

 

Q:为什么这么做呢?

 

A:(这个问题有点把我问蒙了,稍微有些慌乱)这样的话可能命中率会高一点吧。。。

 

Q: 那你知道最左前缀匹配吗?

 

A:(我突然想起来原来面试官是想问这个,怪自己刚刚为什么就没想到这个呢。)哦哦哦。您刚刚问的是这个意思啊,在创建多列索引时,我们根据业务需求,where子句中使用最频繁的一列放在最左边,因为MySQL索引查询会遵循最左前缀匹配的原则,即最左优先,在检索数据时从联合索引的最左边开始匹配。所以当我们创建一个联合索引的时候,如(key1,key2,key3),相当于创建了(key1)、(key1,key2)和(key1,key2,key3)三个索引,这就是最左匹配原则

 

虽然我一开始有点懵,没有联想到最左前缀匹配,但是面试官还是引导了我。很友善。

 

4.索引下推、查询优化

 

Q:你们线上用的MySQL是哪个版本啊呢?

 

A:我们MySQL是5.7

 

Q:那你知道在MySQL 5.6中,对索引做了哪些优化吗?

 

A:不好意思,这个我没有去了解过。(事后我查了一下,有一个比较重要的 :Index Condition Pushdown Optimization)

 

Index Condition Pushdown(索引下推)

 

MySQL 5.6引入了索引下推优化,默认开启,使用SET optimizer_switch = 'index_condition_pushdown=off';可以将其关闭。官方文档中给的例子和解释如下:

 

people表中(zipcode,lastname,firstname)构成一个索引

 

SELECT * FROM people WHERE zipcode='95054' AND lastname LIKE '%etrunia%' AND address LIKE '%Main Street%';

 

如果没有使用索引下推技术,则MySQL会通过zipcode='95054'从存储引擎中查询对应的数据,返回到MySQL服务端,然后MySQL服务端基于lastname LIKE '%etrunia%'和address LIKE '%Main Street%'来判断数据是否符合条件。

 

如果使用了索引下推技术,则MYSQL首先会返回符合zipcode='95054'的索引,然后根据lastname LIKE '%etrunia%'和address LIKE '%Main Street%'来判断索引是否符合条件。如果符合条件,则根据该索引来定位对应的数据,如果不符合,则直接reject掉。有了索引下推优化,可以在有like条件查询的情况下,减少回表次数。

 

Q:你们创建的那么多索引,到底有没有生效,或者说你们的SQL语句有没有使用索引查询你们有统计过吗?

 

A:这个还没有统计过,除非遇到慢SQL的时候我们才会去排查

 

Q:那排查的时候,有什么手段可以知道有没有走索引查询呢?

 

A:可以通过explain查看sql语句的执行计划,通过执行计划来分析索引使用情况

 

Q:那什么情况下会发生明明创建了索引,但是执行的时候并没有通过索引呢?

 

A:(大概记得和优化器有关,但是这个问题并没有回答好)

 

查询优化器?

 

一条SQL语句的查询,可以有不同的执行方案,至于最终选择哪种方案,需要通过优化器进行选择,选择执行成本最低的方案。

 

在一条单表查询语句真正执行之前,MySQL的查询优化器会找出执行该语句所有可能使用的方案,对比之后找出成本最低的方案。

 

这个成本最低的方案就是所谓的执行计划。优化过程大致如下:

 

1、根据搜索条件,找出所有可能使用的索引

 

2、计算全表扫描的代价

 

3、计算使用不同索引执行查询的代价

 

4、对比各种执行方案的代价,找出成本最低的那一个

 

Q:哦,索引有关的知识我们暂时就问这么多吧。你们线上数据的事务隔离级别是什么呀?

 

A:(后面关于事务隔离级别的问题了,就不展开了)

 

感觉是因为我回答的不够好,如果这几个索引问题我都会的话,他还会追问更多,恐怕会被虐的更惨

 

5.总结&感悟

 

以上,就是一次面试中关于索引部分知识的问题以及我整理的答案。感觉这次面试过程中关于索引的知识,自己大概能够回答的内容占70%左右,但是自信完全答对的内容只占50%左右,看来自己索引有关的知识了解的还是不够多。

 

通过这次面试,发现像阿里这种大厂对于底层知识还是比较看重的,我以前以为关于索引最多也就问一下Hash和B+有什么区别,没想到最后都能问到查询优化器上面。

 

最后,不管本次面试能不能通过,都非常感谢有这样一次机会,可以让自己看到自己的不足。通过这次面试,我也收获了很多东西。加油!

分享到:
评论

相关推荐

    数据库进阶-事务索引问答.pdf

    数据库进阶 题⽬01-ReadView案例 • 案例描述 数据库中创建如下数据表,并默认插⼊第⼀条数据 1 CREATE TABLE t ( 2 id INT PRIMARY KEY, 3 c VARCHAR(100) 4 ) Engine=InnoDB; 5 6 INSERT INTO t VALUES(1,'刘备');...

    Mysql面试中常见的问答资料

    在继续讨论 MySQL 数据库系统之前,先让我们来说明一些关于数据库的术语定义: 数据库(Database):数据库是带有相关数据的表的集合。 表(Table):表是带有数据的矩阵。数据库中的表就像一种简单的电子表格。 列...

    关于mysql自增id,你需要知道的

    如果我们定义了主键(PRIMARY KEY),那么InnoDB会选择主键作为聚集索引、如果没有显式定义主键,则InnoDB会选择第一个不包含有NULL值的唯一索引作为主键索引、如果也没有这样的唯一索引,则InnoDB会选择内置6字节长...

    关于Mysql自增id的这些你可能还不知道

    如果我们定义了主键(PRIMARY KEY),那么InnoDB会选择主键作为聚集索引、如果没有显式定义主键,则InnoDB会选择第一个不包含有NULL值的唯一索引作为主键索引、如果也没有这样的唯一索引,则InnoDB会选择内置6字节长...

    MySQL问答系列之如何避免ibdata1文件大小暴涨

    当innodb_file_per_table选项打开的话,新创建表的数据和索引则不会存在系统表空间中,而是存放在各自表的.ibd文件中. 显然这个文件会越来越大,innodb_autoextend_increment选项则指定了该文件每次自动增长的步进,...

    mysql数据库设计-习题.doc

    三、问答题 1.按照数据库设计六个阶段的先后顺序,简述各阶段的主要任务。 2.什么是数据库的概念结构?简述数据库概念结构设计的步骤。 3.什么是数据库的逻辑结构?试述数据库逻辑结构设计的步骤。 4.试述...

    Whatsns内容付费seo优化带采集和熊掌号运营问答系统.zip

    防止重复插入和重复生成索引优化前端模板页面,权限验证部分异步加载,增加对CDN支持优化文章对技术类得内容发布修复uc同步登录问题改进问题库和文章栏目url利于seo高级企业版,Plus版增加修复因RDS等独立mysql...

    java实现未读消息提醒源码-coderuci-public:一个为程序员设计的SpringBoot+MyBatis+MySQL问答论坛。内嵌

    这是一个专为程序员讨论而设计的问答网站。 在网站上,用户可以发布问题、生成标签、使用 Markdown 进行编辑、发表评论、搜索问题和接收通知。 关键词:Java、Spring Boot、Maven、MyBatis、MySQL、Flyway 阿尔法...

    生成百度sitemap站点地图的php类.zip

    where id > 取出的最大id(当前mysql为正序查询、如果为倒序、改成小于) limit 1000 这样的话又取出1000、然后修改索引查询txt的最小id、最大id、生成条数加到2000。以此类推等生成条数到了5000的时候再另起一行...

    基于文生图大模型的古诗词学习平台(python+flask+vue)

    深度学习 Playground v2:Playground v2 是一...MySQL 8:关系型数据库管理系统,全文索引、多源复制、更强大的JSON支持 Docker:轻量级的虚拟化技术,快速构建、部署和运行应用程序 Flask:用Python编写的微型Web框架

    php生成百度sitemap站点地图类函数实例

    公司网站是问答百科的网站、seo工程师提出需求说根据网站的问题来生成xml文件。每个xml文件包含5000条setmap格式数据。现在线上网站大约有70w条问题,所以说基本生成140个xml文件。还有一个索引文件。比如文件的名称...

    word2vecjava源码-knowledge:基于自然语言处理的知识库系统、咨询、问答库欢迎添加qq群:366526312

    数据库采用mysql进行静态的数据存储,请在网盘中一并下载 init.sql ###项目构建工具 项目采用maven的项目管理工具管理,并且采用的SpringBoot微服务框架开发。此处建议使用idea、eclipse等工具进行编辑开发。 ###...

    Linux环境数据库管理员指南

    8.6.5 词索引 244 8.6.6 国际化 244 8.6.7 24×7运转 244 8.6.8 无二进制大对象 244 8.6.9 无并行查询 245 8.6.10 无分布式锁管理程序 245 8.7 小结 249 8.8 常见问答 249 第9章 Linux上的Postgre SQL 252 9.1 引言 ...

    WTS在线答题系统 v1.0.0

    v1.0.0更新日志优化:优化用户答题性能(通过增加数据库表索引)优化:取消答卷检查功能功能:历史日志刪除功能功能:增加下载操作日志功能功能:增加后台操作日志记录功能:创建题目、修改题目、答卷管理、创建答卷...

    WTS在线答题系统-其他

    优化用户答题性能(通过增加数据库表索引)</p><p>优化:取消答卷检查功能</p><p>功能:历史日志刪除功能</p><p>功能:增加下载操作日志功能</p><p>功能:增加后台操作日志记录功能:创建题目、修改题目、答卷管理、...

    JAVA上百实例源码以及开源项目源代码

    内容索引:JAVA源码,综合应用,J2me游戏,PNG,图形处理  这是个J2ME控制台程序,它能剔除PNG文件中的非关键数据段,减少文件大小从而达到压缩图片的目的。而图片的质量并不会受到损失。使用时候只需在控制台窗口执行...

    JAVA上百实例源码以及开源项目

    内容索引:JAVA源码,综合应用,J2me游戏,PNG,图形处理  这是个J2ME控制台程序,它能剔除PNG文件中的非关键数据段,减少文件大小从而达到压缩图片的目的。而图片的质量并不会受到损失。使用时候只需在控制台窗口执行...

    贞龙(BIZOSSCMS)高性能内容管理系统JAVA版 v4.1.rar

    BIZOSS-CMS采用JAVA MySQL技术开发,内置了贞龙公司的SOA框架,在我们的支持下可以实现和贞龙系列产品和其他第三方企业内部应用无缝连接。BIZOSS-CMS的静态化机制和全文检索机制支持数十万、上百万的数据量快速查找...

Global site tag (gtag.js) - Google Analytics