服务器之家:专注于服务器技术及软件下载分享
分类导航

Mysql|Sql Server|Oracle|Redis|MongoDB|PostgreSQL|Sqlite|DB2|mariadb|Access|数据库技术|

服务器之家 - 数据库 - Mysql - MySQL 大表的count()优化实现

MySQL 大表的count()优化实现

2021-05-04 18:13阿有耳 Mysql

这篇文章主要介绍了MySQL 大表的count()优化实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧

以下是基于我结合b+树的数据结构和对实验结果的推测作出的判断,如有错误,恳请指正!

今天实验了一下mysql的count()操作优化, 以下讨论基于mysql5.7 innodb存储引擎. x86 windows操作系统。

创建的表的结构如下(数据量为100万):

MySQL 大表的count()优化实现

首先是关于mysql的count(*),count(pk), count(1)哪个快的问题。
实现结果如下:

MySQL 大表的count()优化实现

MySQL 大表的count()优化实现

MySQL 大表的count()优化实现

并没有什么区别!加上了where子句之后3个查询的时间也是相同的,我就不贴图片了。

之前在公司的时候就写过一个select count(*) from table的sql语句,在数据多的时候非常慢。所以要怎么优化呢?

这要从innodb的索引说起, innodb的索引是b+tree。

对主键索引来说:它只有在叶子节点上存储数据,它的key是主键,并且value为整条数据
对辅助索引来说:key为建索引的列,value为主键。

这给我们两个信息:
1. 根据主键会查到整条数据
2. 根据辅助索引只能查到主键,然后必须通过主键再查到剩余信息。

所以如果要优化count(*)操作的话,我们需要找一个短小的列,为它建立辅助索引。
在我的例子中就是status,虽然它的”severelity”几乎为0.

先建立索引:alter table test1 add index (status);
然后查询,如下图:

MySQL 大表的count()优化实现

可以看到,查询时间从3.35s下降到了0.26s,查询速度提升近13倍

如果索引是str这一列,结果又会是怎么样呢?
先建立索引: alter table test1 add index (str)
结果如下:

MySQL 大表的count()优化实现

可以看到,时间为0.422s,也很快,但是比起status这列还是有着1.5倍左右的差距。

再大胆一点做个实验,我把status这列的索引删掉,建立一个statusleft(omdb,200)(这一列平均1000个字符)的联合索引,然后看查询时间。
建立索引: alter table test1 add index (status,omdb(200))
结果如下:

MySQL 大表的count()优化实现

时间为1.172s

?
1
alter table test1 add index (status,imdbid);

补充!!
要注意索引失效的情况!
建立了索引后正常的的样子:

MySQL 大表的count()优化实现

可以看到key_len为6, extra的说明是using index.

而如果索引失效的话:

MySQL 大表的count()优化实现

索引失效有很多种情况,比如使用函数,!=操作等,具体请参考官方文档。

对mysql没有很深的研究,以上是基于我结合b+树的数据结构和对实验结果的推测作出的判断,如有错误,恳请指正!

到此这篇关于mysql 大表的count()优化实现的文章就介绍到这了,更多相关mysql 大表count()优化内容请搜索服务器之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持服务器之家!

原文链接:https://blog.csdn.net/u012674931/article/details/52711137

延伸 · 阅读

精彩推荐
  • Mysql详解MySQL中的分组查询与连接查询语句

    详解MySQL中的分组查询与连接查询语句

    这篇文章主要介绍了MySQL中的分组查询与连接查询语句,同时还介绍了一些统计函数的用法,需要的朋友可以参考下 ...

    GALAXY_ZMY5432020-06-03
  • MysqlMySQL数据库varchar的限制规则说明

    MySQL数据库varchar的限制规则说明

    本文我们主要介绍了MySQL数据库中varchar的限制规则,并以一个实际的例子对限制规则进行了说明,希望能够对您有所帮助。 ...

    mysql技术网4192019-11-23
  • MysqlMySQL 数据备份与还原的示例代码

    MySQL 数据备份与还原的示例代码

    这篇文章主要介绍了MySQL 数据备份与还原的相关知识,本文通过示例代码给大家介绍的非常详细,具有一定的参考借鉴价值,需要的朋友可以参考下...

    逆心2962019-06-23
  • Mysql解决MySQl查询不区分大小写的方法讲解

    解决MySQl查询不区分大小写的方法讲解

    今天小编就为大家分享一篇关于解决MySQl查询不区分大小写的方法讲解,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起...

    Veir_dev5592019-06-25
  • Mysql浅谈mysql 树形结构表设计与优化

    浅谈mysql 树形结构表设计与优化

    在诸多的管理类,办公类等系统中,树形结构展示随处可见,本文主要介绍了mysql 树形结构表设计与优化,具有一定的参考价值,感兴趣的小伙伴们可以参...

    小码农叔叔5242021-11-16
  • Mysqlmysql 不能插入中文问题

    mysql 不能插入中文问题

    当向mysql5.5插入中文时,会出现类似错误 ERROR 1366 (HY000): Incorrect string value: '\xD6\xD0\xCE\xC4' for column ...

    MYSQL教程网5722019-11-25
  • MysqlERROR: Error in Log_event::read_log_event()

    ERROR: Error in Log_event::read_log_event()

    ERROR: Error in Log_event::read_log_event(): read error, data_len: 438, event_type: 2 ...

    MYSQL教程网6402020-03-13
  • MysqlMySQL锁的知识点总结

    MySQL锁的知识点总结

    在本篇文章里小编给大家整理了关于MySQL锁的知识点总结以及实例内容,需要的朋友们学习下。...

    别人放弃我坚持吖4362020-12-14