返回顶部
首页 > 资讯 > 数据库 >MySQL 大表的count()优化实现
  • 301
分享到

MySQL 大表的count()优化实现

MySQL大表count优化MySQL大表count 2022-05-12 22:05:08 301人浏览 安东尼
摘要

以下是基于我结合B+树的数据结构和对实验结果的推测作出的判断,如有错误,恳请指正! 今天实验了一下Mysql的count()操作优化, 以下讨论基于mysql5.7 InnoDB存储引擎. x86 windows操作

以下是基于我结合B+树的数据结构和对实验结果的推测作出的判断,如有错误,恳请指正!

今天实验了一下Mysql的count()操作优化, 以下讨论基于mysql5.7 InnoDB存储引擎. x86 windows操作系统

创建的表的结构如下(数据量为100万):

表结构

首先是关于mysql的count(*),count(PK), count(1)哪个快的问题。
实现结果如下:

这里写图片描述 

这里写图片描述 

这里写图片描述 

并没有什么区别!加上了WHERE子句之后3个查询的时间也是相同的,我就不贴图片了。

之前在公司的时候就写过一个select count(*) from table的SQL语句,在数据多的时候非常慢。所以要怎么优化呢?

这要从InnoDB的索引说起, InnoDB的索引是B+Tree。

对主键索引来说:它只有在叶子节点上存储数据,它的key是主键,并且value为整条数据
对辅助索引来说:key为建索引的列,value为主键。

这给我们两个信息:
1. 根据主键会查到整条数据
2. 根据辅助索引只能查到主键,然后必须通过主键再查到剩余信息。

所以如果要优化count(*)操作的话,我们需要找一个短小的列,为它建立辅助索引。
在我的例子中就是status,虽然它的”severelity”几乎为0.

先建立索引:ALTER TABLE test1 ADD INDEX (status);
然后查询,如下图:

这里写图片描述 

可以看到,查询时间从3.35s下降到了0.26s,查询速度提升近13倍

如果索引是str这一列,结果又会是怎么样呢?
先建立索引: alter table test1 add index (str)
结果如下:

这里写图片描述

可以看到,时间为0.422s,也很快,但是比起status这列还是有着1.5倍左右的差距。

再大胆一点做个实验,我把status这列的索引删掉,建立一个statusleft(omdb,200)(这一列平均1000个字符)的联合索引,然后看查询时间。
建立索引: alter table test1 add index (status,omdb(200))
结果如下:

这里写图片描述 

时间为1.172s


alter table test1 add index (status,imdbid);

补充!!
要注意索引失效的情况!
建立了索引后正常的的样子:

这里写图片描述 

可以看到key_len为6, Extra的说明是using index.

而如果索引失效的话:

这里写图片描述

索引失效有很多种情况,比如使用函数,!=操作等,具体请参考官方文档。

对MySQL没有很深的研究,以上是基于我结合B+树的数据结构和对实验结果的推测作出的判断,如有错误,恳请指正!

到此这篇关于MySQL 大表的count()优化实现的文章就介绍到这了,更多相关MySQL 大表count()优化内容请搜索自学编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持自学编程网!

您可能感兴趣的文档:

--结束END--

本文标题: MySQL 大表的count()优化实现

本文链接: https://lsjlt.com/news/10253.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • MySQL 大表的count()优化实现
    以下是基于我结合B+树的数据结构和对实验结果的推测作出的判断,如有错误,恳请指正! 今天实验了一下MySQL的count()操作优化, 以下讨论基于mysql5.7 InnoDB存储引擎. x86 windows操作...
    99+
    2022-05-12
    MySQL 大表count优化 MySQL 大表count
  • MySQL大表count()的优化实现示例
    小编给大家分享一下MySQL大表count()的优化实现示例,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!今天实验了一下MySQL的count()操作优化, 以下...
    99+
    2023-06-14
  • MySQL 5.7下InnoDB对COUNT(*)的优化
    在MySQL 5.7 COUNT()会选择聚集索引,进行一次内部handler函数调用,即可快速获得该表总数 执行计划显示:Extra:Select tables optimized away 5...
    99+
    2024-04-02
  • 了解 MySQL 查询优化器:COUNT(id) 与 COUNT(*)
    在 MySQL 中,我们几乎每天都会使用“COUNT”函数来帮助我们计算给定查询的行数。每个开发者关于性能的最大困境是使用“COUNT(*)”还是“COUNT(id)”更好。 ...
    99+
    2024-07-10
    mysql sql优化
  • Mysql中如何优化select count
    这篇文章主要介绍了Mysql中如何优化select count,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。 1.任何情况下SE...
    99+
    2024-04-02
  • mysql大表中count()的用法案例
    这篇文章主要介绍了mysql大表中count()的用法案例,具有一定借鉴价值,需要的朋友可以参考下。希望大家阅读完这篇文章后大有收获。下面让小编带着大家一起了解一下。一个单表中包含有6000w+的数据,然而...
    99+
    2024-04-02
  • mysql千万级大表的优化
    ...
    99+
    2016-05-12
    mysql千万级大表的优化
  • MySQL COUNT函数的使用与优化
    COUNT 函数做什么用? COUNT 是一个专用的函数,通常有两种不同的方式:计算值和数据行。值指的是非空(Non-NULL)表达式(NULL表示值缺失)。如果我们在 COUNT的参数中指定了列名或其他表达式,则...
    99+
    2022-05-11
    MySQL COUNT的使用 MySQL COUNT的优化
  • MySQL如何实现分表优化
    这篇文章将为大家详细讲解有关MySQL如何实现分表优化,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。   这里的分表逻辑是根据t_group表的user_nam...
    99+
    2024-04-02
  • MySQL大表优化的示例分析
    小编给大家分享一下MySQL大表优化的示例分析,希望大家阅读完这篇文章之后都有所收获,下面让我们一起去探讨吧!背景阿里云RDS FOR MySQL(MySQL5.7版本)数据库业务表每月新增数据量超过千万,...
    99+
    2024-04-02
  • MySQL大表优化的方法教程
    本篇内容介绍了“MySQL大表优化的方法教程”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!单表优化除非单表...
    99+
    2024-04-02
  • 浅谈MySQL大表优化方案
    背景 阿里云RDS FOR MySQL(MySQL5.7版本)数据库业务表每月新增数据量超过千万,随着数据量持续增加,我们业务出现大表慢查询,在业务高峰期主业务表的慢查询需要几十秒严重影响业务 方案概述 一、数据库...
    99+
    2022-05-14
    MySQL大表优化 MySQL 表优化
  • 如何实现MySQL中优化表的语句?
    《MySQL优化表的语句及具体代码示例》在日常的数据库管理中,优化MySQL表的性能是非常重要的。通过优化表的语句,可以提高查询和更新的速度,减少资源的占用,提高系统的性能。本文将介绍如何通过具体的代码示例来优化MySQL表的性能。优化表结...
    99+
    2023-11-08
    实现 (Implement) MySQL (MySQL) 优化表 (Optimize)
  • Mysql在大表中删除大量数据的优化
    假设有一个表有3000万条记录,需要在业务不停止的情况下删除其中status=1的所有记录,差不多有600万条。 如果直接使用delete from tab_name where status=1; 会触发lock wa...
    99+
    2023-09-01
    mysql 数据库 sql
  • MySQL - 单表数据量大表优化方案
    一. 前言 当MySQL单表记录数过大时,增删改查性能都会急剧下降,可以参考以下步骤来优化。 二. 单表优化 除非单表数据未来会一直不断上涨,否则不要一开始就考虑拆分,拆分会带来逻辑、部署、运维的各种...
    99+
    2023-09-30
    mysql 数据库
  • 故障分析 | MySQL 优化案例 - select count(*)
    作者:xuty 本文来源:原创投稿 *爱可生开源社区出品,原创内容未经授权不得随意使用,转载请联系小编并注明来源。 本文关键字:count、SQL、二级索引 一、故事背景 项目组联系我说是有一张 500w 左右的表做select ...
    99+
    2015-08-04
    故障分析 | MySQL 优化案例 - select count(*)
  • MySQL select count(*)计数很慢优化方案
    目录前言1. MyISAM存储引擎计数为什么这么快?2. 能不能手动实现统计总行数3. InnoDB引擎能否实现快速计数4. 四种计数方式的性能差别前言 在日常开发工作中,我经常会遇到需要统计总数的场景,比如:统计订单总...
    99+
    2022-08-11
    MySQLselectcount(*)计数慢优化 MySQL优化
  • Mysql性能优化:为什么你的count(*)这么慢?
    导读 在开发中一定会用到统计一张表的行数,比如一个交易系统,老板会让你每天生成一个报表,这些统计信息少不了 sql 中的count函数。 但是随着记录越来越多,查询的速度会越来越慢,为什么会这样呢?Mysql内部到底是怎么处理的...
    99+
    2017-03-10
    Mysql性能优化:为什么你的count(*)这么慢?
  • MySQL 对于千万级的大表要怎么优化?
    首先采用Mysql存储千亿级的数据,确实是一项非常大的挑战。Mysql单表确实可以存储10亿级的数据,只是这个时候性能非常差,项目中大量的实验证明,Mysql单表容量在500万左右,性能处于最佳状态。 针对大表的优化,主要是通过数据库...
    99+
    2015-09-18
    MySQL 对于千万级的大表要怎么优化?
  • MYSQL大表加索引的实现
    起因是这样的,有一张表存在慢sql,查询耗时最多达到12s,定位问题后发现是由于全表扫描导致,需要对字段增加索引,但是表的数据量600多万有些大,网上很多都说对大表增加索引可能会导致锁表,查阅了一些资料,可以说网上说了很...
    99+
    2023-05-30
    MYSQL大表加索引 MYSQL大表索引
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作