返回顶部
首页 > 资讯 > 后端开发 > 其他教程 >浅谈redis整数集为什么不能降级
  • 462
分享到

浅谈redis整数集为什么不能降级

2024-04-02 19:04:59 462人浏览 薄情痞子
摘要

目录前言基本结构何时使用intsetintset添加元素类型变动升级加入65535旧数据移位降级为什么不实现降级小结前言 整数集合相信有的同学没有听说过,因为Redis对外提供的只有

前言

整数集合相信有的同学没有听说过,因为Redis对外提供的只有封装的五大对象!而我们本系列主旨是学习redis内部结构。内部结构是redis五大结构重要支撑!

前面我们分别从redis内部结构分析了redis的List、Hash、Zset三种数据结构了。今天我们再来分析set数据结构内部是如何存储的

基本结构

在src/t_set.c中我们发现这样一段代码

由此我们可知在set中是由两种数据结构构成的: hashtable+intset 。关于redis内部其他的结构我专门在【redis专栏中有介绍】。hashtable不是我们今天的主角,我们今天先分析intset俗称整数集合。

从上图中我们可以看出,我构造了两个set集合分别为【commonset】、【cs】。两个集合前者存储字符串、后者专门存储数字。

我们在通过object encoding key 来查看下两个集合的底层数据结构,发现一个是hashtable 一个是intset 。这也验证了我们上面对set基本结构的描述。

在redis中对外提供五大类型实际上都是redis的一个抽象对象叫做redisobject。在内部映射了我们redis内部的数据结构

针对commonset和cs两个集合在内部数据结构大概可以这么理解

何时使用intset

你可以单纯的认为只要是数字就会使用intset结构来存储,我恐怕要给你当头一棒了。实际上并不是这样

需要同时满足以下两个条件:

intset

图中表示的很清楚了,在intset中的encoding有三种取值分别代表contents保存数据类型。这里有人可能会有疑问了contents的类型不就是int8_t吗?为什么还需要encoding呢?这里通过源码跟踪内部的确跟int8_t没啥关系。而且数据的默认类型就是int16_t 。关于length这里无需太多解释,记住一点表示contents元素的个数并非表示contents数组的长度!

了解intset的同学都知道在encoding三种取值范围中涉及了升级的操作!在讲升级之前我们先来了解下C、c++中int的取值范围是如何定义的

int8_t的取值范围是【-128,127】 。 类似于java中byte占1个字节也就是8位。他的取值范围是

添加元素


sadd juejin -123
sadd juejin -6
sadd juejin 12
sadd juejin 56
sadd juejin 321	

juejin这个key内部就是intset 。

上面我们添加了5个元素且这五个元素的长度都在16之内!所以当前的intset的encoding=INTSET_ENC_INT16。-123在contents中占前16位。

所以当前五个元素占contents的长度是16*5=80 ;

注意set在存储int类型数据时,内部是按照从小到大的顺序存储的。

类型变动

上面的问题不知道你有没有考虑过,或者说有没有遇到过!intset默认是int16位,正如我们上面添加的五个元素。加入此时我们添加第6个元素是65535(32位)。那么此时16位的长度就不够存储了这个时候intset会怎么做!

另外当我们添加第6个元素后又将65535删除了之后,结构和添加之前是否一样!下面我们带着这两个问题来一探究竟!!!

升级

首先我们针对第一问题来看看。原来五个元素都是16位就可以满足了,这个时候添加的65535是32位长度的。那么是不是可以直接追加32位分配给65535呢?

答案是肯定不行,首先直接追加无法保证数组元素的大小顺序!其次如果前五个分别是16位,第6个是32位那么在intset结构中没有多余的字段来进行标记。也就是说在解析的时候就无法判断应该解析16位还是32位了.

redis为了方便解析所以在有高长度加入时会将整个contents进行升级。意思就是将整个contents先进行扩容,然后在重新填充数据

加入65535

首先根据length可以确定扩容后元素个数为6 , 每个占位32,所以contents长度为32*6=192 。 此时前80位内容保持不变

旧数据移位

开辟了足够的空间后,我们就可以对旧数据进行移位了这里我们从原数组的末尾开始移动,在移动之前需要明确在新数组中的排序位置。此时我们首先将321进行比对确定在新数组中他的排名是第五名,那么他将占用新contents中128~159区间。

最终前5 个元素就会被移动好 。

最后将新加入的元素填充进去。当发生升级时肯定是因为新元素的长度大于原有长度了。那么他的值一定会是在新数组的两端。负数在最左侧,正数在最右侧

降级

接下来就是第二个问题当新加入的65535又被删除了redis该怎么办,这个时候元素长度实际16位就可以满足了,但是此时encoding却是32位的。按照我的看法应该在实现降级!

但是遗憾的是redis并没有,那么请思考为什么没有?如果让你实现你将如何实现

为什么不实现降级

当加入元素超过当前长度我们很容易就知道此时需要进行升级操作,但是当我们删除一个数据时我们如何判断是否需要降级却很困难,我们需要重新遍历一遍剩下的元素是否小于当前长度,实现复杂度O(N) 。这就是为什么不进行降级原因之一

你可能会说重新遍历一遍很快的反正在内存中,那么你有没有想过如果降级之后又遇到升级情况,这样来回的升级降级就降低了我们程序的性能了。我们知道升级是必须的所以这里降级redis采取的是忽略的策略

小结

参考资料:内存升级优化内存降级

到此这篇关于浅谈redis整数集为什么不能降级的文章就介绍到这了,更多相关redis整数集降级内容请搜索编程网以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程网!

--结束END--

本文标题: 浅谈redis整数集为什么不能降级

本文链接: https://lsjlt.com/news/130866.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • 浅谈redis整数集为什么不能降级
    目录前言基本结构何时使用intsetintset添加元素类型变动升级加入65535旧数据移位降级为什么不实现降级小结前言 整数集合相信有的同学没有听说过,因为redis对外提供的只有...
    99+
    2024-04-02
  • redis整数集为什么不能降级
    本篇内容主要讲解“redis整数集为什么不能降级”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“redis整数集为什么不能降级”吧!目录前言基本结构何时使用intsetintset添加元素类型变动...
    99+
    2023-06-20
  • redis整数集不能降级的原因是什么
    这篇文章主要为大家展示了“redis整数集不能降级的原因是什么”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“redis整数集不能降级的原因是什么”这篇文章吧。基...
    99+
    2024-04-02
  • 浅谈为什么单线程的redis那么快
    目录redis单机QPS为什么这么快内存型数据库简单的数据结构单线程IO多路复用总结redis单机QPS ./redis-benchmark -t set,lpush -n 1...
    99+
    2024-04-02
  • 浅谈为什么MySQL不建议delete删除数据
    前言 我负责的有几个系统随着业务量的增长,存储在MySQL中的数据日益剧增,我当时就想现在的业务方不讲武德,搞偷袭,趁我没反应过来把很多表,很快,很快啊都打到了亿级别,我大意了,没有闪,这就导致跟其Join的表的S...
    99+
    2022-05-26
    MySQL不建议delete删除 MySQL delete删除
  • 浅谈Java为什么只能单继承
    目录先屡清楚继承和实现的区别:分析原因:多继承虽然能使子类同时拥有多个父类的特征,但是其缺点也是很显著的,主要有两方面: (1)如果在一个子类继承的多个父类中拥有相同名字的实例变量,...
    99+
    2023-03-15
    Java 单继承
  • 为什么不能远程redis
    不能远程redis的原因:redis是默认不允许远程连接,因此导致了不能远程redis,可以通过以下方法修改配置文件开启远程访问。打开redis的配置文件“redis.conf”。将“bind 127.0.0.1”注释掉。将“protect...
    99+
    2024-04-02
  • 浅谈为什么MySQL不推荐使用子查询和join
    做分页查询: 对于mysql,不推荐使用子查询和join是因为本身join的效率就是硬伤,一旦数据量很大效率就很难保证,强烈推荐分别根据索引单表取数据,然后在程序里面做join,merge数据。 2.子查询就更别用...
    99+
    2022-05-29
    MySQL 子查询和join MySQL 子查询 MySQL join
  • 浅谈python为什么不需要三目运算符和switch
    对于三目运算符(ternary operator),python可以用conditional expressions来替代 如对于x<5?1:0可以用下面的方式来实现 1if x<5...
    99+
    2022-06-04
    不需要 浅谈 运算符
  • 为什么go语言不能集合
    go语言不能集合的原因:1、使用go语言切片可以实现集合类似的功能,并且比其他语言中的集合更为高效;2、go语言为了保持语言的简洁和高效性放弃了集合,专注于简洁性和可读性;3、Go语言提供了强大的标准库和第三方库,可以使用标准库中的各种数据...
    99+
    2023-07-10
  • 为什么redis外网不能访问
    redis外网不能访问的原因:配置文件中protected-mode 不为 no。配置文件bind的ip不正确,一般想要外网能访问,需要填写为0.0.0.0,表示监听任何ip。修改完配置文件后,没有重启Redis。...
    99+
    2024-04-02
  • 浅谈Python处理json字符串为什么不建议使用eval()
    目录一、前言二、Json.loads与eval 性能对比1. eval2. json.loads一、前言 最近发现一些小伙伴使用eval来处理json,而且为了能够将json成功转...
    99+
    2024-04-02
  • redis集群为什么要用主从复制功能
    redis集群为什么要用主从复制功能?很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。为了使得集群在一部分节点下线或者无法与集群的...
    99+
    2024-04-02
  • unix时间戳为什么不是整数倍
    Unix时间戳是指从1970年1月1日00:00:00 UTC到现在的秒数。它不是整数倍是因为闰秒的存在。闰秒是为了调整由于地球自转...
    99+
    2023-05-25
    unix时间戳 unix
  • 为什么redis集群的最大槽数是16384个
    为什么redis集群的最大槽数是16384个?很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。Redis 集群并没有使用一致性ha...
    99+
    2024-04-02
  • 浅谈一下Java为什么不能使用字符流读取非文本的二进制文件
    目录读取文件为什么会这样呢?总结读取文件 刚学Java的IO流部分时,书上说只能使用字节流去读取图片、视频等非文本二进制文件,不能使用字符流,否则文件会损坏。所以我就一直记住这一点了...
    99+
    2023-05-15
    Java字符流 字符流读取非文本 Java二进制文件
  • 为什么断电后Redis数据不会丢失
    目录前言Redis 持久化机制RDB 持久化机制RDB 机制触发条件自动触发RDB 机制相关配置文件RDB 机制优点RDB 机制缺点AOF 持久化机制AOF 机制如何开启AOF 机制...
    99+
    2024-04-02
  • 腾讯云服务器第二年价格会降吗为什么不能用
    腾讯云服务器第二年价格是否会下降取决于多种因素,例如市场需求、供应商价格和竞争压力等。 一般来说,服务器的价格会随着市场供需变化而波动。如果腾讯云服务器的供应商价格过高,那么价格下降可能会导致需求增加。相反,如果供应商价格过低,那么价格下...
    99+
    2023-10-26
    腾讯 不能用 第二年
  • navicat为什么不能新建数据库
    无法在 navicat 中创建数据库的原因包括:服务器未连接、权限不足、名称冲突、磁盘空间不足、系统资源不足、服务器配置错误或 navicat 版本问题。如果您遇到此问题,请检查连接、权...
    99+
    2024-04-24
    navicat
  • 为什么不能用uuid作为数据库主键
    这篇文章主要介绍“为什么不能用uuid作为数据库主键”,在日常操作中,相信很多人在为什么不能用uuid作为数据库主键问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”为什么不能用...
    99+
    2024-04-02
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作