位置: IT常识 - 正文

【Redis】关于Redis数据结构简单动态字符串(SDS)的一些杂记(redis相关)

编辑:rootadmin
【Redis】关于Redis数据结构简单动态字符串(SDS)的一些杂记 【Redis】关于Redis数据结构“简单动态字符串(SDS)”的一些杂记

推荐整理分享【Redis】关于Redis数据结构简单动态字符串(SDS)的一些杂记(redis相关),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:redis相关知识,redis相关知识,redis的nx,redis相关,redis相关问题,redis相关,redis相关知识,redis相关问题,内容如对您有帮助,希望把文章链接给更多的朋友!

推荐几篇关于SDS数据结构讲解较为详细的文章:

一、简单动态字符串 — Redis 设计与实现 (redisbook.readthedocs.io)

二、深入理解Redis之简单动态字符串 - itbsl - 博客园 (cnblogs.com)

三、Redis内部数据结构详解(2)——sds - 铁蕾的个人博客 (zhangtielei.com)

四、简单动态字符串 — Redis 设计与实现 (redisbook.readthedocs.io)

一、SDS的结构与实现

在前面的内容中, 我们一直将 sds 作为一种抽象数据结构来说明, 实际上, 它的实现由以下两部分组成:

typedef char *sds;struct sdshdr { // buf 已占用长度 int len; // buf 剩余可用长度 int free; // 实际保存字符串数据的地方 char buf[];};

其中,类型 sds 是 char * 的别名(alias),而结构 sdshdr 则保存了 len 、 free 和 buf 三个属性。

作为例子,以下是新创建的,同样保存 hello world 字符串的 sdshdr 结构:

struct sdshdr { len = 11; free = 0; buf = "hello world\0"; // buf 的实际长度为 len + 1};

通过 len 属性, sdshdr 可以实现复杂度为 θ(1)的长度计算操作。

另一方面, 通过对 buf 分配一些额外的空间, 并使用 free 记录未使用空间的大小, sdshdr 可以让执行追加操作所需的内存重分配次数大大减少, 下一节我们就会来详细讨论这一点。

当然, sds 也对操作的正确实现提出了要求 —— 所有处理 sdshdr 的函数,都必须正确地更新 len 和 free 属性,否则就会造成 bug 。

二、字符串对象

Redis 是一个键值对数据库(key-value DB), 数据库的值可以是字符串、集合、列表等多种类型的对象, 而数据库的键则总是字符串对象。对于那些包含字符串值的字符串对象来说, 每个字符串对象都包含一个 sds 值。

【Redis】关于Redis数据结构简单动态字符串(SDS)的一些杂记(redis相关)

注意:

“包含字符串值的字符串对象”,这种说法初听上去可能会有点奇怪, 但是在 Redis 中, 一个字符串对象除了可以保存字符串值之外, 还可以保存 long 类型的值, 所以为了严谨起见, 这里需要强调一下: 当字符串对象保存的是字符串时, 它包含的才是 sds 值, 否则的话, 它就是一个 long 类型的值。

例如,以下命令创建了一个新的键值对,该键值对的键和值都是字符串对象,他们都包含一个sds值:

127.0.0.1:6379> set school "HeFeiUniversity"OK127.0.0.1:6379> get school"HeFeiUniversity"127.0.0.1:6379>

下面的命令也创建了一个键值对,但是它的键是字符串对象,而值则是一个集合对象:

127.0.0.1:6379> sadd nosql "MongoDB" "Redis" "Neo4j"(integer) 3127.0.0.1:6379> smembers nosql1) "Neo4j"2) "Redis"3) "MongoDB"127.0.0.1:6379>三、Redis字符串与C字符串的区别

在 C 语言中,字符串可以用一个 \0 结尾的 char 数组来表示。

比如说, hello world 在 C 语言中就可以表示为 "hello world\0" 。

这种简单的字符串表示,在大多数情况下都能满足要求,但是,它并不能高效地支持长度计算和追加(append)这两种操作:

每次计算字符串长度(strlen(s))的复杂度为 θ(N)。对字符串进行 N 次追加,必定需要对字符串进行 N 次内存重分配(realloc)。

在 Redis 内部, 字符串的追加和长度计算很常见, 而 APPEND 和 STRLEN 更是这两种操作,在 Redis 命令中的直接映射, 这两个简单的操作不应该成为性能的瓶颈。

另外, Redis 除了处理 C 字符串之外, 还需要处理单纯的字节数组, 以及服务器协议等内容, 所以为了方便起见, Redis 的字符串表示还应该是二进制安全的: 程序不应对字符串里面保存的数据做任何假设, 数据可以是以 \0 结尾的 C 字符串, 也可以是单纯的字节数组, 或者其他格式的数据。

考虑到这两个原因, Redis 使用 sds 类型替换了 C 语言的默认字符串表示: sds 既可高效地实现追加和长度计算, 同时是二进制安全的。

和C字符串不,因为SDS在len属性中记录了SDS本身的长度,所以获取一个SDS长度的复杂度为O(1)。

通过使用SDS而不是C字符串,Redis将获取字符串长度所需的复杂度从O(N)降低到了O(1),这确保了获取字符串长度的工作不会成为Redis的性能瓶颈。所以,即使我们对一个非常长的字符串反复执行STRLEN命令,也不会对系统性能造成任何影响,因为STRLEN命令的复杂度仅为O(1)。

SDS相对于传统C字符串的优点☆☆☆:C字符串SDS获取字符串长度的复杂度为 O(N)获取字符串长度的复杂度为 O(1)操作字符串函数不安全,可能造成缓冲区溢出安全的操作字符串API,避免缓冲区溢出修改字符串长度 N 次必然需要执行 N 次内存重分配修改字符串长度 N 次最多需要执行 N 次内存重分配只能保存文本数据可以保存文本以及图片、音频、视频、压缩文件这样的二进制数据。四、SDS对内存的优化策略

SDS采用了空间预分配策略与惰性空间释放策略来避免内存分配问题。

空间预分配策略是指,每次 SDS 进行空间扩展时,程序不但为其分配所需的空间,还会为其分配额外的未使用空间,以减少内存再分配次数。而额外分配的未使用空间大小取决于空间扩展后SDS 的 len 属性值。

如果 len 属性值小于 1M,那么分配的未使用空间 free 的大小与 len 属性值相同。如果 len 属性值大于等于 1M ,那么分配的未使用空间 free 的大小固定是 1M。

SDS 对于空间释放采用的是惰性空间释放策略。该策略是指,SDS 字符串长度如果缩短,那么多出的未使用空间将暂时不释放,而是增加到 free 中。以使后期扩展 SDS 时减少内存 再分配次数。如果要释放 SDS 的未使用空间,则可通过 sdsRemoveFreeSpace()函数来释放。

五、SDS模块的API

sds 模块基于 sds 类型和 sdshdr 结构提供了以下 API :

函数作用算法复杂度sdsnewlen创建一个指定长度的 sds ,接受一个 C 字符串作为初始化值O(N)sdsempty创建一个只包含空白字符串 "" 的 sdsO(1)sdsnew根据给定 C 字符串,创建一个相应的 sdsO(N)sdsdup复制给定 sdsO(N)sdsfree释放给定 sdsO(N)sdsupdatelen更新给定 sds 所对应 sdshdr 结构的 free 和 lenO(N)sdsclear清除给定 sds 的内容,将它初始化为 ""O(1)sdsMakeRoomFor对 sds 所对应 sdshdr 结构的 buf 进行扩展O(N)sdsRemoveFreeSpace在不改动 buf 的情况下,将 buf 内多余的空间释放出去O(N)sdsAllocSize计算给定 sds 的 buf 所占用的内存总数O(1)sdsIncrLen对 sds 的 buf 的右端进行扩展(expand)或修剪(trim)O(1)sdsgrowzero将给定 sds 的 buf 扩展至指定长度,无内容的部分用 \0 来填充O(N)sdscatlen按给定长度对 sds 进行扩展,并将一个 C 字符串追加到 sds 的末尾O(N)sdscat将一个 C 字符串追加到 sds 末尾O(N)sdscatsds将一个 sds 追加到另一个 sds 末尾O(N)sdscpylen将一个 C 字符串的部分内容复制到另一个 sds 中,需要时对 sds 进行扩展O(N)sdscpy将一个 C 字符串复制到 sdsO(N)

本文仅供学习参考!

本文链接地址:https://www.jiuchutong.com/zhishi/299816.html 转载请保留说明!

上一篇:划水日常(16.5)关于出版图书有偿征集书名 ~(划水划水划水表情包)

下一篇:【Vue】初识Vue,Vue简介及Vue Devtools配置(vue入门)

  • 税金及附加要计入本年利润吗
  • 什么是税额和计税金额
  • 股票印花税计算公式
  • 企业增值税是什么科目
  • 公司债券股票的投资组合思路
  • 旧设备出口增值税处理
  • 怎么确认债权
  • 支付货款的会计凭证怎么做
  • 一般纳税人购销合同印花税计税依据
  • 公司注册后一直没有营业怎么办
  • 公司滴滴发票是什么意思
  • 发票开成了下属机构的可以报销吗
  • 三栏式明细账科目编号怎么填
  • 外贸企业出口退税计算公式
  • 通用机打发票没有税率
  • 独立核算的分公司怎么报税
  • 现金预算表中的利息怎么算
  • 纳税义务未发生是什么意思
  • 员工借款可以直接转账吗
  • 新公司第一个月报税怎么弄
  • 什么情况下发票不能冲红
  • 跨年度发票退回如何记账
  • 非征期不能抄报
  • 洒水车属于免税车辆吗?
  • 技术转让收入属于主营业务收入吗
  • 企业所得税是什么意思需要交不需要
  • 旅行社差额征税如何开票
  • 实收资本不变说明了什么
  • 小型微利企业的优惠政策
  • 计提工资大于实际工资
  • 专用发票和普通发票的报销区别
  • linux系统中的文件访问权限包括几种
  • 出租的厂房房产税谁交
  • 出差环境补贴怎么算
  • win11电脑硬盘分区
  • zmweb.exe是什么进程
  • 向境外股东分配利润代扣代缴企业所得税
  • php rewrite
  • 上月发票这月冲红,对这月有影响吗
  • ryzen3 2200配显卡
  • kprcycleaner.exe是什么
  • 广告宣传费的税收筹划
  • thinkphp exec
  • form表单参数传递
  • program status
  • php环境怎么搭
  • aes加解密工具
  • 企业对外投资资产的成本可以税前扣除吗
  • ussd命令
  • 一般纳税人销售自己使用过的汽车
  • 发票作废怎么操作电脑上
  • 长期借款的处理原则
  • 其他应收账款为个人借款
  • 征地费用包括
  • 企业所得税实训内容及过程
  • sql按照日期范围查询
  • 向税务局缴纳工会经费的没计提
  • 汽车运输企业交什么税
  • 暂时性差异的产生
  • 股东撤资如何退还资金,用途写什么
  • 营改增企业是什么意思
  • 增值税发票丢失罚款多少
  • 一定要正颌吗
  • 会计上有哪些
  • 简易征收能抵扣进项税吗
  • 公司借款流程
  • 私营企业固定资产法律制度
  • 免激活合法使用的软件
  • 黑苹果驱动说明
  • 同一个用户
  • emule.td文件怎么打开
  • winxp系统开机启动项
  • win7鼠标右键菜单选项太多怎么删除
  • win7取消禁用无线网络
  • 将目录下的文件和文件夹按类型排序
  • angularjs1.5
  • bootstrap怎么用
  • 车辆购置税免税条件
  • 江西车辆购置税查询网
  • 京牌车船税网上可以交吗
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设