位置: IT常识 - 正文

【Redis】关于Redis数据结构简单动态字符串(SDS)的一些杂记(redis相关)

编辑:rootadmin
【Redis】关于Redis数据结构简单动态字符串(SDS)的一些杂记 【Redis】关于Redis数据结构“简单动态字符串(SDS)”的一些杂记

推荐整理分享【Redis】关于Redis数据结构简单动态字符串(SDS)的一些杂记(redis相关),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:redis相关知识,redis相关知识,redis的nx,redis相关,redis相关问题,redis相关,redis相关知识,redis相关问题,内容如对您有帮助,希望把文章链接给更多的朋友!

推荐几篇关于SDS数据结构讲解较为详细的文章:

一、简单动态字符串 — Redis 设计与实现 (redisbook.readthedocs.io)

二、深入理解Redis之简单动态字符串 - itbsl - 博客园 (cnblogs.com)

三、Redis内部数据结构详解(2)——sds - 铁蕾的个人博客 (zhangtielei.com)

四、简单动态字符串 — Redis 设计与实现 (redisbook.readthedocs.io)

一、SDS的结构与实现

在前面的内容中, 我们一直将 sds 作为一种抽象数据结构来说明, 实际上, 它的实现由以下两部分组成:

typedef char *sds;struct sdshdr { // buf 已占用长度 int len; // buf 剩余可用长度 int free; // 实际保存字符串数据的地方 char buf[];};

其中,类型 sds 是 char * 的别名(alias),而结构 sdshdr 则保存了 len 、 free 和 buf 三个属性。

作为例子,以下是新创建的,同样保存 hello world 字符串的 sdshdr 结构:

struct sdshdr { len = 11; free = 0; buf = "hello world\0"; // buf 的实际长度为 len + 1};

通过 len 属性, sdshdr 可以实现复杂度为 θ(1)的长度计算操作。

另一方面, 通过对 buf 分配一些额外的空间, 并使用 free 记录未使用空间的大小, sdshdr 可以让执行追加操作所需的内存重分配次数大大减少, 下一节我们就会来详细讨论这一点。

当然, sds 也对操作的正确实现提出了要求 —— 所有处理 sdshdr 的函数,都必须正确地更新 len 和 free 属性,否则就会造成 bug 。

二、字符串对象

Redis 是一个键值对数据库(key-value DB), 数据库的值可以是字符串、集合、列表等多种类型的对象, 而数据库的键则总是字符串对象。对于那些包含字符串值的字符串对象来说, 每个字符串对象都包含一个 sds 值。

【Redis】关于Redis数据结构简单动态字符串(SDS)的一些杂记(redis相关)

注意:

“包含字符串值的字符串对象”,这种说法初听上去可能会有点奇怪, 但是在 Redis 中, 一个字符串对象除了可以保存字符串值之外, 还可以保存 long 类型的值, 所以为了严谨起见, 这里需要强调一下: 当字符串对象保存的是字符串时, 它包含的才是 sds 值, 否则的话, 它就是一个 long 类型的值。

例如,以下命令创建了一个新的键值对,该键值对的键和值都是字符串对象,他们都包含一个sds值:

127.0.0.1:6379> set school "HeFeiUniversity"OK127.0.0.1:6379> get school"HeFeiUniversity"127.0.0.1:6379>

下面的命令也创建了一个键值对,但是它的键是字符串对象,而值则是一个集合对象:

127.0.0.1:6379> sadd nosql "MongoDB" "Redis" "Neo4j"(integer) 3127.0.0.1:6379> smembers nosql1) "Neo4j"2) "Redis"3) "MongoDB"127.0.0.1:6379>三、Redis字符串与C字符串的区别

在 C 语言中,字符串可以用一个 \0 结尾的 char 数组来表示。

比如说, hello world 在 C 语言中就可以表示为 "hello world\0" 。

这种简单的字符串表示,在大多数情况下都能满足要求,但是,它并不能高效地支持长度计算和追加(append)这两种操作:

每次计算字符串长度(strlen(s))的复杂度为 θ(N)。对字符串进行 N 次追加,必定需要对字符串进行 N 次内存重分配(realloc)。

在 Redis 内部, 字符串的追加和长度计算很常见, 而 APPEND 和 STRLEN 更是这两种操作,在 Redis 命令中的直接映射, 这两个简单的操作不应该成为性能的瓶颈。

另外, Redis 除了处理 C 字符串之外, 还需要处理单纯的字节数组, 以及服务器协议等内容, 所以为了方便起见, Redis 的字符串表示还应该是二进制安全的: 程序不应对字符串里面保存的数据做任何假设, 数据可以是以 \0 结尾的 C 字符串, 也可以是单纯的字节数组, 或者其他格式的数据。

考虑到这两个原因, Redis 使用 sds 类型替换了 C 语言的默认字符串表示: sds 既可高效地实现追加和长度计算, 同时是二进制安全的。

和C字符串不,因为SDS在len属性中记录了SDS本身的长度,所以获取一个SDS长度的复杂度为O(1)。

通过使用SDS而不是C字符串,Redis将获取字符串长度所需的复杂度从O(N)降低到了O(1),这确保了获取字符串长度的工作不会成为Redis的性能瓶颈。所以,即使我们对一个非常长的字符串反复执行STRLEN命令,也不会对系统性能造成任何影响,因为STRLEN命令的复杂度仅为O(1)。

SDS相对于传统C字符串的优点☆☆☆:C字符串SDS获取字符串长度的复杂度为 O(N)获取字符串长度的复杂度为 O(1)操作字符串函数不安全,可能造成缓冲区溢出安全的操作字符串API,避免缓冲区溢出修改字符串长度 N 次必然需要执行 N 次内存重分配修改字符串长度 N 次最多需要执行 N 次内存重分配只能保存文本数据可以保存文本以及图片、音频、视频、压缩文件这样的二进制数据。四、SDS对内存的优化策略

SDS采用了空间预分配策略与惰性空间释放策略来避免内存分配问题。

空间预分配策略是指,每次 SDS 进行空间扩展时,程序不但为其分配所需的空间,还会为其分配额外的未使用空间,以减少内存再分配次数。而额外分配的未使用空间大小取决于空间扩展后SDS 的 len 属性值。

如果 len 属性值小于 1M,那么分配的未使用空间 free 的大小与 len 属性值相同。如果 len 属性值大于等于 1M ,那么分配的未使用空间 free 的大小固定是 1M。

SDS 对于空间释放采用的是惰性空间释放策略。该策略是指,SDS 字符串长度如果缩短,那么多出的未使用空间将暂时不释放,而是增加到 free 中。以使后期扩展 SDS 时减少内存 再分配次数。如果要释放 SDS 的未使用空间,则可通过 sdsRemoveFreeSpace()函数来释放。

五、SDS模块的API

sds 模块基于 sds 类型和 sdshdr 结构提供了以下 API :

函数作用算法复杂度sdsnewlen创建一个指定长度的 sds ,接受一个 C 字符串作为初始化值O(N)sdsempty创建一个只包含空白字符串 "" 的 sdsO(1)sdsnew根据给定 C 字符串,创建一个相应的 sdsO(N)sdsdup复制给定 sdsO(N)sdsfree释放给定 sdsO(N)sdsupdatelen更新给定 sds 所对应 sdshdr 结构的 free 和 lenO(N)sdsclear清除给定 sds 的内容,将它初始化为 ""O(1)sdsMakeRoomFor对 sds 所对应 sdshdr 结构的 buf 进行扩展O(N)sdsRemoveFreeSpace在不改动 buf 的情况下,将 buf 内多余的空间释放出去O(N)sdsAllocSize计算给定 sds 的 buf 所占用的内存总数O(1)sdsIncrLen对 sds 的 buf 的右端进行扩展(expand)或修剪(trim)O(1)sdsgrowzero将给定 sds 的 buf 扩展至指定长度,无内容的部分用 \0 来填充O(N)sdscatlen按给定长度对 sds 进行扩展,并将一个 C 字符串追加到 sds 的末尾O(N)sdscat将一个 C 字符串追加到 sds 末尾O(N)sdscatsds将一个 sds 追加到另一个 sds 末尾O(N)sdscpylen将一个 C 字符串的部分内容复制到另一个 sds 中,需要时对 sds 进行扩展O(N)sdscpy将一个 C 字符串复制到 sdsO(N)

本文仅供学习参考!

本文链接地址:https://www.jiuchutong.com/zhishi/299816.html 转载请保留说明!

上一篇:划水日常(16.5)关于出版图书有偿征集书名 ~(划水划水划水表情包)

下一篇:【Vue】初识Vue,Vue简介及Vue Devtools配置(vue入门)

  • 餐饮个体户如何开票
  • 财务软件大概多少钱
  • 企业所得税减免所得税额怎么算
  • 广告牌制作加盟厂家
  • 公司会计日常工作内容
  • 企业会计准则季报报送哪几个报表
  • 个体工商户五级税率
  • 营改增后如何纳税
  • 房地产公司房屋质量排名
  • 汇算清缴预提费用调整政策
  • 转让名额协议
  • 金融保险定义
  • 汽车配件税收分类编码
  • 企业向员工集资利息标准
  • 汇算清缴调增的利润要进未分配吗
  • 个体户查账征收没有成本票怎么办
  • 货车的折旧率
  • 个人社保费需要交多少年
  • 没有金税盘怎么查询已开发票
  • 小微企业工会
  • 注销税务登记后多久注销工商登记
  • 普通股优先股后配股区别
  • mac怎么把文件发给别人
  • 运输发票备注规定
  • 广告联系电话
  • 销售环节的运费怎么算
  • 外贸企业进项税额抵扣证明
  • 发票认证平台上不去
  • 地税增值税税率是多少
  • 支付劳务费时是什么科目
  • python 量化
  • 100多年前程序员
  • 下岗职工生活费停发
  • 特殊劳务交易的法律规定
  • 研发费用加计扣除2022政策
  • 公司卖地如何交税
  • 集团公司如何收管理费
  • 其他应收款如何计提减值准备
  • python如何在一个文件中运行另一个文件
  • 租赁公司一般都有什么税
  • 织梦cms为什么不维护了
  • 家庭保洁服务包括什么
  • 进出口货物收发货人报关注册登记证书
  • 个税汇算清缴什么意思?
  • 上市公司限制性股票个人所得税
  • 残保金逾期申报了补报会有罚款和滞纳金吗?
  • 预缴税款如何做账
  • 招待费如何做账科目
  • 先收发票后付款怎么做分录
  • 环境检测费属于什么费用
  • 成本增加比例怎么算的
  • 企业经营规模小怎么办
  • 计算机二级考试一年考几次
  • 电脑怎么安装安全控件
  • windowsserver2008r2密码重置
  • mac10.15系统
  • linux系统监控软件
  • 在linux系统中安装软件
  • vsftpd 550错误
  • Linux系统root密码忘记怎么重置
  • windows8设置
  • win8计算机管理员权限
  • linux下history命令显示历史指令记录的使用方法
  • win10再出变故 微软撤下Windows Update中11月份更新
  • sedsvc.exe是什么
  • win8系统停止服务
  • window10 系统安装
  • 微软 系统设计
  • win8 开始
  • expand.grid函数
  • 使用jquery插件的好处
  • Android从零单排02_Eclipse搭建Android环境01
  • nodelink
  • vue中的echarts
  • unity动画教程
  • jQuery的 $.ajax防止重复提交的两种方法(推荐)
  • 异步任务管理器
  • node.js的express
  • 重庆市网上税务局官网
  • 关于出口退税的问题
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设