Redis数据类型——SDS(简单动态字符串)

2023-12-31 16:38

本文主要是介绍Redis数据类型——SDS(简单动态字符串),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Redis并没有使用C语言传统的字符串,而是构建了一种名为简单动态字符串(Simple dynamic string,SDS),并作为默认字符串使用。

例如:执行如下命令

SET msg "hello world"

Redis数据库中将建立一个键值对,键是一个字符串对象,是一个负责保存"msg"的SDS,而值也是一个SDS,负责保存“hello world”。

  • 注意:SDS还被用于缓冲区,AOF缓冲区以及客户端的输入缓冲区都是SDS实现的

 

SDS的定义(未包含4.0新特性)

3.0特性

每个sds.h/sdshdr 都代表一个SDS值

struct sdshdr {

            int len;//记录SDS保存的数组的长度

            int free;//记录SDS中未使用的字节数量

            char buf[]; //字节数组,保存字符串

}

 

buf是一个char型数组,前五个字节保存了 R E D I S 五个字符,最后一个字节保存了空字符 \0;空字符并不算在len里面。额外分配 1 字节空间、把空字符自动加到数组末尾等操作都是SDS自动完成的,完全不用使用者来管理,对用户是完全透明的。

保留空字符的好处就是可以沿用C字符串函数库里的函数。可以直接使用print(“%s”,SDSname->buf);输出。

4.0新特性

#define SDS_TYPE_5  0
#define SDS_TYPE_8  1
#define SDS_TYPE_16 2
#define SDS_TYPE_32 3
#define SDS_TYPE_64 4
#define SDS_TYPE_MASK 7 //类型掩码
#define SDS_TYPE_BITS 3 
#define SDS_HDR_VAR(T,s) struct sdshdr##T *sh = (void*)((s)-(sizeof(struct sdshdr##T))); //获取header头指针,其中##是拼接的含义
#define SDS_HDR(T,s) ((struct sdshdr##T *)((s)-(sizeof(struct sdshdr##T)))) //获取header头指针
#define SDS_TYPE_5_LEN(f) ((f)>>SDS_TYPE_BITS) //获取sdshdr5的长度

 

struct __attribute__ ((__packed__)) sdshdr5 {   //5种header定义,节省内存使用
    uint8_t len; // 字符串实际长度
    uint8_t alloc; //字符串已拥有的内存空间容量  sdsalloc() = sdsavail() + sdslen()
    unsigned char flags;//表示类型,见宏定义
    char buf[];//buf[] : 字符串内容
};

 

static inline size_t sdslen(const sds s) {         //计算sds长度
    unsigned char flags = s[-1];
    switch(flags&SDS_TYPE_MASK) {
        case SDS_TYPE_5:
            return SDS_TYPE_5_LEN(flags);
        case SDS_TYPE_8:
            return SDS_HDR(8,s)->len;
        case SDS_TYPE_16:
            return SDS_HDR(16,s)->len;
        case SDS_TYPE_32:
            return SDS_HDR(32,s)->len;
        case SDS_TYPE_64:
            return SDS_HDR(64,s)->len;
    }
    return 0;
}

 

//计算sds可用空间
static inline size_t sdsavail(const sds s) {
    unsigned char flags = s[-1];
    switch(flags&SDS_TYPE_MASK) {
        case SDS_TYPE_5: {
            return 0;
        }
        case SDS_TYPE_8: {
            SDS_HDR_VAR(8,s);
            return sh->alloc - sh->len;
        }
        case SDS_TYPE_16: {
            SDS_HDR_VAR(16,s);
            return sh->alloc - sh->len;
        }
        case SDS_TYPE_32: {
            SDS_HDR_VAR(32,s);
            return sh->alloc - sh->len;
        }
        case SDS_TYPE_64: {
            SDS_HDR_VAR(64,s);
            return sh->alloc - sh->len;
        }
    }
    return 0;
}

 


//设置sds长度
static inline void sdssetlen(sds s, size_t newlen) {
    unsigned char flags = s[-1];
    switch(flags&SDS_TYPE_MASK) {
        case SDS_TYPE_5:
            {
                unsigned char *fp = ((unsigned char*)s)-1;
                *fp = SDS_TYPE_5 | (newlen << SDS_TYPE_BITS);
            }
            break;
        case SDS_TYPE_8:
            SDS_HDR(8,s)->len = newlen;
            break;
        case SDS_TYPE_16:
            SDS_HDR(16,s)->len = newlen;
            break;
        case SDS_TYPE_32:
            SDS_HDR(32,s)->len = newlen;
            break;
        case SDS_TYPE_64:
            SDS_HDR(64,s)->len = newlen;
            break;
    }
}

 

SDS与C字符串的区别

1、常数复杂度获取字符串长度

SDS获取字符串数组的时间复杂度是O(1),因为有len属性记录字符串的长度,而C语言需要遍历一遍才能获得字符串的长度,时间复杂度为O(N)。

2、杜绝缓冲区溢出

<string.h>/strcat 函数可以将src中的内容拼接到 dest 字符串末尾:

char *strcat(char *dest , char *src);

因为c不会记录字符串长度,使用strcat函数的时候,假设已经为 dest 分配了足够多的空间,可以容纳 src 但是,这一假设不成立的时候,就产生了内存溢出。

如图所示,内存中有两个字符串,分别为s1 s2,当执行语句;

strcat(s1 , " world");

但是,没有给s1分配足够多的空间,在执行完语句后会变成下图

这时,s2的内容被意外修改了,而与C语言策略不同,SDS进行修改前,会事先检查SDS的空间是否满足修改所需的要求,如不满足会自动扩展至所需空间。

3、减少修改字符时扩展内存的次数

拿C语言字符串来说,如果需要连续地使用 strcat 函数,为避免内存泄漏,需要连续地扩展空间,为了避免C语言这种缺陷,SDS实现了空间与分配和惰性空间释放两种优化策略

1、空间预分配

SDS大小分配策略
小于1MB分配的未使用空间 free = len ,例如:如果修改后的SDSlen长度为5,那么free分配的空间也是5  , 总空间就是 5 + 5 + 1 = 11(额外1字节给空字符)
大于等于1MB

分配的未使用空间为 1MB ,例如:如果修改后的SDSlen长度为5MB,那么free分配的空间就是 1MB  , 总空间就是 5MB + 1MB + 1byte(额外1字节给空字符)

 

这样就降低了内存重分配的次数,连续增长N次的重分配次数从必定N次降低为最多N次。

 

2、惰性空间释放

此策略用于优化字符串缩短操作,例如:sdstrim函数执行,对于字符串 s 。

 执行 sdstrim(s , "ab");   //删除字符串所有的ab

执行完后空余出4字节,SDS并没有立即释放,而是使用 free 记录空字符,避免将来的内存重分配。

当然,SDS也提供了释放未使用的空间的API,避免内存浪费。

 

4、二进制安全

C语言字符串不能保存包含 空字符串的字符串 ,否则会编译器会认为提前结束遍历,所以不能保存像图片音频等含空字符的文件,SDS保存在buf里的字符串都是二进制安全的,程序不会对其中的数据做任何限制和过滤。

SDS之所以能检测是否结束,是利用 len 属性而不是利用空字符。

5、兼容部分C字符串函数

即使SDS是二进制安全的,但是还保留了以空字符为结尾的惯例,这样就可以继续使用C语言库函数了。避免了重写代码的麻烦。

 

这篇关于Redis数据类型——SDS(简单动态字符串)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/556594

相关文章

Java中String字符串使用避坑指南

《Java中String字符串使用避坑指南》Java中的String字符串是我们日常编程中用得最多的类之一,看似简单的String使用,却隐藏着不少“坑”,如果不注意,可能会导致性能问题、意外的错误容... 目录8个避坑点如下:1. 字符串的不可变性:每次修改都创建新对象2. 使用 == 比较字符串,陷阱满

IDEA编译报错“java: 常量字符串过长”的原因及解决方法

《IDEA编译报错“java:常量字符串过长”的原因及解决方法》今天在开发过程中,由于尝试将一个文件的Base64字符串设置为常量,结果导致IDEA编译的时候出现了如下报错java:常量字符串过长,... 目录一、问题描述二、问题原因2.1 理论角度2.2 源码角度三、解决方案解决方案①:StringBui

Android 悬浮窗开发示例((动态权限请求 | 前台服务和通知 | 悬浮窗创建 )

《Android悬浮窗开发示例((动态权限请求|前台服务和通知|悬浮窗创建)》本文介绍了Android悬浮窗的实现效果,包括动态权限请求、前台服务和通知的使用,悬浮窗权限需要动态申请并引导... 目录一、悬浮窗 动态权限请求1、动态请求权限2、悬浮窗权限说明3、检查动态权限4、申请动态权限5、权限设置完毕后

C++初始化数组的几种常见方法(简单易懂)

《C++初始化数组的几种常见方法(简单易懂)》本文介绍了C++中数组的初始化方法,包括一维数组和二维数组的初始化,以及用new动态初始化数组,在C++11及以上版本中,还提供了使用std::array... 目录1、初始化一维数组1.1、使用列表初始化(推荐方式)1.2、初始化部分列表1.3、使用std::

redis群集简单部署过程

《redis群集简单部署过程》文章介绍了Redis,一个高性能的键值存储系统,其支持多种数据结构和命令,它还讨论了Redis的服务器端架构、数据存储和获取、协议和命令、高可用性方案、缓存机制以及监控和... 目录Redis介绍1. 基本概念2. 服务器端3. 存储和获取数据4. 协议和命令5. 高可用性6.

Redis的数据过期策略和数据淘汰策略

《Redis的数据过期策略和数据淘汰策略》本文主要介绍了Redis的数据过期策略和数据淘汰策略,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一... 目录一、数据过期策略1、惰性删除2、定期删除二、数据淘汰策略1、数据淘汰策略概念2、8种数据淘汰策略

JAVA调用Deepseek的api完成基本对话简单代码示例

《JAVA调用Deepseek的api完成基本对话简单代码示例》:本文主要介绍JAVA调用Deepseek的api完成基本对话的相关资料,文中详细讲解了如何获取DeepSeekAPI密钥、添加H... 获取API密钥首先,从DeepSeek平台获取API密钥,用于身份验证。添加HTTP客户端依赖使用Jav

Redis存储的列表分页和检索的实现方法

《Redis存储的列表分页和检索的实现方法》在Redis中,列表(List)是一种有序的数据结构,通常用于存储一系列元素,由于列表是有序的,可以通过索引来访问元素,因此可以很方便地实现分页和检索功能,... 目录一、Redis 列表的基本操作二、分页实现三、检索实现3.1 方法 1:客户端过滤3.2 方法

Java使用POI-TL和JFreeChart动态生成Word报告

《Java使用POI-TL和JFreeChart动态生成Word报告》本文介绍了使用POI-TL和JFreeChart生成包含动态数据和图表的Word报告的方法,并分享了实际开发中的踩坑经验,通过代码... 目录前言一、需求背景二、方案分析三、 POI-TL + JFreeChart 实现3.1 Maven

Python中操作Redis的常用方法小结

《Python中操作Redis的常用方法小结》这篇文章主要为大家详细介绍了Python中操作Redis的常用方法,文中的示例代码简洁易懂,具有一定的借鉴价值,有需要的小伙伴可以了解一下... 目录安装Redis开启、关闭Redisredis数据结构redis-cli操作安装redis-py数据库连接和释放增