Redis数据存储优化机制详解
来到golang学习网的大家,相信都是编程学习爱好者,希望在这里学习数据库相关编程知识。下面本篇文章就来带大家聊聊《Redis数据存储优化机制详解》,介绍一下存储、Redis、数据,希望对大家的知识积累有所帮助,助力实战开发!
zipmap优化hash
将一个对象存储在hash类型中会占用更少的内存,并且可以更方便的存取整个对象。省内存的原因是新建一个hash对象时开始是用zipmap来存储的。这个zipmap其实并不是hash table,但是zipmap相比正常的hash实现可以节省不少hash本身需要的一些元数据存储开销。尽管zipmap的添加,删除,查找都是O(n),但是由于一般对象的field数量都不太多。所以使用zipmap也是很快的,也就是说添加删除平均还是O(1)。
如果field或者value的大小超出一定限制后,redis会在内部自动将zipmap替换成正常的hash实现。这个限制可以在配置文件中指定(默认配置在redis根目录下的redis.conf中):
hash-max-zipmap-entries 512 #配置字段最多512个 hash-max-zipmap-value 64 #配置value***为64字节
ziplist优化list
如果redisObject的type成员值是REDIS_LIST类型的,则当该list的元素个数小于配置值list-max-ziplist-entries,且元素值字符串的长度小于配置值list-max-ziplist-value,
则可以编码成 REDIS_ENCODING_ZIPLIST 类型存储,否则采用 Dict 来存储(Dict实际是Hash Table的一种实现),list采用ziplist数据结构存储数据,这样做一方面为了节省内存,另一方面这种结构式顺序存储的结构,能够更好利用cpu local和预取策略。
配置如下所示:
list-max-ziplist-entries 512 #配置元素个数最多512个 list-max-ziplist-value 64 #配置value***为64字节
intset优化set
当set集合中的元素为整数且元素个数小于配置set-max-intset-entries值时,使用intset数据结构存储,否则转化为Dict结构,Dict实际是Hash Table的一种实现,key为元素值,value为NULL,这样即可在O(1)时间内判断集合中是否包含某个元素。
intset中有三种类型数组:int16_t类型、int32_t 类型、 int64_t 类型。至于怎么选择是那种类型的数组,是根据其保存的值的取值范围来决定的,初始化时是 int16_t,根据 set 中的***值在[INT16_MIN, INT16_MAX] , [INT32_MIN, INT32_MAX], [INT64_MIN, INT64_MAX]的那个取值范围来动态确定整个数组的类型。例如set一开始是 int16_t 类型,当一个取值范围在 [INT32_MIN, INT32_MAX]的值加入到 set 时,则将保存 set 的数组升级成 int32_t 的数组。
intset元素限制的配置如下所示:
set-max-intset-entries 512 #配置元素个数最多512个
ziplist优化sorted set
根hash和list一样sorted set也有节约内存的方式,当sorted set的元素个数及元素大小小于一定限制时,它是用ziplist来存储。
这个限制的配置如下:
zset-max-ziplist-entries 128 #配置元素个数最多512个 zset-max-ziplist-value 64 #配置value***为64字节
小结
Redis提供了很多关于优化内存的方法,上面这些配置的值都是默认配置,实际要根据我们具体的需求场景来调节,并要做大量的测试,以达到***的效果。同时必须对Redis这些数据结构有很好的理解。
今天关于《Redis数据存储优化机制详解》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!
Redis是如何存储对象和集合的
- 上一篇
- Redis是如何存储对象和集合的
- 下一篇
- Python面试官问Redis的相关问题,看完这篇文章就够了
-
- 玩命的外套
- 这篇文章真及时,太全面了,很好,码起来,关注老哥了!希望老哥能多写数据库相关的文章。
- 2023-02-23 05:18:15
-
- 美好的煎蛋
- 赞 ??,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢师傅分享博文!
- 2023-02-16 17:53:58
-
- 数据库 · Redis | 45分钟前 |
- Redis Lua 长脚本怎么拆:保留短状态变更并控制单次批量
- 216浏览 收藏
-
- 数据库 · Redis | 6小时前 | 消息队列 · Redis教程 · 故障恢复 · 消费组 · redis 消费组 Redis Streams XNACK Pending 消息
- Redis XNACK 如何快速交回 Pending 消息:消费者退出与重投优先级
- 332浏览 收藏
-
- 数据库 · Redis | 23小时前 | Redis · 性能 · 集合 · 数据统计 · 基数统计 Redis 8.10 SUNIONCARD 集合并集
- Redis 8.10 SUNIONCARD 为什么不返回成员:集合并集计数的低开销用法
- 490浏览 收藏
-
- 数据库 · Redis | 1天前 | Redis · 队列 · 列表命令 · Redis列表 Redis 8.10 BLMOVEM LMOVEM
- Redis 8.10 LMOVEM 与 BLMOVEM 怎么选:一次移动多元素的队列边界
- 278浏览 收藏
-
- 数据库 · Redis | 1天前 | Redis · hash · 内存优化 · Redis 8.10 compact hash 共享 schema
- Redis 8.10 Compact Hash 怎么省字段名内存:共享 schema 的适用条件
- 417浏览 收藏
-
- 数据库 · Redis | 1天前 | Redis · 数据库 · hash · fieldset Redis 8.10 HIMPORT Hash批量导入 compact hash
- Redis 8.10 HIMPORT 为什么更适合批量写 Hash:fieldset 复用与连接边界
- 309浏览 收藏
-
- 数据库 · Redis | 3天前 | Redis · Redis 8.10 · BLMOVEM · 列表队列 · 阻塞超时 Redis列表 Redis 8.10 BLMOVEM 批量搬运
- Redis 8.10 BLMOVEM 阻塞搬运后任务仍堆积:批量条件与超时边界怎么排查
- 122浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- SuperCLUE
- SuperCLUE是权威的中文大语言模型综合评测基准,涵盖语言理解、知识应用、AI Agent智能体及安全性等12项核心能力。通过多轮对话与客观测试,定期发布榜单与技术报告,为模型研发、优化及行业选型提供科学依据。
- 133次使用
-
- C-Eval
- 深入了解C-Eval中文评估套件,涵盖52个学科与4级难度。本文详解其功能特点、Zero-shot/Few-shot使用方法及代码示例,助您全面评测LLM中文理解与泛化能力。
- 51次使用
-
- ClickPrompt
- ClickPrompt是一款专为AI提示词编写者设计的开源在线工具,支持Stable Diffusion绘图、ChatGPT对话及GitHub Copilot代码辅助。提供Prompt自动生成、一键运行、社区分享及可视化优化功能,帮助用户高效获取精准AI输出。
- 21次使用
-
- Google AI提示词库
- 探索Google Cloud官方生成式AI提示词库,提供免费、无需登录的中英双语Prompt模板。涵盖内容创作、代码优化、数据分析等场景,助您快速提升AI交互效率与质量。
- 27次使用
-
- Gradio
- Gradio是一个用于构建机器学习和数据科学Web应用的开源Python库。支持快速创建交互界面,获Google、Meta等大厂青睐,适合模型演示、部署反馈及调试。
- 131次使用
-
- Go与Redis实现分布式互斥锁和红锁
- 2022-12-22 117浏览
-
- Go+Redis实现延迟队列实操
- 2023-02-23 426浏览
-
- 一文搞懂Go语言操作Redis的方法
- 2023-01-07 171浏览
-
- Golang中map数据类型的使用方法
- 2022-12-30 443浏览
-
- 一文详解Golang中的切片数据类型
- 2022-12-31 171浏览


