Redis4.0支持的新功能说明
admin
2023-04-07 12:21:25
0

本文以华为云DCS for Redis版本为例,介绍Redis4.0的新功能。文章转载自华为云帮助中心。

与Redis3.x版本相比,DCS的Redis4.x以上版本,除了开源Redis增加的特性之外,还有如下大特性增强。

l 创建耗时缩短

实例由虚机方式改成了物理机容器化部署,创建实例只需要8~10秒时间完成。

l 性能提升

高性能版Redis4.x,操作系统使用华为自研的轻量级LibOS,单节点QPS从10w提升到30w

l 节省成本

高性能版Redis4.x,实例规格以1G为步长,用多少G买多少G,灵活定制,不再受限2的n次方要求。

相比于之前的版本,华为云Redis4.x在性能方面有了不小的提升,大大提高了使用者的体验,如果你想了解更加详细的具体实操内容,点这个链接

https://www.huaweicloud.com/product/dcs.html

给你更多惊喜。

接下来给大家介绍,开源Redis4.0版本新功能的具体特性。

Redis4.x版本更新的特性,主要涉及三个方面:

新命令的增加,如MEMORY、SWAPDB。
Lazyfree机制,延迟删除大key,降低删除操作对系统资源的占用影响。
内存性能优化,即主动碎片整理。
MEMORY命令

在Redis3.x及之前,只能通过info memory命令了解有限的几个内存统计信息。Redis4.0引入新的命令memory,让您能够更深入了解Redis的内存使用情况。

127.0.0.1:6379[8]> memory help
1) MEMORY arg arg ... arg. Subcommands are:
2) DOCTOR - Return memory problems reports.
3) MALLOC-STATS -- Return internal statistics report from the memory allocator.
4) PURGE -- Attempt to purge dirty pages for reclamation by the allocator.
5) STATS -- Return information about the memory usage of the server.
6) USAGE [SAMPLES ] -- Return memory in bytes used by and its value. Nested values are sampled up to

times (default: 5).
127.0.0.1:6379[8]>
  

usage

输入memory usage [key],如果当前key存在,则返回key的value实际使用内存估算值;如果key不存在,则返回nil。

127.0.0.1:6379[8]> set dcs "DCS is an online, distributed, in-memory cache service compatible with Redis, Memcached, and i
n-memory data grid (IMDG)."
OK
127.0.0.1:6379[8]> memory usage dcs
(integer) 171
127.0.0.1:6379[8]>
usage统计value内存占用,以及key自身的内存占用,不包含key的Expire内存占用。

127.0.0.1:6379[8]> set dcs.huaweiclou "Distributed Cache Service"
OK
127.0.0.1:6379[8]> memory usage dcs.huaweiclou
(integer) 85
127.0.0.1:6379[8]> set dcs.huaweicloud "Distributed Cache Service"
OK
127.0.0.1:6379[8]> memory usage dcs.huaweicloud
(integer) 86 //key名称长度变化后,内存占用也有变化
127.0.0.1:6379[8]> expire dcs.huaweicloud 100000
(integer) 1
127.0.0.1:6379[8]> memory usage dcs.huaweicloud
(integer) 86 //加了过期时间后,内存占用没有改变
127.0.0.1:6379[8]>
  

对hash、list、set、sorted set等数据类型,usage命令会抽样统计,提供内存占用的估算值。

使用方式:memory usage keyset samples 1000

其中keyset表示一个集合数据类型的key,1000表示抽样个数。

stats

返回当前实例内存使用细节。

使用方法:memory stats

127.0.0.1:6379[8]> memory stats
1) "peak.allocated"
2) (integer) 2412408
3) "total.allocated"
4) (integer) 2084720
5) "startup.allocated"
6) (integer) 824928
7) "replication.backlog"
... ...

以下给出部分数据返回项的具体含义

表1-1 memory stats

数据返回项

说明

peak.allocated

Redis实例运行过程中,allocator分配的内存峰值。同info memory的used_memory_peak

total.allocated

allocator当前分配的内存字节数。同info memory的used_memory

startup.allocated

Redis启动占用的内存字节数

replication.backlog

Redis复制积压缓冲区(replication backlog)内存使用字节数,通过repl-backlog-size参数设置,默认1M

clients.slaves

在master侧,所有slave clients消耗的内存字节数

clients.normal

Redis所有常规客户端消耗内存节字数

overhead.total

Redis额外的总开销内存字节数; 即分配器分配的总内存total.allocated,减去数据实际存储使用内存。

keys.count

Redis实例中key的数量

keys.bytes-per-key

每个key平均占用字节数。注意,overhead也会均摊到每个key上,因此不能以此值来表示业务实际的key平均长度。

dataset.bytes

表示Redis数据占用的内存容量。即分配的内存总量,减去总的额外开销内存量。

dataset.percentage

表示Redis数据占用内存占总内存分配的百分比

peak.percentage

当前内存使用量与峰值时的占比

fragmentation

表示Redis的内存碎片率

doctor

使用方法: memory doctor

used_memory(total.allocated)小于5M,doctor认为内存使用量过小,不做进一步诊断。当满足以下某一点,Redis会给出诊断结果和建议:

peak分配内存大于当前total_allocated的1.5倍,即peak.allocated/total.allocated > 1.5,说明内存碎片率高,RSS远大于used_memory
High fragmentation/fragmentation大于1.4,说明内存碎片率高
每个Normal Client平均使用内存大于200KB,说明pipeline可能使用不当,或Pub/Sub客户端处理消息不及时
每个Slave Client平均使用内存大于10MB,说明master的写入流量过高
purge

使用方法: memory purge

用途:通过调用jemalloc内部命令,进行内存释放。释放对象包括Redis进程占用但未有效使用的内存,即常说的内存碎片。

memory purge只适用于使用jemalloc作为allocator的Redis实例。

Lazy free机制

解决的痛点/问题

Redis是单线程程序,当运行一个耗时较大的请求时,会导致所有请求排队等待,在请求处理完成前,Redis不能响应其他请求,因此容易引发性能问题。而Redis删除大的集合键时,就属于一种比较耗时的请求。

原理

Redis4.x提供的一种惰性删除或者说延迟释放机制,主要用于解决删除大key对Redis进程的阻塞,从而避免带来性能与可用性问题。

删除key时,Redis异步延时释放key的内存,把key释放操作放在bio(Background I/O)单独的子线程处理中。

使用方法

主动删除
− unlink

unlink与del命令目的一样,删除某个key。unlink在删除集合类键时,如果集合键的元素个数大于64个,会把内存释放操作,给单独的bio(Background I/O)线程来执行。因此unlink删除操作能在非常短的时间内完成包含上百万个元素的大key删除。

− flushall/flushdb

通过对flushall/flushdb添加ASYNC异步清理选项,Redis在清理整个实例或单个DB时,操作都是异步的。

过期key删除、大key驱逐删除
被动删除有四种场景,每种场景对应一个配置参数,默认都是关闭:

lazyfree-lazy-eviction no //针对redis内存使用达到maxmeory,并设置有淘汰策略时,是否采用lazy free机制
lazyfree-lazy-expire no //针对设置有TTL的键,达到过期后,被redis清理删除时是否采用lazy free机制
lazyfree-lazy-server-del no //针对有些指令在处理已存在的键时,会带有一个隐式的DEL键的操作
slave-lazy-flush no //针对slave进行全量数据同步,slave在加载master的RDB文件前,会运行flushall来清理自己的数据场景

以上配置如需使用,请提工单咨询技术服务人员。

其他新增命令

swapdb

用途:交换同一Redis实例内2个db的数据。

用法:swapdb dbindex1 dbindex2

zlexcount

用途:在有序集合中,返回符合条件的元素个数。

用法:zlexcount key min max

内存使用和性能改进

使用更少的内存来存储相同数量的数据
可以对使用的内存进行碎片整理,并逐渐回收

相关内容

热门资讯

徐巧芯剖析赖清德:最怕自己丢掉... 海峡导报综合报道 大罢免投票一周年纪念活动26日举行,台北市长蒋万安出席并怒轰,民进党一年过后仍没有...
中国红十字会总会紧急向广东调拨... 记者从中国红十字会总会了解到,针对台风“红霞”给广东造成的灾情,中国红十字会总会启动四级应急响应,紧...
这些少年,正被“毒蛋”围猎 李梦抽了几口电子烟,吐出了白色的烟雾,有一股浓烈的水果香味。随后,她看着自己握电子烟的手,跟身边人说...
蒋万安号召“倒阁”,卢秀燕认为... 海峡导报综合报道 台北市长蒋万安27日抛出震撼议题,表示多名民代向他提议推动“倒阁”,要求台行政机构...
特朗普将在白宫会见两位重要客人 俄乌战争仍未结束,美伊冲突又有升级风险。在此背景下,美国总统特朗普将在白宫接见乌克兰和以色列领导人。...
新租客打扫卧室柜子上掉落4万元... 近日,莲前西路某小区内,张倩签下一套房子的租赁合同。当天上午,她带着12岁的大女儿周馨怡和11岁的小...
六部门通告:禁止涉军队退役报废... 关于禁止涉军队退役报废装备销售活动的通告近年来,部分经营者在线上线下公开销售涉及我军退役报废装备(指...
九寨沟景区发生泥石流,部分道路... 7月26日,九寨沟风景名胜区管理局发布泥石流灾害通报:2026年7月26日15时50分,九寨沟景区局...
空调26度不凉是什么原因 从空调内部元器件来说,不凉的原因有可能是温度传感器出现故障了,也有可能是空调压缩机或者铜管出现问题,...
鲸鸿动能携手香港国际机场、鸿蒙...   2026 年 7 月 25 日,十余位鸿蒙车主组成的车队从珠海出发,经港珠澳大桥通关抵达香港国际...