广告
返回顶部
首页 > 资讯 > 精选 >Redis键值设计使用的方法是什么
  • 256
分享到

Redis键值设计使用的方法是什么

2023-07-05 22:07:20 256人浏览 八月长安
摘要

这篇文章主要介绍了Redis键值设计使用的方法是什么的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Redis键值设计使用的方法是什么文章都会有所收获,下面我们一起来看看吧。Redis使用中不规范的现象Redis

这篇文章主要介绍了Redis键值设计使用的方法是什么的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Redis键值设计使用的方法是什么文章都会有所收获,下面我们一起来看看吧。

    Redis使用中不规范的现象

    • Redis 存储的key命名不规范,比较随意;

    • Redis 被当成存储库使用,存在数据丢失风险,且无重新加载方案;

    • Redis 缓存key,未设置过期时间, 缓存低频数据占用大量内存, 进而导致服务崩溃;

    • Redis 缓存大量big key, 应用获取时会占用大量网络带宽,删除也容易造成阻塞;

    • Redis 客户端使用不当,导致其它客户端连接timeout, 原因可能客户端密码错误,且没有使用连接池,大量连接重试导致系统端口资源耗光;

    • Redis 客户端命令使用不当,导致大量的慢查询,影响其它应用业务,比如在业务高峰期时使用 keys* 或flushall 这样的命令;

    Redis 使用业务场景推荐与建议

    • 高并发场景:热点数据缓存, 可提升系统整体响应速度,降低数据库io压力 ;

    • 限时场景:利用Redis expire命令设置session过期和续期、手机验证码等;

    • 排行榜: 利用Redis list 和 sorted sets 数据结构能实现各种复杂的排行榜应用;

    • 数据集合操作:利用Redis list、set、sorted set, 方便进行数据计算, 如交集、并集、差集等;

    • 连续签到:可以利用redis的bitmap数据结构实现签到相关的业务;

    • 计数器:利用Redis incr、incrby命令实现api调用次数统计, api限流等场景;

    • 分布式:利用 Redis 的 setnx 功能来编写分布式的锁, 典型开源组件比如redisson;

    如何设计出优雅的key

    可以这么说,线上关于redis的性能优化这个问题上,不合理的key的设计经常是引发问题的根因,究其本质,就个人看到的情况来说,大多数同学在对redis使用过程中,对于key的设计几乎是没有什么概念的,因为大多数同学使用的场景就是 key/val ,对应的数据结构就是 字符串key/字符串val;

    稍微对redis有更深入的了解的同学,在进行存储时,可能会知道 key的设计尽量短一点,中间最好有层次感,最好以 : 进行分割 ......

    那么如何才能设计出比较优雅的key呢?下面结合小编实际使用中的经验以及踩过的坑,来具体谈谈;

    一、遵循如下几个最佳实践约定

    1. 遵循基本格式:[业务名称]:[数据名]:[id];

    2. key的长度不超过44字节;

    3. 不要包含特殊字符;

    关于上面几条建议,这样做有如下几点好处:

    • 可读性强,比如当我们设计这样的key结构, order:user:10,一眼看过去就知道这是关于用户订单相关的key;

    • 方便维护管理,不同的应用,或者不同的业务采用不同的前缀,在可视化客户端工具或者命令行中很方便进行key的查找定位;

    • 避免key冲突,避免在使用过程中多个人都用userId这样的值作为key引发的缓存key冲突;

    • 更节省内存: key是string类型,底层编码包含int、embstr和raw三种。embstr在小于44字节使用,采用连续内存空间,内存占用更小;

    推荐值:

    • 单个key的value小于10KB;

    • 对于集合类型的key,建议元素数量小于1000;

    二、尽量避免bigkey

    1、什么是bigkey呢

    BigKey通常以Key的大小和Key中成员的数量来综合判定,例如:

    • Key本身的数据量过大:一个String类型的Key,它的值为5 MB;

    • Key中的成员数过多:一个ZSET类型的Key,它的成员数量为10,000个;

    • Key中成员的数据量过大:一个Hash类型的Key,它的成员数量虽然只有1,000个但这些成员的Value(值)总大小为100 MB;

    2、BigKey的危害

    网络阻塞

    • 对BigKey执行读请求时,少量的QPS就可能导致带宽使用率被占满,导致Redis实例,乃至所在物理机变慢;

    数据倾斜

    • BigKey所在的Redis实例内存使用率远超其他实例,无法使数据分片的内存资源达到均衡;

    Redis阻塞

    • 对元素较多的hash、list、zset等做运算会耗时较旧,使主线程被阻塞;

    CPU压力

    • 对BigKey的数据序列化和反序列化会导致CPU的使用率飙升,影响Redis实例和本机其它应用;

    3、如何发现BigKey

    在安装的机器上执行 redis-cli --bigkeys命令

    • 利用redis-cli提供的--bigkeys参数,可以遍历分析所有key,并返回Key的整体统计信息与每个数据的Top1的big key;

    通过scan扫描

    • 编写程序,利用scan扫描Redis中的所有key,利用strlen、hlen等命令判断key的长度(此处不建议使用MEMORY USAGE);

    使用第三方工具

    • 利用第三方工具,如 Redis-Rdb-Tools 分析RDB快照文件,全面分析内存使用情况;

    使用网络监控

    • 自定义工具,监控进出Redis的网络数据,超出预警值时主动告警;

    三、使用恰当的数据类型

    正如上面所说,很多初次使用redis的同学,对于很多业务场景,都是一个key/val的简单的结构搞定,而不会深入思考这样做是否合理,或者说这样做以后会不会引发相关的性能方面的问题;

    对于这个问题,从根本上来说,需要深入了解并掌握redis的常用的数据类型,在这个基础上,才能针对不同的业务场景,设计出高效的存储存储结构数据;

    让我们思考一下,如何缓存用户对象列表这样的数据呢?

    • 方案1:key为usrId,value为对象的序列化字符串,数据结构类似下面这样; 

    Redis键值设计使用的方法是什么

    优点:存取方便,简单粗暴,存取时只需要做下JSON和对象的互转即可;

    缺点:数据耦合,不够灵活,一旦对象新增了字段或删减了字段,缓存重建的成本非常大;

    • 方案2:使用一个list结构,缓存用户ID列表,数据结构如下;

    Redis键值设计使用的方法是什么

    优点:对内存的占用小,操作高效;

    缺点:获取到val之后,需要进一步查库才能得到完整的对象;

    方案3:使用hash结构,缓存对象,数据如下所示;

    Redis键值设计使用的方法是什么

    优点:底层使用ziplist,空间占用小,可以灵活访问对象的任意字段;

    缺点:编码上相对复杂;

    Redis 缓存在实际应用中的使用建议

    • 【推荐】对缓存进行预热。在访问数据前,应先对缓存进行预热,避免大量请求直接进入数据存储层;应根据业务情况划分合适的冷热数据,对热点数据进行预热。如许可授权信息, apikey等;

    • 【推荐】配合使用本地缓存。使用本地缓存能更稳定、更快速地访问到数据,但在分布式架构下,要慎用本地缓存,避免造成服务器节点带状态。同时由于本地缓存直接占用应用服务器的资源,要避免过度占用资源导致应用节点崩溃;

    • 【推荐】缓存变更策略,应先更新数据库,再更新缓存;

    • 【推荐】一次业务调用需要访问多次redis服务端,可采用pipleline或其它批量操作方式;

    • 【推荐】大List,Set,Hash,存储的数量巨大。获得大量元素时延迟较大阻塞其他命令.建议切割成多个小的list,set,hash;

    使用业务规范

    不管是redis,还是其他开发中使用到的中间件,具体到开发使用时,最好都应该提前制定出一套合理的规范,这个规范应该是大多数开发人员认可并在实践中得到检验,且能有效规避一些问题的,一旦指定为规范,应该成为指导内部开发人员日常的规则,这里提如下几点:

    • Redis 应该定位为缓存数据, 不可用于存储大规模数据(不可替代数据库);

    • Redis 适合读多写少场景,如存在高频写入,低频查询场景,则不推荐使用;

    • 在不确定key的存活时间时,最好设置过期时间,控制 key 的生命周期;

    • 应该考虑冷热数据分离,对于查询, 高频次业务查询走Redis,低频查询考虑走数据库;

    • Redis 有数据丢失风险,程序处理数据时,应该考虑数据丢失后能自动从数据库加载并缓存到Redis;

    • 谨慎使用O(N)命令, 如list, set, hash 数据结构操作时, hgetall、lrange、smembers、zrange等并非不能使用,优先考虑使用 hscan、sscan、zscan 代替。

    关于“Redis键值设计使用的方法是什么”这篇文章的内容就介绍到这里,感谢各位的阅读!相信大家对“Redis键值设计使用的方法是什么”知识都有一定的了解,大家如果还想学习更多知识,欢迎关注编程网精选频道。

    --结束END--

    本文标题: Redis键值设计使用的方法是什么

    本文链接: https://www.lsjlt.com/news/355935.html(转载时请注明来源链接)

    有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

    本篇文章演示代码以及资料文档资料下载

    下载Word文档到电脑,方便收藏和打印~

    下载Word文档
    猜你喜欢
    • Redis键值设计使用的方法是什么
      这篇文章主要介绍了Redis键值设计使用的方法是什么的相关知识,内容详细易懂,操作简单快捷,具有一定借鉴价值,相信大家阅读完这篇Redis键值设计使用的方法是什么文章都会有所收获,下面我们一起来看看吧。Redis使用中不规范的现象Redis...
      99+
      2023-07-05
    • Redis 键值设计使用总结
      目录前言Redis使用中不规范的现象Redis 使用业务场景推荐与建议如何设计出优雅的key一、遵循如下几个最佳实践约定二、尽量避免bigkey三、使用恰当的数据类型Redis 缓存在实际应用中的使用建议使用业务规范前言...
      99+
      2023-04-07
      Redis 键值设计 Redis 键值 Redis 键值使用
    • Redis键值设计使用总结
      目录前言Redis使用中不规范的现象Redis 使用业务场景推荐与建议如何设计出优雅的key一、遵循如下几个最佳实践约定二、尽量避免bigkey三、使用恰当的数据类型Redis 缓存...
      99+
      2023-05-14
      Redis 键值设计 Redis 键值 Redis 键值使用
    • redis更新key值的方法是什么
      Redis更新key值的方法有两种:1. SET命令:使用SET命令可以更新key的值。如果key不存在,则会创建一个新的key并设...
      99+
      2023-08-23
      redis
    • Redis 不使用 keys 命令获取键值信息的方法
      1. 问题来源 这个问题可能看起来很奇怪,但很多 redis 集群会有一个统一的入口,入口会作兼容 redis 命令的代理,一般出于新能考虑是禁止使用 keys 命令来获取键值信息的,但是可以通过 scan...
      99+
      2022-10-18
    • redis设定密码的方法是什么
      在Redis中设定密码的方法是通过修改配置文件来完成的。具体步骤如下:1. 打开Redis的配置文件`redis.conf`。可以通...
      99+
      2023-09-11
      redis
    • access设置主键的方法是什么
      在Access中设置主键的方法如下:1. 打开Access数据库,选择你想要设置主键的表格。2. 在表格的设计视图中,选择你想要设置...
      99+
      2023-09-28
      access
    • json字符串获取键值的方法是什么
      可以使用`JSON.parse()`函数将JSON字符串转换为JavaScript对象,然后可以通过对象的键来获取对应的值。例如,假...
      99+
      2023-10-10
      json
    • php数组添加键值对的方法是什么
      在PHP中,有以下几种方法可以向数组中添加键值对:1. 使用`$array['key'] = 'value'`语法,其中`$arra...
      99+
      2023-10-10
      php
    • python字典修改键值对的方法是什么
      要修改Python字典中的键值对,可以使用以下两种方法: 使用索引操作符([])来访问指定的键,并将新的值赋给它。 # 创建一个...
      99+
      2023-10-27
      python
    • python字典添加键和值的方法是什么
      Python字典添加键值对的方法有两种:1. 使用索引赋值:可以通过索引的方式给字典添加键和值。例如:```my_dict = {}...
      99+
      2023-09-28
      python
    • Python中常用的字典键和值排方法是什么
      这篇“Python中常用的字典键和值排方法是什么”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇“Python中常用的字典键和值...
      99+
      2023-07-05
    • redis网站访问统计的方法是什么
      要统计网站访问量,可以使用Redis的一些功能和命令来实现。1. 通过Redis的计数器功能统计网站访问量:可以使用Redis的IN...
      99+
      2023-09-05
      redis
    • 键值数据库中Redis的使用是怎样的
      键值数据库中Redis的使用是怎样的,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。JDBC—Redis的使用redis的java-jdbc的下...
      99+
      2022-10-19
    • Java类field设置值的方法是什么
      Java类的field设置值的方法是通过使用set方法或直接赋值的方式。使用set方法可以在类中定义一个公共的set方法来设置fie...
      99+
      2023-09-25
      Java
    • MaxCompute表设计方法是什么
      这篇文章主要介绍“MaxCompute表设计方法是什么”,在日常操作中,相信很多人在MaxCompute表设计方法是什么问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”MaxCompute表设计方法是什么”的疑...
      99+
      2023-06-04
    • Jedis使用Redis事务的方法是什么
      本篇内容主要讲解“Jedis使用Redis事务的方法是什么”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Jedis使用Redis事务的方法是什么”吧!什么是Jedis什么是Jedis 是Redi...
      99+
      2023-07-05
    • 数据库设计的方法是什么
      本篇内容主要讲解“数据库设计的方法是什么”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“数据库设计的方法是什么”吧!数据库设计1. 为什么要设计数据库节省数据的存储空间保证数据的完整性方便根据数据...
      99+
      2023-06-16
    • Java泛型的设计方法是什么
      这篇文章主要讲解了“Java泛型的设计方法是什么”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“Java泛型的设计方法是什么”吧!引言泛型是Java中一个非常重要的知识点,在Java集合类框架...
      99+
      2023-06-17
    • Redis队列长度设定的方法是什么
      Redis队列长度的设定取决于使用的数据结构。在Redis中,可以使用列表(List)或有序集合(Sorted Set)来实现队列。...
      99+
      2023-09-06
      Redis
    软考高级职称资格查询
    编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
    • 官方手机版

    • 微信公众号

    • 商务合作