iis服务器助手广告广告
返回顶部
首页 > 资讯 > 数据库 >Redis处理接口幂等性的方案有哪些
  • 531
分享到

Redis处理接口幂等性的方案有哪些

2024-04-02 19:04:59 531人浏览 安东尼
摘要

这篇文章主要介绍“Redis处理接口幂等性的方案有哪些”,在日常操作中,相信很多人在Redis处理接口幂等性的方案有哪些问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”Redi

这篇文章主要介绍“Redis处理接口幂等性的方案有哪些”,在日常操作中,相信很多人在Redis处理接口幂等性的方案有哪些问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”Redis处理接口幂等性的方案有哪些”的疑惑有所帮助!接下来,请跟着小编一起来学习吧!

前言:接口幂等性问题,对于开发人员来说,是一个跟语言无关的公共问题。对于一些用户请求,在某些情况下是可能重复发送的,如果是查询类操作并无大碍,但其中有些是涉及写入操作的,一旦重复了,可能会导致很严重的后果,例如交易的接口如果重复请求可能会重复下单。接口幂等性是指用户对于同一操作发起的一次请求或者多次请求的结果是一致的,不会因为多次点击而产生了副作用。

一、接口幂等性

1.1、什么是接口幂等性

Http/1.1中,对幂等性进行了定义。它描述了一次和多次请求某一个资源对于资源本身应该具有同样的结果,即第一次请求的时候对资源产生了副作用,但是以后的多次请求都不会再对资源产生副作用。这里的副作用是不会对结果产生破坏或者产生不可预料的结果。也就是说,其任意多次执行对资源本身所产生的影响均与一次执行的影响相同。

这类问题多发于接口的:

  • insert操作,这种情况下多次请求,可能会产生重复数据。

  • update操作,如果只是单纯的更新数据,比如:update user set status=1 where id=1,是没有问题的。如果还有计算,比如:update user set status=status+1 where id=1,这种情况下多次请求,可能会导致数据错误。

1.2、为什么需要实现幂等性

在接口调用时一般情况下都能正常返回信息不会重复提交,不过在遇见以下情况时可以就会出现问题,如:

  • 前端重复提交表单: 在填写一些表格时候,用户填写完成提交,很多时候会因网络波动没有及时对用户做出提交成功响应,致使用户认为没有成功提交,然后一直点提交按钮,这时就会发生重复提交表单请求。

  • 用户恶意进行刷单: 例如在实现用户投票这种功能时,如果用户针对一个用户进行重复提交投票,这样会导致接口接收到用户重复提交的投票信息,这样会使投票结果与事实严重不符。

  • 接口超时重复提交: 很多时候 HTTP 客户端工具都默认开启超时重试的机制,尤其是第三方调用接口时候,为了防止网络波动超时等造成的请求失败,都会添加重试机制,导致一个请求提交多次。

  • 消息进行重复消费: 当使用 MQ 消息中间件时候,如果发生消息中间件出现错误未及时提交消费信息,导致发生重复消费。

本文讨论的是如何在服务端优雅地统一处理这种接口幂等性情况,如何禁止用户重复点击等客户端操作不在此次讨论范围。

1.3、引入幂等性后对系统的影响

幂等性是为了简化客户端逻辑处理,能放置重复提交等操作,但却增加了服务端的逻辑复杂性和成本,其主要是:

  • 把并行执行的功能改为串行执行,降低了执行效率。

  • 增加了额外控制幂等的业务逻辑,复杂化了业务功能;

所以在使用时候需要考虑是否引入幂等性的必要性,根据实际业务场景具体分析,除了业务上的特殊要求外,一般情况下不需要引入的接口幂等性。

二、如何设计幂等

幂等意味着一条请求的唯一性。不管是你哪个方案去设计幂等,都需要一个全局唯一的ID ,去标记这个请求是独一无二的。

  • 如果你是利用唯一索引控制幂等,那唯一索引是唯一的

  • 如果你是利用数据库主键控制幂等,那主键是唯一的

  • 如果你是悲观的方式,底层标记还是全局唯一的ID

2.1、全局的唯一性ID

全局唯一性ID,我们怎么去生成呢?你可以回想下,数据库主键Id怎么生成的呢?

是的,我们可以使用UUID,但是UUID的缺点比较明显,它字符串占用的空间比较大,生成的ID过于随机,可读性差,而且没有递增。

我们还可以使用雪花算法(Snowflake) 生成唯一性ID。

雪花算法是一种生成分布式全局唯一ID的算法,生成的ID称为Snowflake IDs。这种算法由Twitter创建,并用于推文的ID。

一个Snowflake ID有64位。

  • 第1位:Java中long的最高位是符号位代表正负,正数是0,负数是1,一般生成ID都为正数,所以默认为0。

  • 接下来前41位是时间戳,表示了自选定的时期以来的毫秒数。

  • 接下来的10位代表计算机ID,防止冲突。

  • 其余12位代表每台机器上生成ID的序列号,这允许在同一毫秒内创建多个Snowflake ID。

Redis处理接口幂等性的方案有哪些

当然,全局唯一性的ID,还可以使用百度的Uidgenerator,或者美团的Leaf

2.2、幂等设计的基本流程

幂等处理的过程,说到底其实就是过滤一下已经收到的请求,当然,请求一定要有一个全局唯一的ID标记哈。然后,怎么判断请求是否之前收到过呢?把请求储存起来,收到请求时,先查下存储记录,记录存在就返回上次的结果,不存在就处理请求。

一般的幂等处理就是这样,如下:

Redis处理接口幂等性的方案有哪些

三、接口幂等性常见解决方案

3.1、下游传递唯一请求编号

可能会想到的是,只要请求有唯一的请求编号,那么就能借用Redis做这个去重——只要这个唯一请求编号在Redis存在,证明处理过,那么就认为是重复的。

方案描述:

所谓唯一请求序列号,其实就是每次向服务端请求时候附带一个短时间内唯一不重复的序列号,该序列号可以是一个有序 ID,也可以是一个订单号,一般由下游生成,在调用上游服务端接口时附加该序列号和用于认证的 ID。

当上游服务器收到请求信息后拿取该 序列号 和下游 认证ID 进行组合,形成用于操作 Redis 的 Key,然后到 Redis 中查询是否存在对应的 Key 的键值对,根据其结果:

  • 如果存在,就说明已经对该下游的该序列号的请求进行了业务处理,这时可以直接响应重复请求的错误信息。

  • 如果不存在,就以该 Key 作为 Redis 的键,以下游关键信息作为存储的值(例如下游商传递的一些业务逻辑信息),将该键值对存储到 Redis 中 ,然后再正常执行对应的业务逻辑即可。

适用操作:

  • 插入操作

  • 更新操作

  • 删除操作

使用限制:

  • 要求第三方传递唯一序列号;

  • 需要使用第三方组件 Redis 进行数据效验;

主要流程:

Redis处理接口幂等性的方案有哪些

主要步骤:

  • 下游服务生成分布式 ID 作为序列号,然后执行请求调用上游接口,并附带“唯一序列号”与请求的“认证凭据ID”。

  • 上游服务进行安全效验,检测下游传递的参数中是否存在“序列号”和“凭据ID”。

  • 上游服务到 Redis 中检测是否存在对应的“序列号”与“认证ID”组成的 Key,如果存在就抛出重复执行的异常信息,然后响应下游对应的错误信息。如果不存在就以该“序列号”和“认证ID”组合作为 Key,以下游关键信息作为 Value,进而存储到 Redis 中,然后正常执行接来来的业务逻辑。

上面步骤中插入数据到 Redis 一定要设置过期时间。这样能保证在这个时间范围内,如果重复调用接口,则能够进行判断识别。如果不设置过期时间,很可能导致数据无限量的存入 Redis,致使 Redis 不能正常工作。

3.2、防重 Token 令牌

方案描述:

针对客户端连续点击或者调用方的超时重试等情况,例如提交订单,此种操作就可以用 Token 的机制实现防止重复提交。简单的说就是调用方在调用接口的时候先向后端请求一个全局 ID(Token),请求的时候携带这个全局 ID 一起请求(Token 最好将其放到 Headers 中),后端需要对这个 Token 作为 Key,用户信息作为 Value 到 Redis 中进行键值内容校验,如果 Key 存在且 Value 匹配就执行删除命令,然后正常执行后面的业务逻辑。如果不存在对应的 Key 或 Value 不匹配就返回重复执行的错误信息,这样来保证幂等操作。

使用限制:

  • 需要生成全局唯一 Token 串;

  • 需要使用第三方组件 Redis 进行数据效验;

主要流程:

  • 服务端提供获取 Token 的接口,该 Token 可以是一个序列号,也可以是一个分布式 ID 或者 UUID 串。

  • 客户端调用接口获取 Token,这时候服务端会生成一个 Token 串。

  • 然后将该串存入 Redis 数据库中,以该 Token 作为 Redis 的键(注意设置过期时间)。

  • 将 Token 返回到客户端,客户端拿到后应存到表单隐藏域中。

  • 客户端在执行提交表单时,把 Token 存入到 Headers 中,执行业务请求带上该 Headers。

  • 服务端接收到请求后从 Headers 中拿到 Token,然后根据 Token 到 Redis 中查找该 key 是否存在。

  • 服务端根据 Redis 中是否存该 key 进行判断,如果存在就将该 key 删除,然后正常执行业务逻辑。如果不存在就抛异常,返回重复提交的错误信息。

注意,在并发情况下,执行 Redis 查找数据与删除需要保证原子性,否则很可能在并发下无法保证幂等性。其实现方法可以使用分布式锁或者使用 lua 表达式来注销查询与删除操作。

到此,关于“Redis处理接口幂等性的方案有哪些”的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注编程网网站,小编会继续努力为大家带来更多实用的文章!

您可能感兴趣的文档:

--结束END--

本文标题: Redis处理接口幂等性的方案有哪些

本文链接: https://www.lsjlt.com/news/74016.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • Redis处理接口幂等性的方案有哪些
    这篇文章主要介绍“Redis处理接口幂等性的方案有哪些”,在日常操作中,相信很多人在Redis处理接口幂等性的方案有哪些问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”Redi...
    99+
    2024-04-02
  • 使用SpringBoot实现接口幂等性的方法有哪些
    使用SpringBoot实现接口幂等性的方法有哪些?针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。一、什么是幂等性幂等是一个数学与计算机学概念,在数学中某一元运算为幂等时,其...
    99+
    2023-06-07
  • 浅谈java接口的幂等性及解决方案
    目录一、什么情况下需要幂等二、幂等性解决方案2.1token机制(令牌)2.2各种锁机制2.3各种唯一约束2.4防重表2.5全局请求唯一id总结一、什么情况下需要幂等 用户多次点击...
    99+
    2024-04-02
  • SpringBoot处理接口幂等性的两种方法详解
    目录1. 接口幂等性实现方案梳理1.1 基于 Token1.2 基于请求参数校验2. 基于请求参数的校验在上周发布的 TienChin 项目视频中,我和大家一共梳理了六种幂等性解决方...
    99+
    2024-04-02
  • SpringBoot结合Redis实现接口幂等性的示例代码
    目录介绍实现过程引入 maven 依赖spring 配置文件写入引入 Redis自定义注解token 的创建和实现拦截器的配置测试用例介绍 幂等性的概念是,任意多次执行所产生的影响都...
    99+
    2024-04-02
  • redis异常处理方法有哪些
    在Redis中,可以通过以下几种方式处理异常:1. 异常捕获:在Redis操作过程中,可以使用try-catch语句来捕获异常,并在...
    99+
    2023-09-16
    redis
  • 连接redis的方法有哪些
    连接 Redis 的方法有以下几种: 使用 Redis 客户端库:Redis 客户端库是用于连接和与 Redis 服务器进行通信...
    99+
    2024-04-09
    redis
  • redis处理高并发的方式有哪些
    Redis处理高并发的方式有以下几种: 垂直扩展:增加Redis服务器的内存和CPU资源,提高单个Redis实例的性能。 水...
    99+
    2024-04-09
    redis
  • PHP中接口的特性有哪些
    这期内容当中小编将会给大家带来有关PHP中接口的特性有哪些,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。VideoCard.php 接口文件(显卡的功能接口定义)<php interfac...
    99+
    2023-06-17
  • 队列在PHP与MySQL中的消息去重和消息幂等性的处理方法
    在实际开发中,我们经常会使用消息队列来处理异步任务,以提高系统的性能和可靠性。然而,在使用队列时,我们经常会遇到消息的去重和幂等性处理的问题。本文将介绍在PHP与MySQL中处理消息去重和消息幂等性的一些常用方法,并给出具体的代码示例。消息...
    99+
    2023-10-21
    MySQL PHP 队列
  • golang接口隔离的好处有哪些
    Golang中的接口隔离有以下好处: 代码解耦:接口隔离可以将代码中的不同功能隔离开来,使得它们可以独立开发、测试和维护。这样可...
    99+
    2024-02-29
    golang
  • 队列技术在PHP与MySQL中的消息幂等性和数据去重的处理方法
    引言:随着互联网的快速发展,网站和应用程序的并发量不断增加,对于数据存储和处理的效率要求也越来越高。而队列技术成为了解决高并发场景下数据处理问题的重要工具之一。本文将介绍如何利用队列技术在PHP与MySQL中实现消息幂等性和数据去重的处理方...
    99+
    2023-10-21
    MySQL PHP 队列
  • mongodb性能优化的方案有哪些
    MongoDB性能优化的方案有以下几种: 索引优化:通过合理地创建和使用索引来提高查询性能。可以根据查询频率和查询条件来选择合适...
    99+
    2023-10-21
    mongodb
  • C#调用接口的方式有哪些
    这篇“C#调用接口的方式有哪些”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇“C#调用接口的方式有哪些”文章吧。在用C#调用接...
    99+
    2023-07-02
  • java接口调用的方法有哪些
    Java接口调用的方法有以下几种:1. 实现接口:通过实现接口的类来调用接口中定义的方法。实现接口的类必须实现接口中所有的方法。2....
    99+
    2023-08-08
    java
  • java请求接口的方式有哪些
    Java请求接口的方式有以下几种:1. 使用HttpURLConnection:使用Java标准库中的HttpURLConnecti...
    99+
    2023-10-25
    java
  • spring接口注入的方式有哪些
    Spring接口注入的方式有以下几种: 构造器注入:通过构造函数将依赖注入到目标对象中。 属性注入:通过属性的setter方...
    99+
    2023-10-25
    spring
  • java接口的实现方式有哪些
    java中实现接口的方式有:1.使用implements关键字实现;2.使用匿名内部类实现;3.使用interface实现;java中实现接口的方式有以下几种使用implements关键字实现public interface Com{}pu...
    99+
    2024-04-02
  • Python文本处理的案例有哪些
    本篇内容主要讲解“Python文本处理的案例有哪些”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Python文本处理的案例有哪些”吧!1提取 PDF 内容# pip inst...
    99+
    2023-06-29
  • Java处理延时任务的解决方案有哪些
    本篇内容介绍了“Java处理延时任务的解决方案有哪些”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!数据库轮询原理通过一个线程定时的扫描数据库...
    99+
    2023-06-30
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作